Beheben von Verzögerungen bei der Erstellung von Batchknoten beim Neustarten oder Reimaging

In diesem Artikel wird erläutert, wie Die Erstellung von Batchknoten beim Neustart oder Umbilden eines Knotens aufgelöst wird. Vermeiden Sie Probleme in Microsoft Azure Batch, die durch die Installation der großen Python-Laufzeit- und Python-Pakete verursacht werden. Diese Installation verursacht lange Verzögerungen und mögliche unerwartete Fehler, wenn ein Batchknoten zum ersten Mal einem Batchpool hinzugefügt wird, oder wenn der Knoten neu gestartet oder umimages neu erstellt wird.

Symptome

Wenn Sie einen Batchpool erstellen und dem Pool einen Knoten hinzufügen oder den Knoten neu starten oder neu abbilden, dauert die Anwendungsinstallation zu lange, oder sie schlägt nach einer langen Installationszeit fehl.

Ursache

Dieses Problem tritt auf, da ein Python-Paket zu groß ist, um es als Startaufgabe zu verwenden.

Wenn Sie einen Batchpool in Azure Batch erstellen und einen Batchknoten hinzufügen, empfiehlt es sich, eine Startaufgabe zum Vorbereiten der Betriebssystemumgebung zu verwenden. Diese Startaufgabe kann folgende Aktionen ausführen:

• Installieren Sie die Anwendungen, die Ihre Aufgaben ausführen.

• Starten Sie Hintergrundprozesse, wenn der Batchknoten zuerst dem Pool hinzugefügt wird, oder wenn der Knoten neu gestartet oder umimages neu erstellt wird.

Für die Python-Sprachlaufzeit und -Anwendungen, für die Python ausgeführt werden muss, kann das Paket jedoch so groß sein, dass die Installation der Startaufgabe sehr lange dauert. Selbst nachdem die meisten Installationen aufgetreten sind, kann die Installation aufgrund eines unerwarteten Problems weiterhin fehlschlagen.

Lösung

Um dieses Problem zu beheben, stimmen Sie mit den Speicherorten des virtuellen Computers (VM) und batchkontospeicherorten und Betriebssystemversionen überein, und installieren Sie Python und die zugehörigen Pakete vor dem Erfassen eines Gen1-Images.

Verwenden Sie ein vordefiniertes benutzerdefiniertes Image, um Batchknoten zuzuweisen. Allgemeine Informationen zu diesem Prozess finden Sie unter Verwenden eines verwalteten Images zum Erstellen eines benutzerdefinierten Imagepools.

Befolgen Sie die folgenden allgemeinen Methoden, um längere Installationszeiten zu vermeiden und Installationsfehler zu vermeiden:

• Geben Sie denselben Speicherort oder dieselbe Region an, der beim Erstellen des Batchkontos verwendet werden soll, und erstellen Sie den VM-Batchknoten.

• Wählen Sie ein Bild mit Gen1 im Namen aus, z . B. Windows Server 2019 Datacenter - Gen1 (Windows-Knoten) oder Ubuntu Server 18.04 LTS - Gen1 (Linux-Knoten). Ein Gen1-Image ist erforderlich, da einige VM-Familien keine Gen2-Images unterstützen.

• Stellen Sie beim Erstellen eines Knotenpools im Azure-Portal sicher, dass die Sku-Liste im Abschnitt "Betriebssystem" die von Ihnen angegebene Systemversion enthält.

• Passen Sie Ihre Python-Installation so an, dass sie auf dem Image vorinstalliert wird und für alle Benutzer funktioniert.

Systemspezifische Verfahren

In den folgenden Abschnitten im Registerkartenformat werden die Schritte beschrieben, die Sie für einen Windows-Batchknoten oder einen Linux-Batchknoten ausführen müssen.

Windows

Windows-Knoten: Installieren Sie die erforderliche Version von Python auf dem C-Laufwerk, und fügen Sie den Systempfad manuell an.

Zusammenfassung der Vorgehensweise

Nachdem Sie den virtuellen Computer erstellt und gestartet haben, stellen Sie mithilfe des Remotedesktopprotokolls (RDP) eine Verbindung mit dem virtuellen Computer her. Installieren Sie dann alles, was Sie auf der VM benötigen, einschließlich der erforderlichen Version der Python-Runtime (z. B. Python 3.10.4), und bearbeiten Sie den Systempfad. Erfassen Sie schließlich das VM-Image, stellen Sie es in einem Batchpool bereit, der das VM-Image verwendet, eine Verbindung mit dem neuen Batchpoolknoten herstellt, und testen Sie es dann, um sicherzustellen, dass die vorinstallierte Python-Laufzeit und -Pakete ordnungsgemäß funktionieren.

Prozedurschritte

1. Erstellen Sie eine Windows-VM im Azure-Portal, indem Sie die folgenden Einstellungen angeben.

   Einstellungsname	Einstellungswert
   Region	Dieselbe Region, die Ihrem Batchkonto zugewiesen ist
   Abbildung	Ein Windows-Image mit Gen1 (nicht Gen2) im Namen und wird vom Batchdienst unterstützt.

2. Stellen Sie mithilfe von RDP eine Verbindung mit dem virtuellen Computer her.

3. Führen Sie den Python-Setup-Assistenten aus, und wählen Sie dann die Option "Installation anpassen" aus. Wechseln Sie dann auf der Seite "Erweiterte Optionen " zum Feld "Installationsspeicherort anpassen", und geben Sie einen Pfad auf dem Laufwerk "C" an.

4. Bearbeiten Sie die Systemumgebungsvariable soPath, dass sie den Python-Installationspfad (z. B. C:\Python\) und den Pfad zu den installierten Python-Paketen (z. B. C:\Python\Scripts\) enthält.

   Notiz

   Der Python-Setup-Assistent fügt diese Pfade nur der Benutzerumgebungsvariable für Path. Daher müssen Sie die Pfade zur entsprechenden Systemumgebungsvariable hinzufügen. Andernfalls werden beim Erfassen des VM-Images die Python-Einstellungen und die zusätzlichen Softwarepakete, die der Benutzer installiert hat, aus dem Image gelöscht.

   Führen Sie die folgenden Schritte aus, um diese Pfade an die Systemumgebungsvariable anzufügen:

   1. Wählen Sie "Start" aus, und suchen Sie dann nach "Einstellungen", und wählen Sie dann "Einstellungen" aus.

   2. Wählen Sie in der Einstellungs-App "System>Über>erweiterte Systemeinstellungen" aus.

   3. Wählen Sie im Dialogfeld "Systemeigenschaften " die Registerkarte "Erweitert " und dann "Umgebungsvariablen" aus.

   4. Wechseln Sie im Dialogfeld "Umgebungsvariablen " zum Abschnitt "Systemvariablen ", wählen Sie die Variable "Pfad " und dann " Bearbeiten" aus.

   5. Wählen Sie im Dialogfeld "Umgebungsvariable bearbeiten" "Neu" aus, und geben Sie dann den Pfad zu den installierten Python-Paketen ein. Wiederholen Sie dann diesen Schritt, um den Pfad zur Python-Laufzeit einzugeben.

   6. Wählen Sie dreimal OK aus, um die Änderungen in den drei Dialogfeldern anzuwenden.

5. Testen Sie die Python-Installation in einer Konsole.

   Nachdem Sie beispielsweise ausgeführt python --version haben, um die version von Python zu überprüfen, die Sie installiert haben, können Sie den Python-Interpreter ausführen, um zu versuchen, ein Paket zu importieren, das noch nicht installiert wurde (z numpy. B. ). Nachdem Sie die erwartete Ausnahme erhalten ModuleNotFoundError haben, führen Sie den pip install <package-name> Befehl aus, um das Paket zu installieren, und führen Sie dann erneut den Python-Interpreter aus, um dieses Paket zu importieren. Der Importbefehl sollte jetzt erfolgreich sein.

6. Erfassen Sie das VM-Image, indem Sie die Schritte unter Erstellen eines Images eines virtuellen Computers im Portal ausführen, aber nur die folgenden Einstellungen auf der Seite "Bild erstellen" anwenden.

   Einstellungsname	Einstellungswert
   Ressourcengruppe	Wählen Sie aus der Liste der Ressourcengruppen aus, oder wählen Sie " Neu erstellen" aus, um eine Ressourcengruppe zu erstellen.
   Ziel-Azure-Computekatalog	Wählen Sie in der Liste der Azure-Computekataloge aus, oder wählen Sie " Neu erstellen" aus, um einen Azure-Computekatalog zu erstellen.
   Ziel-VM-Imagedefinition	Wählen Sie Neu erstellen. Geben Sie auf der Seite "VM-Imagedefinition erstellen" nur den Namen der VM-Imagedefinition ein, den Sie dem Image zuweisen möchten. (Die Seite stellt automatisch die Publisher-, Angebots- und SKU-Einstellungen .)
   Versionsnummer	Geben Sie eine Versionsnummer ein, die Sie dem VM-Image zugeben möchten.

7. Nachdem Sie die Vm-Imageeinstellungen angewendet haben, wählen Sie "Überprüfen" und "Erstellen " aus, um die Einstellungen zu überprüfen, und wählen Sie dann "Erstellen" aus, um das Image zu erstellen. In diesem Schritt werden die folgenden drei Ressourcentypen erstellt:

   • Azure Compute Gallery
   • Benutzerdefinierte Bilddefinition
   • Version der benutzerdefinierten Bilddefinition

8. Führen Sie nach dem Erstellen der drei Ressourcen die folgenden Schritte aus, um einen neuen Batchpool zu erstellen, der das VM-Image verwendet:

   1. Suchen Sie im Azure-Portal nach Batchkonten, und wählen Sie sie aus.

   2. Wählen Sie in der Liste der Batchkonten Ihr Konto aus.

   3. Wählen Sie im Menübereich Ihres Batchkontos "Pools" und dann " Hinzufügen" aus, um einen Batchpool zu erstellen.

   4. Nehmen Sie auf der Seite "Pool hinzufügen" die folgenden Einstellungen vor, und wählen Sie dann "OK" aus.

      Einstellungsname	Einstellungswert
      Pool-ID	Der neue Name für Ihren Pool
      Imagetyp	Benutzerdefiniertes Bild – Freigegebene Bildergalerie *
      Shared Image Gallery	Der Name des Azure-Ziel-Computekatalogs, den Sie beim Erstellen des VM-Images angegeben haben
      Abbildung	Der Name der VM-Imagedefinition, den Sie beim Erstellen des VM-Images angegeben haben
      Version	Die Versionsnummer, die Sie beim Erstellen des VM-Images angegeben haben
      Betriebssystem	Windows
      Betriebssystem-Distribution	windowsserver
      Betriebssystem-Sku	Der Produktcode der von Ihnen ausgewählten Betriebssystemversion (z . B. microsoftwindowsserver-2019-datacenter)

      * Der freigegebene Bilderkatalog ist ein weiterer Name für den Azure Compute Gallery. Dies ist eine der Ressourcen, die während der Erstellung ihres VM-Images erstellt wurden.

9. Wechseln Sie nach der Zuweisung des Batchpoolknotens zur Seite "Batchpoolknoten", und wählen Sie dann im Menü "Überschrift" die Option "Verbinden" aus.

10. Wählen Sie im Bereich "Verbinden " die Option "Benutzer generieren" aus, wählen Sie die Schaltfläche "Zufällige Benutzer generieren" und dann " RDP-Datei herunterladen" aus.

11. Führen Sie die heruntergeladene RDP-Datei aus, um eine Verbindung mit dem neuen Batchknoten herzustellen.

12. Testen Sie die Python-Installation erneut, um sicherzustellen, dass die vorinstallierte Version ordnungsgemäß funktioniert.

Linux

Linux-Knoten: Führen Sie sudo aus, um Python 3.8 und seine externen Pakete zu installieren.

Zusammenfassung der Vorgehensweise

Nachdem Sie den virtuellen Computer erstellt und gestartet haben, stellen Sie mithilfe von Secure Shell (SSH) eine Verbindung mit dem virtuellen Computer her. Installieren Sie dann alles, was Sie auf der VM benötigen, einschließlich der Version 3.8 der Python-Runtime (eine höhere Version der Standardversion 3.6). Verwenden Sie dazu den sudo Befehl, um Python 3.8 und seine Pakete allen Benutzern zur Verfügung zu stellen. Erfassen Sie schließlich das VM-Image, stellen Sie es in einem Batchpool bereit, der das VM-Image verwendet, eine Verbindung mit dem neuen Batchpoolknoten herstellt, und testen Sie es dann, um sicherzustellen, dass die vorinstallierte Python 3.8-Laufzeit und -Pakete ordnungsgemäß funktionieren.

Prozedurschritte

1. Erstellen Sie eine Linux-VM im Azure-Portal, indem Sie die folgenden Einstellungen angeben.

   Einstellungsname	Einstellungswert
   Region	Dieselbe Region, die Ihrem Batchkonto zugewiesen ist
   Abbildung	Ein Linux-Image mit Gen1 (nicht Gen2) im Namen und wird vom Batchdienst unterstützt.

2. Stellen Sie mithilfe von SSH eine Verbindung mit einer Linux-VM her.

3. Führen Sie die folgenden Befehle aus, um Python 3.8 und das zugehörige Paketinstallationstool (pip) zu installieren:

   sudo apt-get update
   sudo apt install -y python3.8
   sudo apt-get -y install python3-pip
   sudo python3.8 -m pip install --upgrade pip
   

4. Führen Sie die folgenden Python 3.8-Befehle aus, um die Version von Python zu überprüfen und das requests externe Paket zu installieren.

   python3.8 --version
   sudo python3.8 -m pip install requests
   

   Notiz

   • Sie sollten Python-Pakete mithilfe der sudo python3.8 -m pip install <package-name> Syntax installieren. Wenn Sie versuchen, ein Python-Paket mithilfe sudo pip install <package-name> oder sudo pip3 install <package-name>zu installieren, wird das Paket möglicherweise in der Standardversion 3.6 von Python installiert. Dadurch wird das Paket für Anwendungen, für die Python 3.8 erforderlich ist, nicht verfügbar gemacht.

   • Sie müssen den sudo Befehl verwenden, wenn Sie Pakete installieren. Wenn Sie nicht einschließen sudo, wird das installierte Paket von anderen Benutzern nicht erkannt.

5. Führen Sie den python3.8 interaktiven Modus aus, und geben import requests Sie dann ein, um zu überprüfen, ob das requests Paket erfolgreich installiert wurde und in Python 3.8 importiert werden kann.

6. Aufheben der Bereitstellung der Linux-VM durch Ausführen des folgenden Befehls:

   sudo waagent -deprovision+user
   

   Warnung

   • Wenn Sie diesen Schritt überspringen, können die Batchknoten möglicherweise nicht mehr verwendet werden.

   • Nachdem Sie den Befehl zum Aufheben der Bereitstellung des virtuellen Computers ausgeführt haben, können Sie keine Verbindung mehr mit dieser VM herstellen.

7. Erfassen Sie das VM-Image, indem Sie die Schritte unter Erstellen eines Images eines virtuellen Computers im Portal ausführen, aber nur die folgenden Einstellungen auf der Seite "Bild erstellen" anwenden.

   Einstellungsname	Einstellungswert
   Ressourcengruppe	Wählen Sie aus der Liste der Ressourcengruppen aus, oder wählen Sie " Neu erstellen" aus, um eine Ressourcengruppe zu erstellen.
   Ziel-Azure-Computekatalog	Wählen Sie in der Liste der Azure-Computekataloge aus, oder wählen Sie " Neu erstellen" aus, um einen Azure-Computekatalog zu erstellen.
   Ziel-VM-Imagedefinition	Wählen Sie Neu erstellen. Geben Sie dann nur den Namen der VM-Imagedefinition ein, den Sie dem Image auf der Seite "Vm-Imagedefinition erstellen" zuweisen möchten. (Die Seite stellt automatisch die Publisher-, Angebots- und SKU-Einstellungen .)
   Versionsnummer	Geben Sie eine Versionsnummer ein, die dem VM-Image zugewiesen werden soll.

8. Nachdem Sie die Vm-Imageeinstellungen angewendet haben, wählen Sie "Überprüfen" und "Erstellen " aus, um die Einstellungen zu überprüfen, und wählen Sie dann "Erstellen" aus, um das Image zu erstellen. In diesem Schritt werden die folgenden drei Ressourcentypen erstellt:

   • Azure Compute Gallery
   • Benutzerdefinierte Bilddefinition
   • Version der benutzerdefinierten Bilddefinition

9. Führen Sie nach dem Erstellen der drei Ressourcen die folgenden Schritte aus, um einen neuen Batchpool zu erstellen, der das VM-Image verwendet:

   1. Suchen Sie im Azure-Portal nach Batchkonten, und wählen Sie sie aus.

   2. Wählen Sie in der Liste der Batchkonten Ihr Konto aus.

   3. Wählen Sie im Menübereich Ihres Batchkontos "Pools" aus. Wählen Sie dann "Hinzufügen" aus, um einen Batchpool zu erstellen.

   4. Nehmen Sie auf der Seite "Pool hinzufügen" die folgenden Einstellungen vor, und wählen Sie dann "OK" aus:

      Einstellungsname	Einstellungswert
      Pool-ID	Der neue Name für Ihren Pool
      Imagetyp	Benutzerdefiniertes Bild – Freigegebene Bildergalerie *
      Shared Image Gallery	Der Name des Azure-Ziel-Computekatalogs, den Sie beim Erstellen des VM-Images angegeben haben
      Abbildung	Der Name der VM-Imagedefinition, den Sie beim Erstellen des VM-Images angegeben haben
      Version	Die Versionsnummer, die Sie beim Erstellen des VM-Images angegeben haben
      Betriebssystem	Linux
      Betriebssystem-Distribution	Einer der Linux-Distributionsnamen
      Betriebssystem-Sku	Der Produktcode der betriebssystemversion, die Sie ausgewählt haben

      * Der freigegebene Bilderkatalog ist ein weiterer Name für den Azure Compute Gallery. Dies ist eine der Ressourcen, die während der Erstellung ihres VM-Images erstellt wurden.

10. Nachdem der Batchpoolknoten zugewiesen wurde, stellen Sie mithilfe von SSH eine Verbindung mit dem Knoten her.

11. Testen Sie die Python 3.8-Installation erneut, um sicherzustellen, dass die vorinstallierte Version ordnungsgemäß funktioniert.

References

• Ausführen des ersten Batchauftrags im Azure-Portal

Kontaktieren Sie uns für Hilfe

Wenn Sie Fragen haben oder Hilfe mit Ihren Azure-Gutschriften benötigen, dann erstellen Sie beim Azure-Support eine Support-Anforderung oder fragen Sie den Azure Community-Support. Sie können auch Produktfeedback an die Azure Feedback Community senden.