Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.
Parallelität von Aufträgen und Warteschlangen für eine serverlose EMR-Anwendung
Geben Sie ab Amazon EMR Version 7.0.0 und höher das Timeout der Warteschlange für die Auftragsausführung und die Konfiguration der Parallelität für Ihre Anwendung an. Wenn Sie diese Konfiguration angeben, stellt Amazon EMR Serverless Ihren Job zunächst in die Warteschlange und beginnt mit der Ausführung auf der Grundlage der Parallelitätsnutzung in Ihrer Anwendung. Wenn Sie beispielsweise 10 Jobs gleichzeitig ausführen, werden in Ihrer Anwendung nur zehn Jobs gleichzeitig ausgeführt. Die verbleibenden Jobs werden in die Warteschlange gestellt, bis einer der laufenden Jobs beendet wird. Wenn das Warteschlangen-Timeout früher erreicht wird, wird das Zeitlimit für Ihren Job überschritten. Weitere Informationen finden Sie unter Status der Auftragsausführung.
Hauptvorteile von Parallelität und Warteschlangen
Parallelität von Aufträgen und Warteschlangen bieten die folgenden Vorteile, wenn viele Aufträge eingereicht werden müssen:
Es hilft dabei, die gleichzeitige Ausführung von Aufträgen zu kontrollieren und so Ihre Kapazitätsgrenzen auf Anwendungsebene effizient zu nutzen.
Die Warteschlange kann eine plötzliche Flut von Auftragsübermittlungen mit einer konfigurierbaren Timeout-Einstellung enthalten.
Erste Schritte mit Parallelität und Warteschlangen
Die folgenden Verfahren zeigen verschiedene Möglichkeiten, Parallelität und Warteschlangen zu implementieren.
Mit dem AWS CLI
Erstellen Sie eine Amazon EMR-Anwendung mit Warteschlangen-Timeout und gleichzeitigen Auftragsausführungen:
aws emr-serverless create-application \ --release-label emr-7.0.0 \ --type SPARK \ --scheduler-configuration '{"maxConcurrentRuns": 1, "queueTimeoutMinutes": 30}'Aktualisieren Sie eine Anwendung, um das Timeout und die Parallelität der Job-Warteschlange zu ändern:
aws emr-serverless update-application \ --application-idapplication-id\ --scheduler-configuration '{"maxConcurrentRuns": 5, "queueTimeoutMinutes": 30}'AnmerkungSie können Ihre bestehende Anwendung aktualisieren, um die Parallelität von Aufträgen und das Einreihen in die Warteschlange zu ermöglichen. Dazu muss die Anwendung über ein Veröffentlichungslabel verfügen emr-7.0.0 oder später.
Mit dem AWS-Managementkonsole
Die folgenden Schritte veranschaulichen, wie Sie mit der Parallelität von Aufträgen und der Warteschlangenstellung beginnen können. Verwenden Sie dazu AWS-Managementkonsole:
Gehen Sie zu EMR Studio und wählen Sie, ob Sie eine Anwendung mit Release-Label erstellen möchten EMR-7.0.0 oder höher.
Unter Optionen zur Einrichtung der Anwendung, wählen Sie die Option Verwenden Sie benutzerdefinierte Einstellungen.
Unter Zusätzliche Konfigurationen es gibt einen Abschnitt für Einstellungen für die Auftragsausführung. Wählen Sie die Option Aktivieren Sie die Parallelität von Aufträgen um die Funktion zu aktivieren.
Wählen Sie nach der Auswahl Gleichzeitige Auftragsausführungen und Timeout in der Warteschlange um die Anzahl der gleichzeitigen Auftragsausführungen bzw. das Warteschlangen-Timeout zu konfigurieren. Wenn Sie für diese Einstellungen keine Werte eingeben, werden die Standardwerte verwendet.
Wählen Sie Anwendung erstellen und die Anwendung wird mit aktivierter Funktion erstellt. Gehen Sie zur Überprüfung zum Dashboard, wählen Sie Ihre Anwendung aus und überprüfen Sie auf der Registerkarte „Eigenschaften“, ob die Funktion aktiviert ist.
Senden Sie nach der Konfiguration Jobs mit aktivierter Funktion ein.
Überlegungen zur Parallelität und zur Warteschlangenstellung
Berücksichtigen Sie bei der Implementierung von Parallelität und Warteschlangen Folgendes:
Parallelität von Aufträgen und Warteschlangen werden in Amazon EMR Version 7.0.0 und höher unterstützt.
Parallelität von Aufträgen und Warteschlangen sind in Amazon EMR Version 7.3.0 und höher standardmäßig aktiviert.
Sie können aktualisieren
maxConcurrentRunsfür eine Bewerbung in der GESTARTET Staat.Der gültige Bereich für
maxConcurrentRunsist 1 bis 1000 und fürqueueTimeoutMinuteses ist 15 bis 720.Maximal 2000 Jobs können in der IN DIE WARTESCHLANGE GESTELLT Bundesstaat für ein Konto.
Parallelität und Warteschlangen gelten für Batch- und Streaming-Jobs. Es kann nicht für interaktive Jobs verwendet werden. Weitere Informationen finden Sie unter Führen Sie interaktive Workloads mit EMR Serverless über EMR Studio aus.