View a markdown version of this page

Bewährte Methoden für Bulk-Put-Artikel in DynamoDB - Amazon DynamoDB

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Bewährte Methoden für Bulk-Put-Artikel in DynamoDB

Im Folgenden finden Sie die bewährten Methoden für die Verwendung von Bulk-Put-Artikeln.

Teilen Sie Ihre Eingabe auf mehrere S3-Objekte ähnlicher Größe auf

DynamoDB liest und verarbeitet S3-Objekte parallel, sodass ein Satz ähnlich großer Objekte schneller fertig gestellt wird als ein großes Objekt oder eine Mischung aus sehr großen und sehr kleinen Objekten. Jeder Vorgang unterstützt bis zu 50.000 S3-Objekte, und jedes Objekt kann bis zu 5 GB groß sein. Wenn Ihr Datensatz mehr als 50.000 Objekte enthält, konsolidieren Sie sie zu weniger, größeren Objekten.

Halten Sie die Größenbeschränkung für Ihre Performance-Stufe ein

Jede Leistungsstufe hat ihr eigenes Limit für die Gesamteingabegröße eines Vorgangs. Um ein Dataset zu laden, das den Grenzwert überschreitet, teilen Sie ihn in mehrere Operationen auf, oder verwenden Sie die Performance-Stufe Accelerated, wenn Ihre Tabelle dies unterstützt. Die Grenzwerte finden Sie unter Kontingente für Artikel in großen Mengen.

Verteilen Sie Schreibvorgänge gleichmäßig über den Schlüsselraum

Bulk-Put-Elemente funktionieren am besten, wenn Ihre Daten Partitionsschlüssel mit hoher Kardinalität haben, die gleichmäßig über den Schlüsselbereich verteilt sind. Wenn ein S3-Objekt Elemente enthält, die nach Partitionsschlüsseln sortiert sind, zielen aufeinanderfolgende Schreibvorgänge auf dieselbe Partition ab. Dadurch entsteht eine ständig wechselnde Partition, die den Vorgang verlangsamt. Ordnen Sie die Reihenfolge der sortierten Daten nach dem Zufallsprinzip an, bevor Sie den Vorgang starten. Weitere Informationen finden Sie unter Effiziente Verteilung der Schreibaktivität beim Hochladen von Daten in DynamoDB.

Überprüfen Sie Ihre Eingabe, bevor Sie beginnen

Führen Sie einen Validierungslauf für eine Stichprobe Ihrer Dateien durch, bevor Sie einen großen Vorgang einreichen, da ein einzelner Datensatz, den DynamoDB nicht analysieren kann, das Lesen des restlichen Objekts verhindert und den gesamten Vorgang beenden kann FAILED. Die Bedingungen, unter denen ein Objekt gestoppt wird, finden Sie unter Validierungsfehler, die ein Objekt stoppen.

Verwenden Sie Bedingungsausdrücke, um vorhandene Daten zu schützen

Wenn Sie vorhandene oder neuere Daten nicht überschreiben dürfen, fügen Sie jedem Datensatz eine Bedingung, die nur zum Einfügen dient, oder einen Versionsschutz hinzu, einschließlich Schlüsseln, die Ihre Anwendung während der Ausführung des Vorgangs schreibt. Die Syntax und Beispiele finden Sie unter Per-item Bedingungsausdrücke und Gleichzeitige Schreibvorgänge auf dieselben Schlüssel.

Ändern Sie keine S3-Objekte während eines aktiven Vorgangs

Lassen Sie Ihre S3-Quellobjekte unverändert, während ein Vorgang ausgeführt wird. Das Ändern eines Eingabeobjekts kann dazu führen, dass der Vorgang mit einem Fehlercode fehlschlägt ObjectModifiedInS3DuringImport. Warten Sie, bis der Vorgang abgeschlossen ist, bevor Sie die Quelldateien ändern, und starten Sie ihn mit einer stabilen Version der Objekte neu, falls dieser Fehler auftritt.

Verwenden Sie ein Client-Token, wenn Sie eine Startanforderung erneut versuchen

Übergeben Sie eine ClientToken mit StartBulkPutItems wann immer Sie die Anfrage erneut versuchen, sodass bei einem erneuten Versuch die bestehende Operation zurückgegeben wird, anstatt eine zweite zu starten. Informationen zur Funktionsweise des Tokens finden Sie unter Starten eines Massen-Put-Vorgangs für Artikel.

Schützen Sie die Verbraucher nachgeschalteter Streams

In einer Tabelle, in der DynamoDB-Streams oder ein Kinesis-Datenstream aktiviert sind, erzeugt jeder Bulk-Schreibvorgang einen Stream-Datensatz mit der Schreibgeschwindigkeit der Operation. Verbraucher, die auf normalen Traffic ausgelegt sind, können ins Hintertreffen geraten. DynamoDB Streams speichert Aufzeichnungen 24 Stunden lang. Stellen Sie ein MaxWriteRequestUnits um die Schreibrate von Massenartikeln auf ein Niveau zu begrenzen, das Ihre Verbraucher aufrechterhalten können.

Stellen Sie nicht ein MaxWriteRequestUnits niedriger als du brauchst. Eine niedrige Obergrenze verlangsamt den Vorgang, sodass ein umfangreicher Vorgang möglicherweise nicht innerhalb der maximalen Verarbeitungszeit abgeschlossen wird und endet FAILED mit Fehlercode Timeout, wobei die übrigen Artikel ungeschrieben bleiben. Wählen Sie die höchste Rate, die Ihre Verbraucher aufrechterhalten können. Weitere Informationen finden Sie unter Statuswerte.