Überlegungen und Einschränkungen - Amazon Athena
Apache Spark Version 3.5Pyspark-Engine, Version 3

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Überlegungen und Einschränkungen

Apache Spark Version 3.5

Im Folgenden sind die Überlegungen und Einschränkungen für die Release-Version Apache Spark Version 3.5 aufgeführt:

  • Diese Release-Version ist in den folgenden Versionen verfügbar AWS-Regionen:

    • Asien-Pazifik (Mumbai)

    • Asia Pacific (Seoul)

    • Asien-Pazifik (Singapur)

    • Asien-Pazifik (Sydney)

    • Asien-Pazifik (Tokio)

    • Canada (Central)

    • Europe (Frankfurt)

    • Europa (Irland)

    • Europa (London)

    • Europe (Paris)

    • Europa (Stockholm)

    • Südamerika (São Paulo)

    • USA Ost (Nord-Virginia)

    • USA Ost (Ohio)

    • USA West (Oregon)

  • Diese Engine-Version unterstützt keine Athena In-Console-Notebooks oder Notebooks. APIs Stattdessen ist diese Version in Amazon SageMaker AI Unified Studio-Notebooks integriert. Sie können auch kompatible Spark Connect-Clients verwenden.

  • Die Berechnung APIs -StartCalculationExecution, ListCalculationExecutions undGetCalculationExecution, werden in dieser Version nicht unterstützt.

  • Sie können eine Arbeitsgruppe nicht von PySpark Engine-Version 3 auf Apache Spark-Version 3.5 aktualisieren.

Pyspark-Engine, Version 3

Im Folgenden sind die Überlegungen und Einschränkungen für die Release-Version Pyspark Engine Version 3 aufgeführt:

  • Diese Release-Version ist in den folgenden AWS-Regionen Versionen verfügbar:

    • Asien-Pazifik (Mumbai)

    • Asien-Pazifik (Singapur)

    • Asien-Pazifik (Sydney)

    • Asien-Pazifik (Tokio)

    • Europe (Frankfurt)

    • Europa (Irland)

    • USA Ost (Nord-Virginia)

    • USA Ost (Ohio)

    • USA West (Oregon)

  • AWS Lake Formation wird nicht unterstützt.

  • Tabellen, die Partitionsprojektion verwenden, werden nicht unterstützt.

  • Apache-Spark-fähige Arbeitsgruppen können den Athena-Notebook-Editor verwenden, aber nicht den Athena-Abfrage-Editor. Nur Athena-SQL-Arbeitsgruppen können den Athena-Abfrageeditor verwenden.

  • Engine-übergreifende Ansichten-Abfragen werden nicht unterstützt. Mit Athena SQL erstellte Ansichten können von Athena für Spark nicht abgefragt werden. Da die Ansichten für die beiden Engines unterschiedlich implementiert sind, sind sie nicht für die Engine-übergreifende Verwendung kompatibel.

  • MLlib (Apache Spark-Bibliothek für maschinelles Lernen) und das pyspark.ml Paket werden nicht unterstützt. Eine Liste der unterstützten Python-Bibliotheken finden Sie unter Liste der vorinstallierten Python-Bibliotheken.

  • pip install wird derzeit in Athena für Spark-Sitzungen nicht unterstützt.

  • Pro Notebook ist nur eine aktive Sitzung zulässig.

  • Wenn mehrere Benutzer die Konsole zum Öffnen einer vorhandenen Sitzung in einer Arbeitsgruppe verwenden, greifen diese auf dasselbe Notebook zu. Um Verwirrung zu vermeiden, öffnen Sie nur Sitzungen, die Sie selbst erstellt haben.

  • Die Hosting-Domains für Apache Spark-Anwendungen, die Sie möglicherweise mit Amazon Athena verwenden (z. B. analytics-gateway.us-east-1.amazonaws.com), sind in der Internet Public Suffix List (PSL) registriert. Falls Sie jemals sensible Cookies in Ihren Domains einrichten müssen, empfehlen wir Ihnen, Cookies mit einem __Host--Präfix zu verwenden, um Ihre Domain vor CSRF-Versuchen (Cross-Site Request Forgery) zu schützen. Weitere Informationen finden Sie auf der Set-Cookie-Seite in der Entwicklerdokumentation von Mozilla.org.

  • Informationen zur Fehlerbehebung bei Spark-Notebooks, -Sitzungen und -Arbeitsgruppen in Athena finden Sie unter Fehlerbehebung in Athena für Spark.