Amazon Redshift unterstützt UDFs ab Patch 198 nicht mehr die Erstellung von neuem Python. Das bestehende Python UDFs wird bis zum 30. Juni 2026 weiterhin funktionieren. Weitere Informationen finden Sie im Blog-Posting.

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Fragen Sie Amazon S3 S3-Tabellen von Amazon Redshift ab

Amazon Redshift ist in Amazon S3 S3-Tabellen-Buckets integriert, sodass Sie mit Amazon Redshift auf S3-Tabellenressourcen zugreifen können. Ganz gleich, ob Sie gerade erst anfangen oder Tausende von Tabellen in Ihrer Iceberg-Umgebung verwalten, Tabellen-Buckets vereinfachen die Verwaltung von Data Lakes in jeder Größenordnung. Weitere Informationen finden Sie unter Tabellen-Buckets.

In diesem Thema werden die ersten Schritte mit Amazon S3 Tables und Redshift sowie der Zugriff auf S3 Tables-Objekte mithilfe von Amazon Redshift beschrieben.

Voraussetzungen

Bevor Sie S3-Tabellen von Amazon Redshift abfragen, müssen Sie S3-Tabellen mit integrieren. AWS Glue Data Catalog Anweisungen finden Sie unter Integrieren von Amazon S3 S3-Tabellen mit AWS Glue Data Catalog.

Nach der Integration von S3 Tables können IAM-Prinzipale mit den erforderlichen S3-Tabellen und AWS Glue IAM-Berechtigungen S3-Tabellen über den erkennen. AWS Glue Data Catalog AWS Glue Data Catalog

S3-Tabellen von Amazon Redshift abfragen

Gehen Sie folgendermaßen vor, um mit der Abfrage von S3-Tabellen zu beginnen:

Schritt 1: Eine IAM-Rolle für Amazon Redshift erstellen

Ihr Cluster benötigt eine Autorisierung, um auf den externen S3-Tabellen-Katalog zugreifen zu können. AWS Glue Um diese Autorisierung bereitzustellen, verwendet Amazon Redshift eine IAM-Rolle, die Ihrem Cluster zugeordnet ist. Erstellen Sie eine IAM-Rolle mit den folgenden Richtlinienberechtigungen.

Um eine Richtlinie zu erstellen:

So erstellen Sie eine IAM-Rolle für Amazon Redshift:

Schritt 2: Fügen Sie Ihrem Amazon Redshift Redshift-Cluster eine IAM-Rolle hinzu

Ordnen Sie die IAM-Rolle, die Sie in Schritt 1 konfiguriert haben, Ihrem Amazon Redshift Redshift-Cluster zu.

Mithilfe der AWS Managementkonsole:

Verwenden der AWS CLI:

Führen Sie den folgenden Befehl aus, um eine IAM-Rolle einem vorhandenen Cluster oder Namespace zuzuordnen. Ersetzen Sie my-redshift-cluster oder my-redshift-namespace durch Ihre Cluster-ID oder Ihren Namespace und 111122223333 durch Ihre AWS Konto-ID.

aws redshift modify-cluster-iam-roles \
    --cluster-identifier my-redshift-cluster \
    --add-iam-roles arn:aws:iam::111122223333:role/RedshiftS3TablesRole

-- for serverless
aws redshift-serverless update-namespace \
    --namespace-name my-redshift-namespace \
    --iam-roles "arn:aws:iam::111122223333:role/RedshiftS3TablesRole"

Weitere Informationen finden Sie unter Verknüpfen von IAM-Rollen mit Clustern im Amazon-Redshift-Verwaltungshandbuch.

Schritt 3: S3-Tabellen von Amazon Redshift abfragen

Wenn Sie S3-Tabellen mit integrieren AWS Glue Data Catalog, erstellt der Service eine föderierte Katalogstruktur, die Ressourcen von S3 Tables AWS Glue Katalogobjekten zuordnet:

Die Integration erstellt die folgende Hierarchie:

Wenn Sie beispielsweise einen S3-Tabellen-Bucket analytics-bucket mit einem Namespace benannt haben, der eine Tabelle sales enthälttransactions, AWS Glue Data Catalog wäre der vollständige Pfad in:. s3tablescatalog/analytics-bucket/sales/transactions

Erstellen Sie einen Ressourcenlink

Bevor Sie eine der drei unten aufgeführten Abfragemethoden verwenden können, müssen Sie einen Ressourcenlink in erstellen AWS Glue Data Catalog. Mithilfe von Ressourcenlinks kann Amazon Redshift über den Standardkatalog auf S3 Tables-Datenbanken verweisen.

Mithilfe der AWS Glue Konsole:

Verwenden der AWS CLI:

aws glue create-database \
  --region us-west-2 \
  --cli-input-json '{
        "CatalogId": "111122223333",
        "DatabaseInput": {
            "Name": "sales_resource_link",
            "TargetDatabase": {
                "CatalogId": "111122223333:s3tablescatalog/analytics-bucket",
                "DatabaseName": "sales"
            }
        }
  }'

Dieser Befehl erstellt einen Ressourcenlink mit dem Namen sales_resource_link in Ihrem AWS Glue Standard-Datenkatalog, der auf die sales Datenbank im S3-Tabellen-Bucket verweistanalytics-bucket.

Sobald Ressourcenlinks erstellt wurden, bietet Amazon Redshift drei Methoden zur Abfrage von S3-Tabellen. Wählen Sie die Methode, die am besten zu Ihrem Anwendungsfall passt.

Methode 1: EXTERNES SCHEMA ERSTELLEN

Verwenden Sie diese CREATE EXTERNAL SCHEMA Option, um ein externes Schema zu erstellen, das auf Ihre S3 Tables-Datenbank verweist. Diese Methode bietet eine explizite Kontrolle über die Benennung und Konfiguration von Schemas.

Vollständige Syntaxdetails finden Sie unter CREATE EXTERNAL SCHEMA im Amazon Redshift Database Developer Guide.

Beispiel

Verwenden Sie den Datenbanknamen und die Katalog-ID aus Schritt 3. 111122223333Ersetzen Sie es durch Ihre AWS Konto-ID.

CREATE EXTERNAL SCHEMA s3tables_schema
FROM DATA CATALOG DATABASE 'sales_resource_link'
IAM_ROLE 'arn:aws:iam::111122223333:role/RedshiftS3TablesRole'
REGION 'us-west-2'
CATALOG_ID '111122223333';

SELECT * FROM s3tables_schema.transactions;

Methode 2: DATENBANK AUS ARN ERSTELLEN

Verwenden Sie diese CREATE DATABASE FROM ARN Klausel, um eine Verbunddatenbank zu erstellen, die direkt auf Ihren AWS Glue Ressourcenlink verweist. Diese Methode ordnet die AWS Glue Datenbank automatisch einer Redshift-Datenbank zu.

Vollständige Syntaxdetails finden Sie unter CREATE DATABASE im Amazon Redshift Database Developer Guide.

Beispiel

Ersetzen Sie es 111122223333 durch Ihre AWS Konto-ID.

CREATE DATABASE s3tables_db
FROM ARN 'arn:aws:glue:us-west-2:111122223333:database/sales_resource_link'
WITH DATA CATALOG SCHEMA analytics_schema
IAM_ROLE 'arn:aws:iam::111122223333:role/RedshiftS3TablesRole';

SELECT * FROM s3tables_db.analytics_schema.transactions;

Methode 3: Automatisch gemounteter AWS-Datenkatalog

Amazon Redshift kann AWS Glue Data Catalog Datenbanken, einschließlich Ressourcenlinks für S3-Tabellen, automatisch über die awsdatacatalog Datenbank mounten. Für diese Methode muss der Verbundzugriff auf Spectrum (FAS) auf Ihrem Cluster aktiviert sein.

Voraussetzungen

Um die automatisch gemountete awsdatacatalog Datenbank verwenden zu können, müssen Sie den Verbundzugriff auf Spectrum aktivieren. Dadurch kann Amazon Redshift föderierte Identitätsanmeldedaten für den Zugriff auf externe AWS Glue Data Catalog Datenquellen verwenden.

Um den Verbundzugriff auf Spectrum zu aktivieren:

Ausführliche Anweisungen zur Einrichtung des Verbundzugriffs finden Sie unter Verwenden einer föderierten Identität zur Verwaltung des Amazon Redshift-Zugriffs auf lokale Ressourcen und externe Amazon Redshift Spectrum-Tabellen im Amazon Redshift Management Guide.

S3-Tabellen abfragen

Sobald der Verbundzugriff konfiguriert ist, überprüfen Sie die bereitgestellten Schemas und fragen Sie Ihre S3-Tabellen ab.

Überprüfen Sie die bereitgestellten Schemas:

SHOW SCHEMAS FROM DATABASE awsdatacatalog;

Fragen Sie S3-Tabellen mit dem Namen des Ressourcenlinks aus Schritt 3 ab:

SELECT * FROM awsdatacatalog.sales_resource_link.transactions;