Risorse per l'utilizzo di esempi di SageMaker AI Spark for Python (PySpark) - Amazon SageMaker AI

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Risorse per l'utilizzo di esempi di SageMaker AI Spark for Python (PySpark)

Amazon SageMaker AI fornisce una libreria Python (SageMaker AI PySpark) Apache Spark che puoi utilizzare per integrare le tue applicazioni Apache Spark con l'intelligenza artificiale. SageMaker Questo argomento contiene esempi per aiutarti a iniziare. PySpark Per informazioni sulla libreria SageMaker AI Apache Spark, consulta. Apache Spark con Amazon AI SageMaker

Scarica PySpark

Puoi scaricare il codice sorgente per entrambe le librerie Python Spark (PySpark) e Scala dal repository SageMaker AI Spark. GitHub

Per istruzioni sull'installazione della libreria SageMaker AI Spark, usa una delle seguenti opzioni o visita AI. SageMaker PySpark

  • esegui l’installazione con pip:

    pip install sagemaker_pyspark

  • Installa dall’origine:

    git clone git@github.com:aws/sagemaker-spark.git
cd sagemaker-pyspark-sdk
python setup.py install

  • Puoi anche creare un nuovo notebook in un’istanza del notebook che utilizza il kernel Sparkmagic (PySpark) o Sparkmagic (PySpark3), quindi connetterti a un cluster Amazon EMR remoto.

    Nota

    Il cluster Amazon EMR deve essere configurato con un ruolo IAM con la policy AmazonSageMakerFullAccess collegata. Per informazioni sulla configurazione dei ruoli per un cluster EMR, consulta Configurare ruoli IAM per autorizzazioni EMR a servizi AWS nella Guida alla gestione di Amazon EMR.

PySpark esempi

Per esempi sull'utilizzo dell' SageMaker intelligenza artificiale PySpark, vedi: