.amazonaws.com`. Per ulteriori informazioni su questa limitazione di denominazione, vedere [Introduzione al client Hadoop S3A (sito Web Hadoop](https://hadoop.apache.org/docs/stable/hadoop-aws/tools/hadoop-aws/index.html#Introducing_the_Hadoop_S3A_client.)).
Scegliete una delle seguenti opzioni di configurazione:[See the AWS documentation website for more details](http://docs.aws.amazon.com/it_it/prescriptive-guidance/latest/patterns/migrate-data-from-an-on-premises-hadoop-environment-to-amazon-s3-using-distcp-with-aws-privatelink-for-amazon-s3.html) | Amministratore AWS |
| Configura l'autenticazione per Amazon S3. | Per l'autenticazione su Amazon S3 tramite Hadoop, consigliamo di esportare le credenziali temporanee dei ruoli nell'ambiente Hadoop. Per ulteriori informazioni, consulta [Autenticazione](https://hadoop.apache.org/docs/stable/hadoop-aws/tools/hadoop-aws/index.html#Authenticating_with_S3) con S3 (sito Web Hadoop). Per i lavori di lunga durata, puoi creare un utente e assegnare una policy con le autorizzazioni per inserire i dati solo in un bucket S3. La chiave di accesso e la chiave segreta possono essere archiviate su Hadoop, accessibili solo al DistCp lavoro stesso e all'amministratore Hadoop. Per ulteriori informazioni sull'archiviazione dei segreti, vedere [Archiviazione dei segreti con i provider di credenziali Hadoop (sito Web Hadoop)](https://hadoop.apache.org/docs/r3.1.1/hadoop-aws/tools/hadoop-aws/index.html#hadoop_credential_providers). Per ulteriori informazioni su altri metodi di autenticazione, consulta [How to get credentials of an IAM role for use with CLI access a un account AWS nella documentazione di AWS](https://docs.aws.amazon.com/singlesignon/latest/userguide/howtogetcredentials.html) IAM Identity Center (successore di AWS Single Sign-On).
Per utilizzare credenziali temporanee, aggiungi le credenziali temporanee al file delle credenziali o esegui i seguenti comandi per esportare le credenziali nel tuo ambiente:export AWS_SESSION_TOKEN=SECRET-SESSION-TOKEN
export AWS_ACCESS_KEY_ID=SESSION-ACCESS-KEY
export AWS_SECRET_ACCESS_KEY=SESSION-SECRET-KEY
Se disponi di una combinazione di chiave di accesso tradizionale e chiave segreta, esegui i seguenti comandi:export AWS_ACCESS_KEY_ID=my.aws.key
export AWS_SECRET_ACCESS_KEY=my.secret.key
Se utilizzi una combinazione di chiave di accesso e chiave segreta, modifica il fornitore delle credenziali nei DistCp comandi da `"org.apache.hadoop.fs.s3a.TemporaryAWSCredentialsProvider"` a`"org.apache.hadoop.fs.s3a.SimpleAWSCredentialsProvider"`. | Amministratore AWS |
| Trasferisci dati utilizzando DistCp. | Da utilizzare DistCp per trasferire dati, esegui i seguenti comandi:hadoop distcp -Dfs.s3a.aws.credentials.provider=\
"org.apache.hadoop.fs.s3a.TemporaryAWSCredentialsProvider" \
-Dfs.s3a.access.key="${AWS_ACCESS_KEY_ID}" \
-Dfs.s3a.secret.key="${AWS_SECRET_ACCESS_KEY}" \
-Dfs.s3a.session.token="${AWS_SESSION_TOKEN}" \
-Dfs.s3a.path.style.access=true \
-Dfs.s3a.connection.ssl.enabled=true \
-Dfs.s3a.endpoint=s3..amazonaws.com \
hdfs:///user/root/ s3a://
La regione AWS dell'endpoint non viene rilevata automaticamente quando usi il DistCp comando con AWS PrivateLink per Amazon S3. Hadoop 3.3.2 e versioni successive risolvono questo problema abilitando l'opzione per impostare in modo esplicito la regione AWS del bucket S3. Per ulteriori informazioni, consulta [S3A per aggiungere l'opzione fs.s3a.endpoint.region per impostare la regione](https://issues.apache.org/jira/browse/HADOOP-17705) AWS (sito Web Hadoop).
[Per ulteriori informazioni su provider S3A aggiuntivi, consulta Configurazione generale del client S3A (sito Web Hadoop).](https://hadoop.apache.org/docs/stable/hadoop-aws/tools/hadoop-aws/index.html#General_S3A_Client_configuration) Ad esempio, se utilizzi la crittografia, puoi aggiungere la seguente opzione alla serie di comandi di cui sopra a seconda del tipo di crittografia:-Dfs.s3a.server-side-encryption-algorithm=AES-256 [or SSE-C or SSE-KMS]
Per utilizzare l'endpoint di interfaccia con S3A, è necessario creare una voce alias DNS per il nome regionale S3 (ad esempio,`s3..amazonaws.com`) sull'endpoint dell'interfaccia. Per istruzioni, consulta la sezione *Configurazione dell'autenticazione per Amazon S3*. Questa soluzione alternativa è necessaria per Hadoop 3.3.2 e versioni precedenti. Le versioni future di S3A non richiederanno questa soluzione alternativa.
Se hai problemi di firma con Amazon S3, aggiungi un'opzione per utilizzare la firma Signature Version 4 (SigV4):-Dmapreduce.map.java.opts="-Dcom.amazonaws.services.s3.enableV4=true"
| Ingegnere addetto alla migrazione, amministratore AWS |