Considerazioni sull'utilizzo di Iceberg con Spark - Amazon EMR

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Considerazioni sull'utilizzo di Iceberg con Spark

  • Per impostazione predefinita Amazon EMR 6.5.0 non supporta Iceberg in esecuzione su Amazon EMR su EKS. È disponibile un'immagine personalizzata di Amazon EMR 6.5.0 che ti consente di passare --jars local:///usr/share/aws/iceberg/lib/iceberg-spark3-runtime.jar come parametro spark-submit per creare tabelle Iceberg in Amazon EMR su EKS. Per ulteriori informazioni, consulta Invio di un carico di lavoro Spark in Amazon EMR utilizzando un'immagine personalizzata nella Guida per gli sviluppatori di Amazon EMR su EKS. Puoi anche contattare AWS Support per ricevere assistenza. A partire da Amazon EMR 6.6.0, Iceberg è supportato in Amazon EMR su EKS.

  • Quando usi AWS Glue come catalogo per Iceberg, assicurati che il database in cui stai creando una tabella esista in AWS Glue. Se utilizzi servizi come AWS Lake Formation e non riesci a caricare il catalogo, assicurati di avere accesso adeguato al servizio per eseguire il comando.