Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.
Distribuzione dati Amazon MSK
Con la distribuzione dei dati Amazon MSK, puoi fornire i dati Apache Kafka dai broker Amazon MSK Express direttamente ad Amazon S3, senza connettori o infrastrutture aggiuntive da gestire. Amazon MSK Express gestisce automaticamente il ridimensionamento, i tentativi e la contropressione e gestisce le operazioni di routine come la scalabilità della capacità e gli aggiornamenti delle versioni senza introdurre lacune nella distribuzione. Trattandosi di funzionalità native per i broker, non aumentano il throughput in uscita del broker, in modo da evitare i costi incrementali dell'infrastruttura normalmente associati alla scalabilità delle pipeline basate su connettori e adeguare la capacità alla domanda effettiva del carico di lavoro anziché effettuare il provisioning in caso di picchi. Ciascuna funzionalità supporta un throughput fino a 10 GBps.
Le due funzionalità sono:
Distribuzione dei dati a tabelle di streaming per Apache Iceberg: con Amazon MSK Data Delivery, puoi trasformare continuamente gli argomenti di Apache Kafka come tabelle Apache Iceberg su Amazon S3 Tables. La compattazione intelligente in linea elimina l'impatto sulle prestazioni dei file di piccole dimensioni e mantiene prevedibili le prestazioni delle query senza sacrificare la freschezza dei dati. Built-in il coordinamento risolve i conflitti di scrittura simultanei tra utenti ad alto rendimento. Amazon S3 Tables gestisce automaticamente la manutenzione continua delle tabelle, inclusa la compattazione, la scadenza delle istantanee e la pulizia dei file senza riferimenti.
Distribuzione di dati a bucket generici Amazon S3: con Amazon MSK Data Delivery, puoi distribuire dati Apache Kafka nel formato sorgente ai bucket generici Amazon S3 per l'elaborazione a valle, con affidabilità end-to-end per carichi di lavoro mission-critical. Usalo per trasferire i dati Kafka in Amazon S3 per casi d'uso come archiviazione dei log, conservazione della conformità, replay di Kafka e modelli di formazione. AI/ML Questo approccio elimina la necessità di creare pipeline di connettori autogestite che diventano costose e complesse dal punto di vista operativo con la scalabilità dei carichi di lavoro.