Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Livraison de données Amazon MSK
Avec Amazon MSK Data Delivery, vous pouvez transmettre les données Apache Kafka des courtiers Amazon MSK Express directement à Amazon S3, sans connecteurs ni infrastructure supplémentaire à gérer. Amazon MSK Express gère automatiquement la mise à l'échelle, les nouvelles tentatives et la contre-pression, et gère les opérations de routine telles que la mise à niveau des capacités et les mises à niveau de version sans introduire de délais de livraison. Comme il s'agit de fonctionnalités de courtier natives, elles n'ajoutent aucun débit de sortie de courtier, ce qui vous permet d'éviter les coûts d'infrastructure supplémentaires liés à la mise à l'échelle des pipelines basés sur des connecteurs et d'adapter la capacité à la demande de charge de travail réelle plutôt que de procéder à un provisionnement en cas de pointe. Chaque fonctionnalité prend en charge un débit allant jusqu'à 10 Gbit/s.
Les deux fonctionnalités sont les suivantes :
Diffusion de données vers des tables de streaming pour Apache Iceberg — Avec Amazon MSK Data Delivery, vous pouvez matérialiser en continu les sujets d'Apache Kafka sous forme de tableaux Apache Iceberg sur Amazon S3 Tables. Le compactage intelligent en ligne élimine l'impact des petits fichiers sur les performances et garantit la prévisibilité des performances des requêtes sans sacrifier la fraîcheur des données. Built-in la coordination permet de résoudre les conflits d'écriture simultanés entre les consommateurs à haut débit. Amazon S3 Tables gère automatiquement la maintenance continue des tables, y compris le compactage, l'expiration des instantanés et le nettoyage des fichiers non référencés.
Diffusion de données vers des compartiments à usage général Amazon S3 — Avec Amazon MSK Data Delivery, vous pouvez transmettre des données Apache Kafka au format source vers des compartiments à usage général Amazon S3 pour un traitement en aval, avec une fiabilité de bout en bout pour les charges de travail critiques. Utilisez-le pour transférer les données Kafka dans Amazon S3 pour des cas d'utilisation tels que l'archivage des journaux, la conservation de la conformité, la relecture de Kafka et les modèles de formation. AI/ML Cette approche élimine le besoin de créer des pipelines de connecteurs autogérés qui deviennent coûteux et complexes sur le plan opérationnel à mesure que les charges de travail évoluent.
Rubriques
