Verwenden von AWS Data Pipeline

Notice (Hinweis)

AWS Data Pipeline ist für Neukunden nicht mehr verfügbar. Bestandskunden von AWS Data Pipeline können den Service weiterhin wie gewohnt nutzen. Weitere Informationen

AWS Data Pipeline ist ein Webservice, mit dem Sie die Bewegung und Transformation von Daten automatisieren können. Mithilfe von Data Pipeline können Sie eine Pipeline erstellen, um Tabellendaten aus dem Quellkonto zu exportieren. Die exportierten Daten werden in einem Amazon Simple Storage Service (Amazon S3) -Bucket im Zielkonto gespeichert. Der S3-Bucket im Zielkonto muss vom Quellkonto aus zugänglich sein. Um diesen kontoübergreifenden Zugriff zu ermöglichen, aktualisieren Sie die Zugriffskontrollliste (ACL) im Ziel-S3-Bucket.

Erstellen Sie eine weitere Pipeline im Zielkonto (Account-B), um Daten aus dem S3-Bucket in die Tabelle im Zielkonto zu importieren.

Dies war die herkömmliche Methode zur Sicherung von Amazon DynamoDB-Tabellen in Amazon S3 und zur Wiederherstellung von Amazon S3, bis die Unterstützung für das native Lesen aus DynamoDB-Tabellen AWS Glue eingeführt wurde.

Vorteile

• Es ist eine serverlose Lösung.

• Es ist kein neuer Code erforderlich.

• AWS Data Pipeline verwendet Amazon EMR-Cluster hinter den Kulissen für diesen Job, sodass dieser Ansatz effizient ist und große Datenmengen verarbeiten kann.

Nachteile

• Zusätzliche AWS Services (Data Pipeline und Amazon S3) sind erforderlich.

• Der Prozess verbraucht den bereitgestellten Durchsatz für die Quelltabelle und die beteiligten Zieltabellen, sodass sich dies auf Leistung und Verfügbarkeit auswirken kann.

• Dieser Ansatz verursacht zusätzliche Kosten gegenüber den Kosten für DynamoDB-Lesekapazitätseinheiten (RCUs) und Schreibkapazitätseinheiten (). WCUs