MSK Connect - Amazon Managed Streaming for Apache Kafka

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

MSK Connect

什麼是 MSK Connect?

MSK Connect 是 Amazon MSK 的一項功能,可讓開發人員輕鬆將資料串流至或串流出 Apache Kafka 叢集。MSK Connect 會使用 Kafka Connect 2.7.1,其為開放源代碼框架,用於將 Apache Kafka 叢集與外部系統 (例如資料庫、搜尋索引和檔案系統) 相連。透過 MSK Connect,您可以部署專為 Kafka Connect 建立的全受管連接器,將資料移入 Amazon S3 和 Amazon 服務等熱門資料存放區或從熱門資料存放區提取資料。 OpenSearch 您可以部署由第三方 (例如 Debezium) 開發的連接器,用於將變更日誌從資料庫串流至 Apache Kafka 叢集,或在不需變更程式碼的情況下部署現有連接器。連接器會自動擴展以適應負載的變化,您僅需按照實際使用的資源量付費。

使用來源連接器將資料從外部系統匯入至您的主題中。您可以使用目的地連接器將主題中的資料匯出至外部系統。

MSK Connect 會利用與 Amazon VPC 的連線來支援 Apache Kafka 叢集的連接器,無論叢集是 MSK 叢集還是獨立託管的 Apache Kafka 叢集皆可。

MSK Connect 會持續監控連接器運作狀態和傳送狀態、修補程式和管理基礎硬體,並自動擴展連接器以符合輸送量的變更。

若要開始使用 MSK Connect,請參閱 開始使用 MSK Connect

若要瞭解您可以使用 MSK Connect 建立的 AWS 資源,請參閱連接器外掛程式、和工作程序

如需有關 MSK Connect API 的相關資訊,請參閱 Amazon MSK Connect API Reference