MSK Connect

MSK Connect란 무엇인가요?

MSK Connect는 개발자가 Apache Kafka 클러스터에서 데이터를 간편하게 스트리밍할 수 있도록 해주는 Amazon MSK의 기능입니다. MSK Connect는 데이터베이스, 검색 인덱스, 파일 시스템과 같은 외부 시스템과 Apache Kafka 클러스터를 연결하기 위한 오픈 소스 프레임워크인 Kafka Connect 2.7.1을 사용합니다. MSK Connect를 사용하면 Amazon S3 및 Amazon OpenSearch Service와 같은 인기 있는 데이터 스토어로 데이터를 이동하거나 데이터를 가져오는 Kafka Connect용으로 구축된 완전 관리형 커넥터를 배포할 수 있습니다. 데이터베이스의 변경 로그를 Apache Kafka 클러스터로 스트리밍하기 위해 Debezium과 같은 타사 개발 커넥터를 배포하거나 코드 변경 없이 기존 커넥터를 배포할 수 있습니다. 커넥터는 부하 변화에 따라 자동으로 규모를 조정하며 사용한 리소스에 대해서만 비용을 지불합니다.

소스 커넥터를 사용하여 외부 시스템에서 주제로 데이터를 가져올 수 있습니다. 싱크 커넥터를 사용하면 주제의 데이터를 외부 시스템으로 내보낼 수 있습니다.

MSK Connect는 MSK 클러스터든 독립적으로 호스팅되는 Apache Kafka 클러스터든 상관없이 Amazon VPC에 연결할 수 있는 모든 Apache Kafka 클러스터에 대한 커넥터를 지원합니다.

MSK Connect는 커넥터 상태 및 전송 상태를 지속적으로 모니터링하고, 기본 하드웨어를 패치 및 관리하며, 처리량 변화에 맞추어 커넥터의 규모를 자동으로 조정합니다.

MSK Connect 사용을 시작하려면 MSK Connect를 사용하여 시작하기 섹션을 참조하세요.

MSK Connect로 만들 수 있는 AWS 리소스에 대한 자세한 내용은 커넥터플러그인, 및 작업자 을 참조하십시오.

MSK Connect API에 대한 자세한 내용은 Amazon MSK Connect API 참조를 참조하세요.