아마존 키스페이스와 아파치 스파크의 통합 - Amazon Keyspaces(Apache Cassandra용)

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

아마존 키스페이스와 아파치 스파크의 통합

Apache Spark는 대규모 데이터 분석을 위한 오픈 소스 엔진입니다. Apache Spark를 사용하면 Amazon 키스페이스에 저장된 데이터를 보다 효율적으로 분석할 수 있습니다. 또한 Amazon Keyspace를 사용하여 Spark의 분석 데이터에 대한 일관된 single-digit-millisecond 읽기 액세스 권한을 애플리케이션에 제공할 수 있습니다. 오픈 소스 스파크 카산드라 커넥터는 아마존 키스페이스와 스파크 간의 데이터 읽기 및 쓰기를 간소화합니다.

Spark Cassandra 커넥터에 대한 Amazon Keyspace 지원은 완전 관리형 서버리스 데이터베이스 서비스를 사용하여 Spark 기반 분석 파이프라인에서 Cassandra 워크로드 실행을 간소화합니다. Amazon Keyspace를 사용하면 Spark가 테이블과 동일한 기본 인프라 리소스를 놓고 경쟁하는 것에 대해 걱정할 필요가 없습니다. Amazon Keyspaces 테이블은 애플리케이션 트래픽에 따라 자동으로 확장 및 축소됩니다.

다음 자습서에서는 Spark Cassandra 커넥터를 사용하여 Amazon 키스페이스에 데이터를 읽고 쓰는 데 필요한 단계와 모범 사례를 안내합니다. 이 자습서에서는 Spark Cassandra 커넥터를 사용하여 파일에서 데이터를 로드하고 Amazon Keyspaces 테이블에 기록하여 데이터를 Amazon 키스페이스로 마이그레이션하는 방법을 보여줍니다. 그런 다음 자습서에서는 Spark Cassandra 커넥터를 사용하여 Amazon 키스페이스에서 데이터를 다시 읽는 방법을 보여줍니다. 이렇게 하면 Spark 기반 분석 파이프라인에서 Cassandra 워크로드를 실행할 수 있습니다.