스토리지 동작

최적화된 엔진은 각각 목적에 최적화된 두 개의 구조에 데이터를 저장합니다.

구조	형식	용도
분석 스토리지	Apache Parquet(열, 기본적으로 압축됨)	집계, 조인, 범위 스캔 및 추세 분석
검색 인덱스	Lucene 반전 인덱스	구문, 퍼지 및 와일드카드 일치

Parquet은 Lucene의 온디스크 구조(문서 값, BKD 트리 및 저장된 필드) 중 세 개를 단일 압축된 열 기반 형식으로 대체합니다. 반전된 인덱스는 전체 텍스트 검색을 위해 유지됩니다. 이 아키텍처는 검색이 활성화된 일반적인 관찰성 워크로드의 스토리지 요구 사항을 크게 줄입니다.

스토리지 계층

최적화 엔진은 Amazon S3를 로컬 인스턴스 스토리지와 결합하고 OpenSearch 최적화 인스턴스로 구동되는 Amazon OpenSearch Service용 멀티 티어 스토리지 아키텍처를 사용합니다.

계층	용도	인스턴스
핫	활성 수집 및 빈번한 쿼리	OpenSearch 최적화 인스턴스(OR1, OR2 또는 OM2)
웜	자주 발생하지 않는 쿼리 및 장기 보존(읽기 전용)	관리형 스토리지가 있는 OI2 인스턴스

Amazon S3는 내구성을 위해 Parquet 파일과 역인덱스 세그먼트를 모두 지원합니다. 인덱스 상태 관리(ISM) 정책을 사용하여 연령, 샤드 크기 또는 기타 조건에 따라 데이터를 핫에서 웜으로 전환합니다.

중요

최적화된 엔진에서 웜 티어는 읽기 전용입니다. 일반적인 멀티 티어 스토리지 아키텍처는 웜 티어에 대한 쓰기를 지원하지만 최적화된 도메인은 웜 티어의 쓰기 작업을 지원하지 않습니다. 데이터를 핫 티어에 수집하고 인덱스 상태 관리(ISM) 정책을 사용하여 웜으로 전환합니다.