Menskalakan jaringan pipa di Amazon Ingestion OpenSearch - OpenSearch Layanan Amazon

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Menskalakan jaringan pipa di Amazon Ingestion OpenSearch

OpenSearch Ingestion secara otomatis menskalakan kapasitas pipa berdasarkan Unit OpenSearch Komputasi (Ingestion) minimum dan maksimum yang Anda tentukan. OCUs Ini menghilangkan kebutuhan akan penyediaan dan manajemen manual.

Setiap OCU Ingestion adalah kombinasi dari sekitar 8 GiB memori dan 2 v. CPUs Anda dapat menentukan nilai OCU minimum dan maksimum untuk pipeline, dan OpenSearch Ingestion secara otomatis menskalakan kapasitas pipa Anda berdasarkan batas-batas ini.

Anda menentukan nilai berikut saat membuat pipeline:

  • Kapasitas minimum - Pipa dapat mengurangi kapasitas hingga jumlah konsumsi OCUs ini. Kapasitas minimum yang ditentukan juga merupakan kapasitas awal untuk pipa.

  • Kapasitas maksimum - Pipa dapat meningkatkan kapasitas hingga jumlah konsumsi OCUs ini.

Edit capacity interface for pipeline capacity with min and max OCU settings.

Pastikan kapasitas maksimum untuk pipa cukup tinggi untuk menangani lonjakan beban kerja, dan kapasitas minimum cukup rendah untuk meminimalkan biaya saat pipa tidak sibuk. Berdasarkan pengaturan Anda, OpenSearch Ingestion secara otomatis menskalakan jumlah Ingestion OCUs untuk pipeline Anda untuk memproses beban kerja tertelan. Pada waktu tertentu, Anda hanya dikenakan biaya untuk Ingestion OCUs yang sedang digunakan secara aktif oleh pipa Anda.

Kapasitas yang dialokasikan untuk pipa OpenSearch Ingestion Anda naik turun berdasarkan persyaratan pemrosesan pipa Anda dan beban yang dihasilkan oleh aplikasi klien Anda. Ketika kapasitas dibatasi, OpenSearch Ingestion meningkat dengan mengalokasikan lebih banyak unit komputasi (GiB memori). Saat pipeline Anda memproses beban kerja yang lebih kecil, atau tidak memproses data sama sekali, pipeline dapat menurunkan skala konsumsi OCUs minimum yang dikonfigurasi.

Anda dapat menentukan minimal 1 OCU Ingestion, maksimum 96 Ingestion untuk jaringan pipa stateless, dan maksimum 48 Ingestion OCUs untuk jaringan pipa stateful. OCUs Kami merekomendasikan minimal 2 Konsumsi OCUs untuk sumber berbasis push. Saat buffering persisten diaktifkan, Anda dapat menentukan minimal 2 dan maksimum 384 Ingestion. OCUs

Diberikan pipa log standar dengan satu sumber, pola grok sederhana, dan wastafel, setiap unit komputasi dapat mendukung hingga 2 MiB per detik. Untuk jaringan pipa log yang lebih kompleks dengan beberapa prosesor, setiap unit komputasi mungkin mendukung lebih sedikit beban konsumsi. Berdasarkan kapasitas pipa dan pemanfaatan sumber daya, proses penskalaan OpenSearch Ingestion dimulai.

Untuk memastikan ketersediaan yang tinggi, Ingestion OCUs didistribusikan di seluruh Availability Zones ()AZs. Jumlah AZs tergantung pada kapasitas minimum yang Anda tentukan.

Misalnya, jika Anda menentukan minimal 2 unit komputasi, Ingestion OCUs yang digunakan pada waktu tertentu didistribusikan secara merata di 2. AZs Jika Anda menentukan minimal 3 atau lebih unit komputasi, Ingestion didistribusikan OCUs secara merata di 3. AZs Kami menyarankan Anda menyediakan setidaknya dua Konsumsi OCUs untuk memastikan ketersediaan 99,9% untuk saluran pipa konsumsi Anda.

Anda tidak ditagih untuk Ingestion OCUs ketika pipa berada diCreate failed,, CreatingDeleting, dan negara bagian. Stopped

Untuk petunjuk mengkonfigurasi dan mengambil pengaturan kapasitas untuk pipeline, lihatMembuat jaringan pipa.