Kuota MSK Amazon

AWS Akun Anda memiliki kuota default untuk Amazon MSK. Kecuali dinyatakan lain, setiap kuota per akun bersifat spesifik wilayah dalam akun Anda. AWS

Kuota MSK Amazon

• Hingga 90 broker per akun. 30 broker per cluster ZooKeeper mode. 60 broker per kluster mode Kraft. Untuk meminta kuota yang lebih tinggi, buka Pusat Dukungan AWS konsol dan buat kasus dukungan.

• Minimal 1 GiB penyimpanan per broker.

• Maksimal 16384 GiB penyimpanan per broker.

• Sebuah cluster yang menggunakan Kontrol akses IAM dapat memiliki hingga 3000 koneksi TCP per broker pada waktu tertentu. Untuk meningkatkan batas ini, Anda dapat menyesuaikan listener.name.client_iam.max.connections atau properti listener.name.client_iam_public.max.connections konfigurasi menggunakan Kafka AlterConfig API atau kafka-configs.sh alat. Penting untuk dicatat bahwa meningkatkan salah satu properti ke nilai tinggi dapat mengakibatkan tidak tersedianya.

• Batas koneksi TCP. Dengan ledakan laju koneksi diaktifkan, MSK memungkinkan 100 koneksi per detik. Pengecualiannya adalah jenis instance kafka.t3.small, yang diizinkan 4 koneksi per detik dengan semburan laju koneksi diaktifkan. Cluster lama yang tidak mengaktifkan semburan laju koneksi akan mengaktifkan fitur secara otomatis saat cluster ditambal.

  Untuk menangani percobaan ulang pada koneksi yang gagal, Anda dapat mengatur parameter reconnect.backoff.ms konfigurasi di sisi klien. Misalnya, jika Anda ingin klien mencoba lagi koneksi setelah 1 detik, atur reconnect.backoff.ms ke 1000. Untuk informasi selengkapnya, lihat reconnect.backoff.ms di dokumentasi Apache Kafka.

• Hingga 100 konfigurasi per akun. Untuk meminta penyesuaian kuota, buka Pusat Dukungan AWS konsol dan buat kasus dukungan.

• Maksimal 50 revisi per konfigurasi.

• Untuk memperbarui konfigurasi atau versi Apache Kafka dari cluster MSK, pertama-tama pastikan jumlah partisi per broker berada di bawah batas yang dijelaskan dalam. Ukuran kluster Anda dengan benar: Jumlah partisi per broker

Kuota Replikator MSK

• Maksimal 15 Replikator MSK per akun.

• MSK Replicator hanya mereplikasi hingga 750 topik dalam urutan yang diurutkan. Jika Anda perlu mereplikasi lebih banyak topik, kami sarankan Anda membuat Replicator terpisah. Buka Pusat Dukungan AWS konsol dan buat kasus dukungan jika Anda memerlukan dukungan untuk lebih dari 750 topik per Replicator. Anda dapat memantau jumlah topik yang direplikasi menggunakan metrik TopicCount "”.

• Throughput ingress maksimum 1GB per detik per MSK Replicator. Untuk meminta kuota yang lebih tinggi, buka Pusat Dukungan AWS konsol dan buat kasus dukungan.

• MSK Replicator Record Size - Maksimal ukuran rekaman 10MB (message.max.bytes). Untuk meminta kuota yang lebih tinggi, buka Pusat Dukungan AWS konsol dan buat kasus dukungan.

MSK Kuota Tanpa Server

catatan

Jika Anda mengalami masalah dengan batas kuota, hubungi AWS Support dengan membuat kasus dukungan.

Batas adalah per cluster, kecuali dinyatakan lain.
Dimensi	Kuota	Hasil pelanggaran kuota
Throughput masuknya maksimum	200 MBps	Perlambatan dengan durasi throttle sebagai respons
Throughput keluar maksimum	400 MBps	Perlambatan dengan durasi throttle sebagai respons
Durasi retensi maksimum	Tidak terbatas.	N/A
Jumlah maksimum koneksi klien	3000	Koneksi dekat
Upaya koneksi maksimum	100 per detik	Koneksi dekat
Ukuran pesan maksimal	8 MB	Permintaan gagal dengan ErrorCode: INVALID_REQUEST
Tingkat permintaan maksimum	15.000 per detik	Perlambatan dengan durasi throttle sebagai respons
Tingkat maksimum tingkat permintaan API manajemen topik	2 per detik	Perlambatan dengan durasi throttle sebagai respons
Byte pengambilan maksimum per permintaan	55 MB	Permintaan gagal dengan ErrorCode: INVALID_REQUEST
Jumlah maksimum kelompok konsumen	500	JoinGroup permintaan gagal
Jumlah maksimum partisi (pemimpin)	2400 untuk topik yang tidak dipadatkan. 120 untuk topik yang dipadatkan. Untuk meminta penyesuaian kuota, buka Pusat Dukungan AWS konsol dan buat kasus dukungan.	Permintaan gagal dengan ErrorCode: INVALID_REQUEST
Tingkat maksimum pembuatan dan penghapusan partisi	250 dalam 5 menit	Permintaan gagal dengan ErrorCode: THROUGHPUT_QUOTA_EXCEEDED
Throughput masuknya maksimum per partisi	5 MBps	Perlambatan dengan durasi throttle sebagai respons
Throughput keluar maksimum per partisi	10 MBps	Perlambatan dengan durasi throttle sebagai respons
Ukuran partisi maksimum (untuk topik yang dipadatkan)	250 GB	Permintaan gagal dengan ErrorCode: THROUGHPUT_QUOTA_EXCEEDED
Jumlah maksimum VPC klien per cluster tanpa server	5
Jumlah maksimum cluster tanpa server per akun	10. Untuk meminta penyesuaian kuota, buka Pusat Dukungan AWS konsol dan buat kasus dukungan.

Kuota MSK Connect

• Hingga 100 plugin kustom.

• Hingga 100 konfigurasi pekerja.

• Hingga 60 pekerja yang terhubung. Jika konektor diatur untuk memiliki kapasitas auto scaled, maka jumlah maksimum pekerja yang telah diatur konektor adalah nomor yang digunakan MSK Connect untuk menghitung kuota akun tersebut.

• Hingga 10 pekerja per konektor.

Untuk meminta kuota MSK Connect yang lebih tinggi, buka Pusat AWS Dukungan konsol dan buat kasus dukungan.