Amazon MSK クォータ - Amazon Managed Streaming for Apache Kafka

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

Amazon MSK クォータ

Amazon MSK クォータ

  • アカウントごとに最大 90 のブローカー、クラスターごとに 30 のブローカー。クォータの引き上げをリクエストするには、 AWS コンソールのSupport センターに行き、サポートケースを作成してください

  • ブローカーごとに最低 1 GiB のストレージ。

  • ブローカーごとに最大 16384 GiB のストレージ。

  • IAM アクセスコントロール を使用するクラスターは、ブローカーごとに常に最大 3000 の TCP 接続を持つことができます。この制限を増やすには、Kafka AlterConfig API listener.name.client_iam.max.connections listener.name.client_iam_public.max.connections またはツールを使用してまたは設定プロパティを調整できます。kafka-configs.shいずれかのプロパティを高い値に増やすと、使用できなくなる可能性があることに注意してください。

  • TCP 接続の制限。接続レートバーストを有効にすると、MSK は 1 秒あたり 100 件の接続を許可します。例外は kafka.t3.small インスタンスタイプで、接続レートバーストを有効にすると 1 秒あたり 4 つの接続が可能です。接続レートバーストが有効になっていない古いクラスターでは、クラスターにパッチが適用されると自動的にこの機能が有効になります。

    接続に失敗した場合の再試行を処理するには、クライアント側で reconnect.backoff.ms 設定パラメータを設定できます。例えば、クライアントが 1 秒後に接続を再試行するようにする場合は、reconnect.backoff.ms を 1000 に設定します。詳細については、Apache Kafka のドキュメントの reconnect.backoff.msを参照してください。

  • アカウントごとに最大 100 の構成。クォータの調整をリクエストするには、 AWS コンソールサポートセンターにアクセスし、サポートケースを作成してください。

  • 設定あたり最大 50 のリビジョン。

  • MSK クラスターの構成または Apache Kafka バージョンを更新するには、最初に、ブローカーごとのパーティションの数が クラスターの適切なサイズ設定: ブローカーあたりのパーティション数 で説明されている制限を下回っていることを確認します。

MSK レプリケータークォータ

MSK サーバーレス クォータ

注記

クォータ制限に関する問題が発生した場合は、Support AWS ケースを作成してサポートに連絡してください

特に明記されていない限り、制限はクラスターあたりの制限です。
ディメンション クォータ クォータ違反の結果

最大入力スループット

200 MBps

レスポンスのスロットル時間による速度低下

最大出力スループット 400 MBps

レスポンスのスロットル時間による速度低下

最大保持期間 無制限 該当なし

クライアント接続の最大数

3000 接続終了
最大接続試行回数 100/秒 接続終了

最大メッセージサイズ (MB)

8 MB リクエストは INVALID_REQUEST で失敗します ErrorCode。
最大リクエストレート 1 秒あたり 15,000 レスポンスのスロットル時間による速度低下

トピック管理 API の最大リクエストレート

2/秒 レスポンスのスロットル時間による速度低下

リクエストあたりの最大フェッチバイト数

55 MB

リクエストは INVALID_REQUEST で失敗します ErrorCode

ユーザーグループの最大数

500 JoinGroup リクエストは失敗します。
パーティション (リーダー) の最大数 圧縮されていないトピックの場合は 2400、圧縮されたトピックの場合は 120。クォータ調整をリクエストするには、 AWS コンソールのSupport センターに行き、サポートケースを作成してください リクエストは INVALID_REQUEST で失敗します ErrorCode。
パーティションの作成と削除の最大レート 5 分で 250 リクエストは THROUTPUT_QUOTA_EXCEEDED で失敗します。 ErrorCode

パーティションあたりの最大入力スループット

5 MBps レスポンスのスロットル時間による速度低下

パーティションあたりの最大出力スループット

10 MBps レスポンスのスロットル時間による速度低下

最大パーティションサイズ (圧縮されたトピック用)

250 GB リクエストは THROUTPUT_QUOTA_EXCEEDED ErrorCode で失敗します。
サーバーレスクラスターあたりのクライアント VPC の最大数 5
アカウントあたりのサーバーレスクラスターの最大数 10. クォータ調整をリクエストするには、 AWS コンソールのSupport センターに行き、サポートケースを作成してください
アカウントあたりの MSK レプリケーターの最大数 15 レプリケーター
MSK レプリケーターごとにメトリクスでサポートされるトピックの最大数 MSK Replicator は、ソートされた順序で最大 750 個のトピックのみを複製します。さらにトピックを複製する必要がある場合は、Replicator を別途作成することをお勧めします。Replicator ごとに 750 を超えるトピックのサポートが必要な場合は、 AWS コンソールのSupport センターにアクセスしてサポートケースを作成してください。「」TopicCount メトリックを使用して、複製されるトピックの数を監視できます。
MSK レプリケーターごとの最大入力スループット MSK レプリケーターごとに 1 秒あたり 1 GB。クォータ調整をリクエストするには、 AWS コンソールのSupport センターに行き、サポートケースを作成してください
MSK レプリケータのレコードサイズ 最大 1 MB のレコードサイズ (メッセージ.最大バイト数)。クォータの引き上げをリクエストするには、 AWS コンソールのSupport センターに行き、サポートケースを作成してください

MSK Connect クォータ

  • 最大 100 個のカスタムプラグイン。

  • 最大 100 個のワーカー構成。

  • 最大 60 人のコネクトワーカー。コネクタがオートスケーリングされた容量を持つように設定されている場合、コネクタが持つように設定されているワーカーの最大数は、MSK Connect がアカウントのクォータを計算するために使用する数です。

  • コネクタごとに最大 10 人のワーカー。

MSK Connect のクォータを増やすことをリクエストするには、 AWS コンソールのSupport センターにアクセスしてサポートケースを作成してください