Amazon MSK Express ブローカー

フォーカスモード

Amazon MSK Express ブローカー - Amazon Managed Streaming for Apache Kafka

MSK プロビジョンドの Express ブローカーを使用すると、Apache Kafka の管理が簡単になり、大規模に実行するためのコスト効率が向上し、予想される低レイテンシーで伸縮性が向上します。ブローカーには、自動的にスケールするpay-as-you-goのストレージが含まれており、サイジング、プロビジョニング、プロアクティブモニタリングは必要ありません。選択したインスタンスサイズに応じて、各ブローカーノードは、標準の Apache Kafka ブローカーと比較して、ブローカーあたり最大 3 倍のスループットを提供し、最大 20 倍速くスケールアップし、90% 速く復旧できます。Express ブローカーには、Amazon MSK のベストプラクティスのデフォルトが事前設定されており、クライアントスループットクォータを適用して、クライアントと Kafka のバックグラウンドオペレーション間のリソース競合を最小限に抑えます。

Express ブローカーを使用する際に考慮すべき重要な要因と機能をいくつか紹介します。

ストレージ管理なし: Express ブローカーを使用すると、ストレージリソースをプロビジョニングまたは管理する必要がなくなります。伸縮自在で実質無制限、pay-as-you-go、フルマネージドストレージを利用できます。高スループットのユースケースでは、コンピューティングインスタンスとストレージボリューム間の相互作用、および関連するスループットのボトルネックについて理由を説明する必要はありません。これらの機能により、クラスター管理が簡素化され、ストレージ管理の運用オーバーヘッドがなくなります。
高速スケーリング: Express ブローカーを使用すると、クラスターをスケーリングし、標準ブローカーよりも最大 20 倍速くパーティションを移動できます。この機能は、今後の負荷の急増に対応するためにクラスターをスケールアウトする必要がある場合や、コストを削減するためにクラスターをスケールインする必要がある場合に不可欠です。クラスターのスケーリングの詳細については、クラスターの拡張、ブローカーの削除、パーティションの再割り当て、再調整のための LinkedIn の Cruise Control の設定に関するセクションを参照してください。
スループットの向上: Express ブローカーは、標準ブローカーよりもブローカーあたり最大 3 倍高いスループットを提供します。例えば、m7g.16xlarge サイズの Express ブローカーごとに最大 500 MBps でデータを安全に書き込むことができます。これに対して、同等の Standard ブローカーでは 153.8 MBps です (どちらの番号も、レプリケーションや再調整などのバックグラウンドオペレーションへの十分な帯域幅割り当てを想定しています）。
高いレジリエンスのために設定: Express ブローカーは、クラスターのレジリエンスを向上させるためのさまざまなベストプラクティスを自動的に提供します。これには、重要な Apache Kafka 設定のガードレール、スループットクォータ、バックグラウンドオペレーションや予期しない修復のためのキャパシティ予約が含まれます。これらの機能により、大規模な Apache Kafka アプリケーションを安全かつ簡単に実行できます。詳細については、Express ブローカーの設定「」および「」のセクションAmazon MSK Express ブローカークォータを参照してください。
メンテナンスウィンドウなし: Express ブローカーのメンテナンスウィンドウはありません。Amazon MSK は、クラスターハードウェアを継続的に自動的に更新します。詳細については、「Express ブローカーのパッチ適用」を参照してください。