Amazon MSK Express Brokers が Apache Kafka 4.2 をサポート

Amazon Managed Streaming for Apache Kafka (Amazon MSK) Express Brokers が Apache Kafka バージョン 4.2 をサポートしました。このアップデートにより、リーダー選出の正確性を向上させ可用性を高める「Eligible Leader Replicas (ELR)」の強化、よりスムーズで高速なグループリバランスを実現する新しい「コンシューマーリバランスプロトコル」、および Kafka Streams のタスク割り当てを最適化する「Streams リバランスプロトコル」が導入されました。既存の Express Brokers クラスターは、インプレースのローリングアップデートでバージョン 4.2.x にアップグレード可能です。

運用の改善点

Kafka 4.2 の導入で、特にリバランス時の停止時間（Stop-the-world）の軽減が期待できます。新しいコンシューマーリバランスプロトコルにより、コンシューマーグループの構成変更時の影響を軽減できるため、リアルタイム処理の遅延（ラグ）を最小限に抑えたい環境では非常に有効なアップデートです。

日本リージョンでの利用可能性

最新のリージョン状況を確認したところ、Amazon MSK Express Brokers 自体が「一部のリージョン」で提供されているサービスであるため、東京リージョン（ap-northeast-1）および大阪リージョン（ap-northeast-3）での提供状況については公式ドキュメントに明記されていません。 マネジメントコンソールまたは AWS サポートへ直接確認することをお勧めします。

実務上のアドバイス

• アップグレードパスの確認: インプレースのローリングアップデートが提供されていますが、本番環境への適用前に、まずは開発・検証環境でリバランス挙動の変更によるアプリケーションへの影響を確認してください。
• パフォーマンスの再評価: Express Brokers は標準的なブローカーよりも高いスループットと高速なスケーリングを特性として持っています。Kafka 4.2 の新機能と組み合わせることで、トラフィック急増時の耐性がさらに向上している可能性があります。

次のアクション

1. コンソールでの確認: 東京リージョンで Express Brokers の選択肢が表示されるか確認してください。
2. リバランステスト: 新しいプロトコルによるリバランス時間の短縮をメトリクスで検証してください。

参照ドキュメント

• Amazon MSK Developer Guide