Amazon MWAAがApache Airflow 3.3.1に対応

Amazon Managed Workflows for Apache Airflow (MWAA) が、Apache Airflow 3.3.1のサポートを開始しました。これにより、ステートフルタスクやマルチ言語サポート（Java/Go）などの新機能を利用したデータパイプラインの構築・運用が可能になります。AWS Management Consoleから新規環境の起動やバージョン3.2以降からのアップグレードが数クリックで実行できます。

技術的メリット

ステートフルタスクの導入により、リトライや再実行をまたいでもタスクの状態が永続化されるため、長時間実行ジョブのクラッシュ耐性が向上します。また、**Language Task SDK（実験的）**を活用すれば、オーケストレーションはPythonで維持しつつ、タスクロジックをJavaやGoで記述できるようになり、チームの言語選択の柔軟性が高まります。

リージョン状況（日本向け）

最新のリージョン状況の裏取りにより、東京（ap-northeast-1）と大阪（ap-northeast-3）を含む、MWAAが展開されている全リージョンで利用可能です。

実務上の注意点

• アップグレード前: 既存のDAGやカスタムプラグインとの互換性を確認してください。特に**実験的機能（Language Task SDK）**は安定性が保証されていないため、本番環境への導入は慎重に検討します。
• コスト: 新機能の利用に伴うリソース消費（例：ステートストアのストレージ）に注意し、モニタリングを強化してください。
• セキュリティ: マルチ言語タスクの実行時は、依存ライブラリの脆弱性管理を徹底してください。

次のアクション

1. テスト環境でApache Airflow 3.3.1の新機能を検証します。
2. ステートフルタスクの動作を確認するため、長時間実行ジョブのシミュレーションを実施します。
3. 公式ドキュメントのApache Airflow 3.3.1 リリースノートとAmazon MWAA ドキュメントを確認します。