図で理解する Dagster on ECS の構成と、失敗に気づく仕組み
- Dagster on ECS でデータ取り込み処理を実行する構成と、失敗を検出する2本の通知経路を説明
- ECS 上で code-location・daemon・webserver を常駐、run worker をアドホックに起動、EventBridge と CloudWatch アラームで異常を監視
- メモリ不足やハングの場合は2本の通知経路で失敗を検出、daemon のデプロイ時はアラームの猶予を10分に設定
図で理解する Dagster on ECS の構成と、失敗に気づく仕組み


