AWS AWS Batch – State Machine Integration
Step Functionsとつなげて、バッチ処理を大きなワークフローの一部に組み込める。例えばデータを集めて→Batchで加工→結果を検証→通知…みたいな高度自動化が可能になる。
AWS AWS AWS Batch – Multi-node Parallel Jobs
MPIなどを使って複数ノードで並列処理する大規模ジョブもサポート。1台では時間がかかる科学計算や機械学習を一斉に回せる。HPC(ハイパフォーマンスコンピューティング)分野でもBatchが活かせるんだ。
AWS AWS Batch – Job Requeue
失敗したジョブをもう一度キューに戻してリトライする機能。原因が一時的なエラーなら次回成功するかもしれないし、ユーザー操作が不要だから自動復帰が期待できるんだ。
AWS AWS Batch – Compute Resource Tags
Batchが立ち上げるEC2インスタンスに自動でタグを付けられる。どのバッチ用か可視化できるし、コスト集計もしやすい。大規模運用でインスタンスが多いほど助かる機能だね。
AWS AWS Batch – IAM Roles
ジョブがS3などにアクセスするときの権限を設定して、必要最小限だけ許可できる。セキュリティ確保しながら色んなリソースを扱えるから、企業利用でも安心。
AWS AWS Batch – ECS Integration
裏ではECSがコンテナを起動していて、Batchはその管理だけ担当する形。なのでECSを知っていれば仕組みがわかりやすいし、Dockerで書いたアプリを簡単にバッチ化できるんだ。
AWS AWS Batch – Logs
ジョブの実行ログをCloudWatchなどで確認し、失敗理由や出力結果をすぐに見られる。大量ジョブでも一元的に管理できるから、あとでトラブル追跡がしやすいんだ。
AWS AWS Batch – Spot Instances
EC2の余り枠を安価に使うスポットインスタンスでバッチを走らせれば、コスト削減できる。途中で中断される可能性はあるけど、再開が容易な処理ならお得だね。
AWS AWS Batch – Job Definitions
Dockerイメージの場所や環境変数、メモリ/CPUの要求などをまとめてテンプレにしたもの。ジョブごとにこれを指定して送るから、プロジェクトの標準化が楽になるんだ。
AWS AWS Batch – Timeout
一定時間内に終わらなかったら強制終了する設定。無限ループや遅すぎるジョブを止めたいときに有効だし、コストが暴走するのを防ぐ。