AWS Batchで並列処理

AWS Batchの基本と同時並列実行など
https://open-groove.net/aws/aws-batch-parallel-job/
AWS Batchで同時並列処理を行うには、「配列ジョブ」を使う。
公式(配列ジョブ)
https://docs.aws.amazon.com/ja_jp/batch/latest/userguide/array_jobs.html
AWS Batch の配列ジョブの挙動が確認できるチュートリアルをやってみた
https://dev.classmethod.jp/articles/aws-batch-array-index-example/
ジョブ定義をしたあと、ジョブ定義の名称に、JSON で配列ジョブとして7と、並列実行数を渡している
[Step Functions]動的並列処理(Map)を使って60分×24時間=1440ファイルのバッチ処理を楽々実装してみた
https://dev.classmethod.jp/articles/step-functions-serverless-map-every-minute/

タイトルとURLをコピーしました