CLI tool to run a batch jobs with ETL framework on AWS.
dsub から着想を得た Amazon Elastic Container Servise (Amazon ECS) を使用したバッチジョブ実行エンジンです。
Amazon Elastic Compute Cloud (Amazon EC2) にインスタンスを作成して docker コンテナを構築しバッチジョブを実行します。
入出力ソースとして Amazon Simple Storage Service (Amazon S3) を使用することができます。
–> 実行の仕組み
–> 【AWS管理者向け】AWS セットアップ
–> 【ユーザ向け】インストールとユーザ設定
コマンドラインからスクリプトファイル (サンプル) とタスクファイル (サンプル) と呼ばれる定義ファイルを指定して実行します。
デモはここから
–> ジョブを実行する
ジョブを実行するにはタスクファイルと呼ばれるタブ区切り (tsv) の定義ファイルが必要です。
–> タスクファイルの書き方
–> エラーかな?と思ったら