2018年7月25日水曜日

AWS Data Pipeline をジョブスケジューラとして使える(S3のシェルを実行)


AWS Data Pipeline でS3に置いたシェルを実行できるらしい。

ジョブの依存関係も設定可能。

スケジュール起動も可能。

ジョブの異常は、SNSでメール通知。

ジョブのログはS3に格納できる。

[AWS Data Pipeline]S3上の任意のシェルを実行しジョブを連携させる