digdag

[シェルスクリプト]CSVを読み込んで1行ずつループ処理とif文で特定の文字列を条件分岐する

シェル芸マスターには程遠いですが🙆🏻‍♂️ digdagの設定ファイルを自動化する時(以下ブログより続きを読む…

前回は抽出のみだったので、今回はBigQueyにぶち込めるのか試してみました！しかもSalesfo 続きを読む…

Digdagを運用していると以下のようにエラーが複数出た。何回も手動でdigdag runしてもエ続きを読む…

🤷🏻‍♂️ [BigQuery][Digdag][SQL][embulk-filter-column 続きを読む…

今までDIgdagでエラー通知をchatworkで行っていたのですが、slackでイケてる通知できな続きを読む…

月次で、あるDBをBigQueryに転送したい場合、実行した年と月をカラムに出力しないといつ実行さ続きを読む…

RDSにあるデータをembulkを使ってBigQueryに飛ばすようにテストを繰り返していました&# 続きを読む…

本日はembulkでBigQueryからRDS(Aurora)に何回もrunしたら、 DBがフェイ続きを読む…

今回はembulkでBigQueryのview table(クエリー)をMySQL(Aurora)に続きを読む…

!!!!!!! [Treasure Data][Redash]Digdagとembulkを使いこなせ続きを読む…

最近Digdagとembulkを勉強してまして、以前、イマイチDiddagについてまったく理解出来続きを読む…