digdag

[シェルスクリプト]CSVを読み込んで1行ずつループ処理とif文で特定の文字列を条件分岐する

シェル芸マスターには程遠いですが🤷🏻‍♂️ digdagの設定ファイルを自動化する時(以下ブログより続きを読む…

投稿者:あだちん 投稿日時:2日2日前

前回は抽出のみだったので、今回はBigQueyにぶち込めるのか試してみました！しかもSalesfo 続きを読む…

Digdagを運用していると以下のようにエラーが複数出た。😂 何回も手動でdigdag runしても続きを読む…

😩 [BigQuery][Digdag][SQL][embulk-filter-column]年と月続きを読む…

今までDIgdagでエラー通知をchatworkで行っていたのですが、slackでイケてる通知できな続きを読む…

月次で、あるDBをBigQueryに転送したい場合、実行した年と月をカラムに出力しないといつ実行さ続きを読む…

RDSにあるデータをembulkを使ってBigQueryに飛ばすようにテストを繰り返していました&# 続きを読む…

本日はembulkでBigQueryからRDS(Aurora)に何回もrunしたら、 DBがフェイ続きを読む…

今回はembulkでBigQueryのview table(クエリー)をMySQL(Aurora)に続きを読む…

😁!!!!!!! [Treasure Data][Redash]Digdagとembulkを使いこな続きを読む…

最近Digdagとembulkを勉強してまして、以前、イマイチDiddagについてまったく理解出来続きを読む…