digdag – ページ 2 – ADACHIN SERVER LABO

BigQuery digdag embulk MySQL

[BigQuery][Digdag][SQL][embulk-filter-column]年と月を保持するためのカラム追加はembulkでできる!

月次で、あるDBをBigQueryに転送したい場合、実行した年と月をカラムに出力しないといつ実行さ続きを読む…

投稿者:adachin 投稿日時:3年2年前

BigQuery Blog digdag embulk GCP MySQL

[Digdag][embulk][MySQL]BigQueryにtinyint,bool型を入れるにはSIGNED型にキャストしないとアカン!

RDSにあるデータをembulkを使ってBigQueryに飛ばすようにテストを繰り返していました&# 続きを読む…

投稿者:adachin 投稿日時:3年2年前

AWS digdag embulk MySQL

[AWS]RDS(Aurora)のgeneral_logはTRUNCATEで削除できない!?

本日はembulkでBigQueryからRDS(Aurora)に何回もrunしたら、 DBがフェイ続きを読む…

投稿者:adachin 投稿日時:3年2年前

AWS BigQuery digdag embulk GCP MySQL SQL

[Digdag][embulk-input-bigquery]BigQueryからMySQLにクエリーを飛ばすには!?

今回はembulkでBigQueryのview table(クエリー)をMySQL(Aurora)に続きを読む…

投稿者:adachin 投稿日時:3年2年前

digdag embulk

[Digdag][embulk]過去ログを投入するのに手動で日付を指定するのは辛いのでシェルスクリプト化してみた

!!!!!!! [Treasure Data][Redash]Digdagとembulkを使いこなせ続きを読む…

投稿者:adachin 投稿日時:3年2年前

digdag embulk Redash

[Treasure Data][Redash]Digdagとembulkを使いこなせば驚異的な分析基盤が出来上がる!!

最近Digdagとembulkを勉強してまして、以前、イマイチDiddagについてまったく理解出来続きを読む…

投稿者:adachin 投稿日時:3年2年前