ADACHIN SERVER LABO

  • Home
  • About Me
  • Server Metrics
  • Privacypolicy
  • Wiki
  • Contact

digdag

digdag shell script slack

[Digdag][shell script]slack/chatworkでシンプルなエラー通知を行う

今までDIgdagでエラー通知をchatworkで行っていたのですが、slackでイケてる通知できな 続きを読む…

投稿者:adachin 投稿日時:7年2018/08/31前
BigQuery digdag embulk MySQL

[BigQuery][Digdag][SQL][embulk-filter-column]年と月を保持するためのカラム追加はembulkでできる!

月次で、あるDBをBigQueryに転送したい場合、 実行した年と月をカラムに出力しないといつ実行さ 続きを読む…

投稿者:adachin 投稿日時:7年2018/07/25前
BigQuery Blog digdag embulk GCP MySQL

[Digdag][embulk][MySQL]BigQueryにtinyint,bool型を入れるにはSIGNED型にする必要がある

RDSにあるデータをembulkを使ってBigQueryに飛ばすようにテストを繰り返していたところ、 続きを読む…

投稿者:adachin 投稿日時:7年2018/07/13前
AWS digdag embulk MySQL

[AWS]RDS(Aurora)のgeneral_logはTRUNCATEで削除できない!?

本日はembulkでBigQueryからRDS(Aurora)に何回もrunしたら、 DBがフェイ 続きを読む…

投稿者:adachin 投稿日時:7年2018/06/07前
AWS BigQuery digdag embulk GCP MySQL SQL

[Digdag][embulk-input-bigquery]BigQueryからMySQLにクエリーを飛ばすには!?

今回はembulkでBigQueryのview table(クエリー)をMySQL(Aurora)に 続きを読む…

投稿者:adachin 投稿日時:7年2018/06/06前
digdag embulk

[Digdag][embulk]過去ログを投入するのに手動で日付を指定するのは辛いのでシェルスクリプト化してみた

!!!!!!! [Treasure Data][Redash]Digdagとembulkを使いこなせ 続きを読む…

投稿者:adachin 投稿日時:7年2018/05/10前
digdag embulk Redash

[Treasure Data][Redash]Digdagとembulkを使いこなせば驚異的な分析基盤が出来上がる!!

最近Digdagとembulkを勉強してまして、以前、イマイチDiddagについてまったく理解出来ま 続きを読む…

投稿者:adachin 投稿日時:7年2018/05/04前

投稿のページ送り

前へ 1 2
Search🏃
Follow Us on FacebookFollow Us on TwitterFollow Us on GithubFollow Us on LinkedInFollow Us on speakerdeck
https://youtu.be/2aopnPQJLVA?si=WdZxGkCufmuV0Iko

Alpine Linux Ansible Apache AWS BigQuery CakePHP CentOS Chef CircleCI coreos Digdag DigitalOcean Docker ECS/Fargate Embulk GCP Git GitHub GitHub Actions Go H2O Kubernetes Linux mac Mackerel MySQL Nginx PHP Python Rails Redash Ruby Security shell script slack SRE SSH Terraform tmux ubuntu vulnerability Vuls WordPress zabbix 勉強会/交流会

Ranking💪

  • Home
  • About Me
  • Server Metrics
  • Privacypolicy
  • Wiki
  • Contact
Hestia、作成者: ThemeIsle