Submit Search
Upload
分散ワークフローエンジン『Digdag』の実装 at Tokyo RubyKaigi #11
•
44 likes
•
71,511 views
Sadayuki Furuhashi
Follow
Presented at Tokyo RubyKaigi #11
Read less
Read more
Presentations & Public Speaking
Report
Share
Report
Share
1 of 49
Download now
Download to read offline
Recommended
DDD x CQRS 更新系と参照系で異なるORMを併用して上手くいった話
DDD x CQRS 更新系と参照系で異なるORMを併用して上手くいった話
Koichiro Matsuoka
SQLアンチパターン - 開発者を待ち受ける25の落とし穴 (拡大版)
SQLアンチパターン - 開発者を待ち受ける25の落とし穴 (拡大版)
Takuto Wada
Digdagによる大規模データ処理の自動化とエラー処理
Digdagによる大規模データ処理の自動化とエラー処理
Sadayuki Furuhashi
Dockerからcontainerdへの移行
Dockerからcontainerdへの移行
Kohei Tokunaga
本当は恐ろしい分散システムの話
本当は恐ろしい分散システムの話
Kumazaki Hiroki
SpringBootTest入門
SpringBootTest入門
Yahoo!デベロッパーネットワーク
データ収集の基本と「JapanTaxi」アプリにおける実践例
データ収集の基本と「JapanTaxi」アプリにおける実践例
Tetsutaro Watanabe
SQLアンチパターン 幻の第26章「とりあえず削除フラグ」
SQLアンチパターン 幻の第26章「とりあえず削除フラグ」
Takuto Wada
Recommended
DDD x CQRS 更新系と参照系で異なるORMを併用して上手くいった話
DDD x CQRS 更新系と参照系で異なるORMを併用して上手くいった話
Koichiro Matsuoka
SQLアンチパターン - 開発者を待ち受ける25の落とし穴 (拡大版)
SQLアンチパターン - 開発者を待ち受ける25の落とし穴 (拡大版)
Takuto Wada
Digdagによる大規模データ処理の自動化とエラー処理
Digdagによる大規模データ処理の自動化とエラー処理
Sadayuki Furuhashi
Dockerからcontainerdへの移行
Dockerからcontainerdへの移行
Kohei Tokunaga
本当は恐ろしい分散システムの話
本当は恐ろしい分散システムの話
Kumazaki Hiroki
SpringBootTest入門
SpringBootTest入門
Yahoo!デベロッパーネットワーク
データ収集の基本と「JapanTaxi」アプリにおける実践例
データ収集の基本と「JapanTaxi」アプリにおける実践例
Tetsutaro Watanabe
SQLアンチパターン 幻の第26章「とりあえず削除フラグ」
SQLアンチパターン 幻の第26章「とりあえず削除フラグ」
Takuto Wada
PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜
PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜
Preferred Networks
DDDのモデリングとは何なのか、 そしてどうコードに落とすのか
DDDのモデリングとは何なのか、 そしてどうコードに落とすのか
Koichiro Matsuoka
NetflixにおけるPresto/Spark活用事例
NetflixにおけるPresto/Spark活用事例
Amazon Web Services Japan
継続的なモデルモニタリングを実現するKubernetes Operator
継続的なモデルモニタリングを実現するKubernetes Operator
Yahoo!デベロッパーネットワーク
Kubernetesでの性能解析 ～なんとなく遅いからの脱却～（Kubernetes Meetup Tokyo #33 発表資料）
Kubernetesでの性能解析 ～なんとなく遅いからの脱却～（Kubernetes Meetup Tokyo #33 発表資料）
NTT DATA Technology & Innovation
今こそ知りたいSpring Batch（Spring Fest 2020講演資料）
今こそ知りたいSpring Batch（Spring Fest 2020講演資料）
NTT DATA Technology & Innovation
脱RESTful API設計の提案
脱RESTful API設計の提案
樽八 仲川
データウェアハウスモデリング入門（ダイジェスト版）（事前公開版）
データウェアハウスモデリング入門（ダイジェスト版）（事前公開版）
Satoshi Nagayasu
DigdagはなぜYAMLなのか？
DigdagはなぜYAMLなのか？
Sadayuki Furuhashi
ゼロから始める転移学習
ゼロから始める転移学習
Yahoo!デベロッパーネットワーク
分散システムについて語らせてくれ
分散システムについて語らせてくれ
Kumazaki Hiroki
KafkaとPulsar
KafkaとPulsar
Yahoo!デベロッパーネットワーク
エンジニアの個人ブランディングと技術組織
エンジニアの個人ブランディングと技術組織
Takafumi ONAKA
SPAセキュリティ入門～PHP Conference Japan 2021
SPAセキュリティ入門～PHP Conference Japan 2021
Hiroshi Tokumaru
Kinesis + Elasticsearchでつくるさいきょうのログ分析基盤
Kinesis + Elasticsearchでつくるさいきょうのログ分析基盤
Amazon Web Services Japan
なかったらINSERTしたいし、あるならロック取りたいやん?
なかったらINSERTしたいし、あるならロック取りたいやん?
ichirin2501
ポスト・ラムダアーキテクチャの切り札? Apache Hudi（NTTデータ テクノロジーカンファレンス 2020 発表資料）
ポスト・ラムダアーキテクチャの切り札? Apache Hudi（NTTデータ テクノロジーカンファレンス 2020 発表資料）
NTT DATA Technology & Innovation
コンテナの作り方「Dockerは裏方で何をしているのか？」
コンテナの作り方「Dockerは裏方で何をしているのか？」
Masahito Zembutsu
ドメインロジックに集中せよ 〜ドメイン駆動設計 powered by Spring
ドメインロジックに集中せよ 〜ドメイン駆動設計 powered by Spring
増田 亨
PostgreSQLでスケールアウト
PostgreSQLでスケールアウト
Masahiko Sawada
Scripting Embulk Plugins
Scripting Embulk Plugins
Sadayuki Furuhashi
Performance Optimization Techniques of MessagePack-Ruby - RubyKaigi 2019
Performance Optimization Techniques of MessagePack-Ruby - RubyKaigi 2019
Sadayuki Furuhashi
More Related Content
What's hot
PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜
PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜
Preferred Networks
DDDのモデリングとは何なのか、 そしてどうコードに落とすのか
DDDのモデリングとは何なのか、 そしてどうコードに落とすのか
Koichiro Matsuoka
NetflixにおけるPresto/Spark活用事例
NetflixにおけるPresto/Spark活用事例
Amazon Web Services Japan
継続的なモデルモニタリングを実現するKubernetes Operator
継続的なモデルモニタリングを実現するKubernetes Operator
Yahoo!デベロッパーネットワーク
Kubernetesでの性能解析 ～なんとなく遅いからの脱却～（Kubernetes Meetup Tokyo #33 発表資料）
Kubernetesでの性能解析 ～なんとなく遅いからの脱却～（Kubernetes Meetup Tokyo #33 発表資料）
NTT DATA Technology & Innovation
今こそ知りたいSpring Batch（Spring Fest 2020講演資料）
今こそ知りたいSpring Batch（Spring Fest 2020講演資料）
NTT DATA Technology & Innovation
脱RESTful API設計の提案
脱RESTful API設計の提案
樽八 仲川
データウェアハウスモデリング入門（ダイジェスト版）（事前公開版）
データウェアハウスモデリング入門（ダイジェスト版）（事前公開版）
Satoshi Nagayasu
DigdagはなぜYAMLなのか？
DigdagはなぜYAMLなのか？
Sadayuki Furuhashi
ゼロから始める転移学習
ゼロから始める転移学習
Yahoo!デベロッパーネットワーク
分散システムについて語らせてくれ
分散システムについて語らせてくれ
Kumazaki Hiroki
KafkaとPulsar
KafkaとPulsar
Yahoo!デベロッパーネットワーク
エンジニアの個人ブランディングと技術組織
エンジニアの個人ブランディングと技術組織
Takafumi ONAKA
SPAセキュリティ入門～PHP Conference Japan 2021
SPAセキュリティ入門～PHP Conference Japan 2021
Hiroshi Tokumaru
Kinesis + Elasticsearchでつくるさいきょうのログ分析基盤
Kinesis + Elasticsearchでつくるさいきょうのログ分析基盤
Amazon Web Services Japan
なかったらINSERTしたいし、あるならロック取りたいやん?
なかったらINSERTしたいし、あるならロック取りたいやん?
ichirin2501
ポスト・ラムダアーキテクチャの切り札? Apache Hudi（NTTデータ テクノロジーカンファレンス 2020 発表資料）
ポスト・ラムダアーキテクチャの切り札? Apache Hudi（NTTデータ テクノロジーカンファレンス 2020 発表資料）
NTT DATA Technology & Innovation
コンテナの作り方「Dockerは裏方で何をしているのか？」
コンテナの作り方「Dockerは裏方で何をしているのか？」
Masahito Zembutsu
ドメインロジックに集中せよ 〜ドメイン駆動設計 powered by Spring
ドメインロジックに集中せよ 〜ドメイン駆動設計 powered by Spring
増田 亨
PostgreSQLでスケールアウト
PostgreSQLでスケールアウト
Masahiko Sawada
What's hot
(20)
PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜
PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜
DDDのモデリングとは何なのか、 そしてどうコードに落とすのか
DDDのモデリングとは何なのか、 そしてどうコードに落とすのか
NetflixにおけるPresto/Spark活用事例
NetflixにおけるPresto/Spark活用事例
継続的なモデルモニタリングを実現するKubernetes Operator
継続的なモデルモニタリングを実現するKubernetes Operator
Kubernetesでの性能解析 ～なんとなく遅いからの脱却～（Kubernetes Meetup Tokyo #33 発表資料）
Kubernetesでの性能解析 ～なんとなく遅いからの脱却～（Kubernetes Meetup Tokyo #33 発表資料）
今こそ知りたいSpring Batch（Spring Fest 2020講演資料）
今こそ知りたいSpring Batch（Spring Fest 2020講演資料）
脱RESTful API設計の提案
脱RESTful API設計の提案
データウェアハウスモデリング入門（ダイジェスト版）（事前公開版）
データウェアハウスモデリング入門（ダイジェスト版）（事前公開版）
DigdagはなぜYAMLなのか？
DigdagはなぜYAMLなのか？
ゼロから始める転移学習
ゼロから始める転移学習
分散システムについて語らせてくれ
分散システムについて語らせてくれ
KafkaとPulsar
KafkaとPulsar
エンジニアの個人ブランディングと技術組織
エンジニアの個人ブランディングと技術組織
SPAセキュリティ入門～PHP Conference Japan 2021
SPAセキュリティ入門～PHP Conference Japan 2021
Kinesis + Elasticsearchでつくるさいきょうのログ分析基盤
Kinesis + Elasticsearchでつくるさいきょうのログ分析基盤
なかったらINSERTしたいし、あるならロック取りたいやん?
なかったらINSERTしたいし、あるならロック取りたいやん?
ポスト・ラムダアーキテクチャの切り札? Apache Hudi（NTTデータ テクノロジーカンファレンス 2020 発表資料）
ポスト・ラムダアーキテクチャの切り札? Apache Hudi（NTTデータ テクノロジーカンファレンス 2020 発表資料）
コンテナの作り方「Dockerは裏方で何をしているのか？」
コンテナの作り方「Dockerは裏方で何をしているのか？」
ドメインロジックに集中せよ 〜ドメイン駆動設計 powered by Spring
ドメインロジックに集中せよ 〜ドメイン駆動設計 powered by Spring
PostgreSQLでスケールアウト
PostgreSQLでスケールアウト
More from Sadayuki Furuhashi
Scripting Embulk Plugins
Scripting Embulk Plugins
Sadayuki Furuhashi
Performance Optimization Techniques of MessagePack-Ruby - RubyKaigi 2019
Performance Optimization Techniques of MessagePack-Ruby - RubyKaigi 2019
Sadayuki Furuhashi
Making KVS 10x Scalable
Making KVS 10x Scalable
Sadayuki Furuhashi
Automating Workflows for Analytics Pipelines
Automating Workflows for Analytics Pipelines
Sadayuki Furuhashi
Fluentd at Bay Area Kubernetes Meetup
Fluentd at Bay Area Kubernetes Meetup
Sadayuki Furuhashi
Logging for Production Systems in The Container Era
Logging for Production Systems in The Container Era
Sadayuki Furuhashi
Fighting Against Chaotically Separated Values with Embulk
Fighting Against Chaotically Separated Values with Embulk
Sadayuki Furuhashi
Embulk - 進化するバルクデータローダ
Embulk - 進化するバルクデータローダ
Sadayuki Furuhashi
Plugin-based software design with Ruby and RubyGems
Plugin-based software design with Ruby and RubyGems
Sadayuki Furuhashi
Embuk internals
Embuk internals
Sadayuki Furuhashi
Embulk, an open-source plugin-based parallel bulk data loader
Embulk, an open-source plugin-based parallel bulk data loader
Sadayuki Furuhashi
Understanding Presto - Presto meetup @ Tokyo #1
Understanding Presto - Presto meetup @ Tokyo #1
Sadayuki Furuhashi
Prestogres internals
Prestogres internals
Sadayuki Furuhashi
Presto+MySQLで分散SQL
Presto+MySQLで分散SQL
Sadayuki Furuhashi
Presto - Hadoop Conference Japan 2014
Presto - Hadoop Conference Japan 2014
Sadayuki Furuhashi
Fluentd - Set Up Once, Collect More
Fluentd - Set Up Once, Collect More
Sadayuki Furuhashi
Prestogres, ODBC & JDBC connectivity for Presto
Prestogres, ODBC & JDBC connectivity for Presto
Sadayuki Furuhashi
What's new in v11 - Fluentd Casual Talks #3 #fluentdcasual
What's new in v11 - Fluentd Casual Talks #3 #fluentdcasual
Sadayuki Furuhashi
How we use Fluentd in Treasure Data
How we use Fluentd in Treasure Data
Sadayuki Furuhashi
Fluentd meetup at Slideshare
Fluentd meetup at Slideshare
Sadayuki Furuhashi
More from Sadayuki Furuhashi
(20)
Scripting Embulk Plugins
Scripting Embulk Plugins
Performance Optimization Techniques of MessagePack-Ruby - RubyKaigi 2019
Performance Optimization Techniques of MessagePack-Ruby - RubyKaigi 2019
Making KVS 10x Scalable
Making KVS 10x Scalable
Automating Workflows for Analytics Pipelines
Automating Workflows for Analytics Pipelines
Fluentd at Bay Area Kubernetes Meetup
Fluentd at Bay Area Kubernetes Meetup
Logging for Production Systems in The Container Era
Logging for Production Systems in The Container Era
Fighting Against Chaotically Separated Values with Embulk
Fighting Against Chaotically Separated Values with Embulk
Embulk - 進化するバルクデータローダ
Embulk - 進化するバルクデータローダ
Plugin-based software design with Ruby and RubyGems
Plugin-based software design with Ruby and RubyGems
Embuk internals
Embuk internals
Embulk, an open-source plugin-based parallel bulk data loader
Embulk, an open-source plugin-based parallel bulk data loader
Understanding Presto - Presto meetup @ Tokyo #1
Understanding Presto - Presto meetup @ Tokyo #1
Prestogres internals
Prestogres internals
Presto+MySQLで分散SQL
Presto+MySQLで分散SQL
Presto - Hadoop Conference Japan 2014
Presto - Hadoop Conference Japan 2014
Fluentd - Set Up Once, Collect More
Fluentd - Set Up Once, Collect More
Prestogres, ODBC & JDBC connectivity for Presto
Prestogres, ODBC & JDBC connectivity for Presto
What's new in v11 - Fluentd Casual Talks #3 #fluentdcasual
What's new in v11 - Fluentd Casual Talks #3 #fluentdcasual
How we use Fluentd in Treasure Data
How we use Fluentd in Treasure Data
Fluentd meetup at Slideshare
Fluentd meetup at Slideshare
Download now
