Submit Search
Upload
Business Innovation cases driven by AI and BigData technologies
•
4 likes
•
3,375 views
DataWorks Summit/Hadoop Summit
Follow
Business Innovation cases driven by AI and BigData technologies
Read less
Read more
Technology
Report
Share
Report
Share
1 of 37
Download now
Download to read offline
Recommended
[配布用]Hadoop summit 富士通_20161102
[配布用]Hadoop summit 富士通_20161102
Haruyasu Ueda
データドリブン企業におけるHadoop基盤とETL -niconicoでの実践例-
データドリブン企業におけるHadoop基盤とETL -niconicoでの実践例-
Makoto SHIMURA
データサイエンス業務と「ツール」
データサイエンス業務と「ツール」
The Japan DataScientist Society
[よくわかるクラウドデータベース] リクルートにおけるRedshift導入・活用事例
[よくわかるクラウドデータベース] リクルートにおけるRedshift導入・活用事例
Amazon Web Services Japan
Yahoo! JAPANを支えるビッグデータプラットフォーム技術
Yahoo! JAPANを支えるビッグデータプラットフォーム技術
Yahoo!デベロッパーネットワーク
リクルート式Hadoopの使い方
リクルート式Hadoopの使い方
Recruit Technologies
リクルートのビッグデータ活用基盤とデータ活用に向けた取組み
リクルートのビッグデータ活用基盤とデータ活用に向けた取組み
Recruit Technologies
A3RT -The details and actual use cases of“Analytics & Artificial intelligence...
A3RT -The details and actual use cases of“Analytics & Artificial intelligence...
Recruit Technologies
Recommended
[配布用]Hadoop summit 富士通_20161102
[配布用]Hadoop summit 富士通_20161102
Haruyasu Ueda
データドリブン企業におけるHadoop基盤とETL -niconicoでの実践例-
データドリブン企業におけるHadoop基盤とETL -niconicoでの実践例-
Makoto SHIMURA
データサイエンス業務と「ツール」
データサイエンス業務と「ツール」
The Japan DataScientist Society
[よくわかるクラウドデータベース] リクルートにおけるRedshift導入・活用事例
[よくわかるクラウドデータベース] リクルートにおけるRedshift導入・活用事例
Amazon Web Services Japan
Yahoo! JAPANを支えるビッグデータプラットフォーム技術
Yahoo! JAPANを支えるビッグデータプラットフォーム技術
Yahoo!デベロッパーネットワーク
リクルート式Hadoopの使い方
リクルート式Hadoopの使い方
Recruit Technologies
リクルートのビッグデータ活用基盤とデータ活用に向けた取組み
リクルートのビッグデータ活用基盤とデータ活用に向けた取組み
Recruit Technologies
A3RT -The details and actual use cases of“Analytics & Artificial intelligence...
A3RT -The details and actual use cases of“Analytics & Artificial intelligence...
Recruit Technologies
DataRobot活用状況@リクルートテクノロジーズ
DataRobot活用状況@リクルートテクノロジーズ
Recruit Technologies
ビッグデータ
ビッグデータ
Shigeru Kishikawa
[Japan Tech summit 2017] MAI 005
[Japan Tech summit 2017] MAI 005
Microsoft Tech Summit 2017
リクルートのビッグデータ活用基盤とビッグデータ活用のためのメタデータ管理Webのご紹介
リクルートのビッグデータ活用基盤とビッグデータ活用のためのメタデータ管理Webのご紹介
Recruit Technologies
20150625 cloudera
20150625 cloudera
Recruit Technologies
A3RT - the details and actual use cases of "Analytics & Artificial intelligen...
A3RT - the details and actual use cases of "Analytics & Artificial intelligen...
DataWorks Summit/Hadoop Summit
ディープラーニングの産業応用とそれを支える技術
ディープラーニングの産業応用とそれを支える技術
Shohei Hido
「リクルートデータセット」 ~公開までの道のりとこれから~
「リクルートデータセット」 ~公開までの道のりとこれから~
Recruit Technologies
Investment in Yahoo! JAPAN's dataplatform and business growth by big data
Investment in Yahoo! JAPAN's dataplatform and business growth by big data
DataWorks Summit/Hadoop Summit
#ibis2017 Description: IBIS2017の企画セッションでの発表資料
#ibis2017 Description: IBIS2017の企画セッションでの発表資料
Yahoo!デベロッパーネットワーク
Amebaにおけるレコメンデーションシステムの紹介
Amebaにおけるレコメンデーションシステムの紹介
cyberagent
リクルート式ビッグデータ活用術
リクルート式ビッグデータ活用術
Recruit Technologies
データ分析プラットフォームの歩き方
データ分析プラットフォームの歩き方
Tomoyuki Oota
分析手法のご紹介
分析手法のご紹介
Recruit Technologies
JJUG CCC リクルートの Java に対する取り組み
JJUG CCC リクルートの Java に対する取り組み
Recruit Technologies
リクルートを支える横断データ基盤と機械学習の適用事例
リクルートを支える横断データ基盤と機械学習の適用事例
Tetsutaro Watanabe
WebDB Forum 2013
WebDB Forum 2013
Recruit Technologies
リクルートのビッグデータ活用基盤とデータ活用に向けた取組み
リクルートのビッグデータ活用基盤とデータ活用に向けた取組み
Recruit Technologies
運用で泣かないアーキテクチャで動く原稿作成支援システム ~リクルートにおけるDeepLearning活用事例~
運用で泣かないアーキテクチャで動く原稿作成支援システム ~リクルートにおけるDeepLearning活用事例~
Recruit Technologies
Pepper+独自会話エンジン
Pepper+独自会話エンジン
Recruit Technologies
Case Study: OLAP usability on Spark and Hadoop
Case Study: OLAP usability on Spark and Hadoop
DataWorks Summit/Hadoop Summit
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
Yahoo!デベロッパーネットワーク
More Related Content
What's hot
DataRobot活用状況@リクルートテクノロジーズ
DataRobot活用状況@リクルートテクノロジーズ
Recruit Technologies
ビッグデータ
ビッグデータ
Shigeru Kishikawa
[Japan Tech summit 2017] MAI 005
[Japan Tech summit 2017] MAI 005
Microsoft Tech Summit 2017
リクルートのビッグデータ活用基盤とビッグデータ活用のためのメタデータ管理Webのご紹介
リクルートのビッグデータ活用基盤とビッグデータ活用のためのメタデータ管理Webのご紹介
Recruit Technologies
20150625 cloudera
20150625 cloudera
Recruit Technologies
A3RT - the details and actual use cases of "Analytics & Artificial intelligen...
A3RT - the details and actual use cases of "Analytics & Artificial intelligen...
DataWorks Summit/Hadoop Summit
ディープラーニングの産業応用とそれを支える技術
ディープラーニングの産業応用とそれを支える技術
Shohei Hido
「リクルートデータセット」 ~公開までの道のりとこれから~
「リクルートデータセット」 ~公開までの道のりとこれから~
Recruit Technologies
Investment in Yahoo! JAPAN's dataplatform and business growth by big data
Investment in Yahoo! JAPAN's dataplatform and business growth by big data
DataWorks Summit/Hadoop Summit
#ibis2017 Description: IBIS2017の企画セッションでの発表資料
#ibis2017 Description: IBIS2017の企画セッションでの発表資料
Yahoo!デベロッパーネットワーク
Amebaにおけるレコメンデーションシステムの紹介
Amebaにおけるレコメンデーションシステムの紹介
cyberagent
リクルート式ビッグデータ活用術
リクルート式ビッグデータ活用術
Recruit Technologies
データ分析プラットフォームの歩き方
データ分析プラットフォームの歩き方
Tomoyuki Oota
分析手法のご紹介
分析手法のご紹介
Recruit Technologies
JJUG CCC リクルートの Java に対する取り組み
JJUG CCC リクルートの Java に対する取り組み
Recruit Technologies
リクルートを支える横断データ基盤と機械学習の適用事例
リクルートを支える横断データ基盤と機械学習の適用事例
Tetsutaro Watanabe
WebDB Forum 2013
WebDB Forum 2013
Recruit Technologies
リクルートのビッグデータ活用基盤とデータ活用に向けた取組み
リクルートのビッグデータ活用基盤とデータ活用に向けた取組み
Recruit Technologies
運用で泣かないアーキテクチャで動く原稿作成支援システム ~リクルートにおけるDeepLearning活用事例~
運用で泣かないアーキテクチャで動く原稿作成支援システム ~リクルートにおけるDeepLearning活用事例~
Recruit Technologies
Pepper+独自会話エンジン
Pepper+独自会話エンジン
Recruit Technologies
What's hot
(20)
DataRobot活用状況@リクルートテクノロジーズ
DataRobot活用状況@リクルートテクノロジーズ
ビッグデータ
ビッグデータ
[Japan Tech summit 2017] MAI 005
[Japan Tech summit 2017] MAI 005
リクルートのビッグデータ活用基盤とビッグデータ活用のためのメタデータ管理Webのご紹介
リクルートのビッグデータ活用基盤とビッグデータ活用のためのメタデータ管理Webのご紹介
20150625 cloudera
20150625 cloudera
A3RT - the details and actual use cases of "Analytics & Artificial intelligen...
A3RT - the details and actual use cases of "Analytics & Artificial intelligen...
ディープラーニングの産業応用とそれを支える技術
ディープラーニングの産業応用とそれを支える技術
「リクルートデータセット」 ~公開までの道のりとこれから~
「リクルートデータセット」 ~公開までの道のりとこれから~
Investment in Yahoo! JAPAN's dataplatform and business growth by big data
Investment in Yahoo! JAPAN's dataplatform and business growth by big data
#ibis2017 Description: IBIS2017の企画セッションでの発表資料
#ibis2017 Description: IBIS2017の企画セッションでの発表資料
Amebaにおけるレコメンデーションシステムの紹介
Amebaにおけるレコメンデーションシステムの紹介
リクルート式ビッグデータ活用術
リクルート式ビッグデータ活用術
データ分析プラットフォームの歩き方
データ分析プラットフォームの歩き方
分析手法のご紹介
分析手法のご紹介
JJUG CCC リクルートの Java に対する取り組み
JJUG CCC リクルートの Java に対する取り組み
リクルートを支える横断データ基盤と機械学習の適用事例
リクルートを支える横断データ基盤と機械学習の適用事例
WebDB Forum 2013
WebDB Forum 2013
リクルートのビッグデータ活用基盤とデータ活用に向けた取組み
リクルートのビッグデータ活用基盤とデータ活用に向けた取組み
運用で泣かないアーキテクチャで動く原稿作成支援システム ~リクルートにおけるDeepLearning活用事例~
運用で泣かないアーキテクチャで動く原稿作成支援システム ~リクルートにおけるDeepLearning活用事例~
Pepper+独自会話エンジン
Pepper+独自会話エンジン
Viewers also liked
Case Study: OLAP usability on Spark and Hadoop
Case Study: OLAP usability on Spark and Hadoop
DataWorks Summit/Hadoop Summit
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
Yahoo!デベロッパーネットワーク
SEGA : Growth hacking by Spark ML for Mobile games
SEGA : Growth hacking by Spark ML for Mobile games
DataWorks Summit/Hadoop Summit
Sparkを活用したレコメンドエンジンのパフォーマンスチューニング&自動化
Sparkを活用したレコメンドエンジンのパフォーマンスチューニング&自動化
Nagato Kasaki
データ分析グループの組織編制とその課題 マーケティングにおけるKPI設計の失敗例 ABテストの活用と、機械学習の導入 #CWT2016
データ分析グループの組織編制とその課題 マーケティングにおけるKPI設計の失敗例 ABテストの活用と、機械学習の導入 #CWT2016
Tokoroten Nakayama
大規模データに対するデータサイエンスの進め方 #CWT2016
大規模データに対するデータサイエンスの進め方 #CWT2016
Cloudera Japan
Hadoop’s Impact on Recruit Company
Hadoop’s Impact on Recruit Company
Recruit Technologies
sparksql-hive-bench-by-nec-hwx-at-hcj16
sparksql-hive-bench-by-nec-hwx-at-hcj16
Yifeng Jiang
Top 5 mistakes when writing Spark applications
Top 5 mistakes when writing Spark applications
hadooparchbook
Viewers also liked
(9)
Case Study: OLAP usability on Spark and Hadoop
Case Study: OLAP usability on Spark and Hadoop
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
SEGA : Growth hacking by Spark ML for Mobile games
SEGA : Growth hacking by Spark ML for Mobile games
Sparkを活用したレコメンドエンジンのパフォーマンスチューニング&自動化
Sparkを活用したレコメンドエンジンのパフォーマンスチューニング&自動化
データ分析グループの組織編制とその課題 マーケティングにおけるKPI設計の失敗例 ABテストの活用と、機械学習の導入 #CWT2016
データ分析グループの組織編制とその課題 マーケティングにおけるKPI設計の失敗例 ABテストの活用と、機械学習の導入 #CWT2016
大規模データに対するデータサイエンスの進め方 #CWT2016
大規模データに対するデータサイエンスの進め方 #CWT2016
Hadoop’s Impact on Recruit Company
Hadoop’s Impact on Recruit Company
sparksql-hive-bench-by-nec-hwx-at-hcj16
sparksql-hive-bench-by-nec-hwx-at-hcj16
Top 5 mistakes when writing Spark applications
Top 5 mistakes when writing Spark applications
Similar to Business Innovation cases driven by AI and BigData technologies
YouthUPs20161015_04_新しい暮らしと生業を創発する協働共創拠点ーーリビングラボ
YouthUPs20161015_04_新しい暮らしと生業を創発する協働共創拠点ーーリビングラボ
YokohamaCommunityDesignLab
2016年度コーポレートフェローシップ活動報告(山本さん)
2016年度コーポレートフェローシップ活動報告(山本さん)
Code for Japan
kintone Cafe Japan 2016: kintone x 機械学習で実現する簡単名刺管理
kintone Cafe Japan 2016: kintone x 機械学習で実現する簡単名刺管理
Takahiro Kubo
AI活用の事始め~データサイエンスの観点から~
AI活用の事始め~データサイエンスの観点から~
Daiki Kato
自慢のAi活用アイデアを30分で潰せる 「AI Lean Diagram」
自慢のAi活用アイデアを30分で潰せる 「AI Lean Diagram」
Shigeyuki Kameda
Splunk Annual event .conf18 report 20181029
Splunk Annual event .conf18 report 20181029
Hiromi Onomura
みんなのPython勉強会#21 澪標アナリティクス 井原様
みんなのPython勉強会#21 澪標アナリティクス 井原様
Takeshi Akutsu
「IoTビジネスの嘘とホント~必要な検討事項と技術検証~」Developer Summit kansai 20160915
「IoTビジネスの嘘とホント~必要な検討事項と技術検証~」Developer Summit kansai 20160915
知礼 八子
副業推奨とオープンソース @ 俺聞け4
副業推奨とオープンソース @ 俺聞け4
Oishi Yuichi
「すべてがつながるIoT時代の共創のあり方」Developer Summit summer 20160729
「すべてがつながるIoT時代の共創のあり方」Developer Summit summer 20160729
知礼 八子
難しくないAI
難しくないAI
佳孝 中田
PKSHA Security Package for Credit
PKSHA Security Package for Credit
MasatoMinami2
グローバル企業の中で「変化」を仕掛ける楽天技術研究所 Rakuten Institute of Technology の挑戦
グローバル企業の中で「変化」を仕掛ける楽天技術研究所 Rakuten Institute of Technology の挑戦
Rakuten Group, Inc.
Data-Centric AI開発における データ生成の取り組み
Data-Centric AI開発における データ生成の取り組み
Takeshi Suzuki
IBM Bluemix + Watson(MS) + Eagle Eye で行う 表情認識システム
IBM Bluemix + Watson(MS) + Eagle Eye で行う 表情認識システム
Masayoshi Ootsuka
Truffle AI
Truffle AI
Haruna Tanaka
IoTをどうとらえ、どう行動するか
IoTをどうとらえ、どう行動するか
Shuji Honjo
現場から始めるアジャイルの技術プラクティス
現場から始めるアジャイルの技術プラクティス
Takuya Okamoto
事業会社が開催する人材育成プログラム ”Data Science BOOTCAMP”とは?
事業会社が開催する人材育成プログラム ”Data Science BOOTCAMP”とは?
Norihiko Nakabayashi
20141018 osc tokyo2014講演(配布用)
20141018 osc tokyo2014講演(配布用)
マジセミ by (株)オープンソース活用研究所
Similar to Business Innovation cases driven by AI and BigData technologies
(20)
YouthUPs20161015_04_新しい暮らしと生業を創発する協働共創拠点ーーリビングラボ
YouthUPs20161015_04_新しい暮らしと生業を創発する協働共創拠点ーーリビングラボ
2016年度コーポレートフェローシップ活動報告(山本さん)
2016年度コーポレートフェローシップ活動報告(山本さん)
kintone Cafe Japan 2016: kintone x 機械学習で実現する簡単名刺管理
kintone Cafe Japan 2016: kintone x 機械学習で実現する簡単名刺管理
AI活用の事始め~データサイエンスの観点から~
AI活用の事始め~データサイエンスの観点から~
自慢のAi活用アイデアを30分で潰せる 「AI Lean Diagram」
自慢のAi活用アイデアを30分で潰せる 「AI Lean Diagram」
Splunk Annual event .conf18 report 20181029
Splunk Annual event .conf18 report 20181029
みんなのPython勉強会#21 澪標アナリティクス 井原様
みんなのPython勉強会#21 澪標アナリティクス 井原様
「IoTビジネスの嘘とホント~必要な検討事項と技術検証~」Developer Summit kansai 20160915
「IoTビジネスの嘘とホント~必要な検討事項と技術検証~」Developer Summit kansai 20160915
副業推奨とオープンソース @ 俺聞け4
副業推奨とオープンソース @ 俺聞け4
「すべてがつながるIoT時代の共創のあり方」Developer Summit summer 20160729
「すべてがつながるIoT時代の共創のあり方」Developer Summit summer 20160729
難しくないAI
難しくないAI
PKSHA Security Package for Credit
PKSHA Security Package for Credit
グローバル企業の中で「変化」を仕掛ける楽天技術研究所 Rakuten Institute of Technology の挑戦
グローバル企業の中で「変化」を仕掛ける楽天技術研究所 Rakuten Institute of Technology の挑戦
Data-Centric AI開発における データ生成の取り組み
Data-Centric AI開発における データ生成の取り組み
IBM Bluemix + Watson(MS) + Eagle Eye で行う 表情認識システム
IBM Bluemix + Watson(MS) + Eagle Eye で行う 表情認識システム
Truffle AI
Truffle AI
IoTをどうとらえ、どう行動するか
IoTをどうとらえ、どう行動するか
現場から始めるアジャイルの技術プラクティス
現場から始めるアジャイルの技術プラクティス
事業会社が開催する人材育成プログラム ”Data Science BOOTCAMP”とは?
事業会社が開催する人材育成プログラム ”Data Science BOOTCAMP”とは?
20141018 osc tokyo2014講演(配布用)
20141018 osc tokyo2014講演(配布用)
More from DataWorks Summit/Hadoop Summit
Running Apache Spark & Apache Zeppelin in Production
Running Apache Spark & Apache Zeppelin in Production
DataWorks Summit/Hadoop Summit
State of Security: Apache Spark & Apache Zeppelin
State of Security: Apache Spark & Apache Zeppelin
DataWorks Summit/Hadoop Summit
Unleashing the Power of Apache Atlas with Apache Ranger
Unleashing the Power of Apache Atlas with Apache Ranger
DataWorks Summit/Hadoop Summit
Enabling Digital Diagnostics with a Data Science Platform
Enabling Digital Diagnostics with a Data Science Platform
DataWorks Summit/Hadoop Summit
Revolutionize Text Mining with Spark and Zeppelin
Revolutionize Text Mining with Spark and Zeppelin
DataWorks Summit/Hadoop Summit
Double Your Hadoop Performance with Hortonworks SmartSense
Double Your Hadoop Performance with Hortonworks SmartSense
DataWorks Summit/Hadoop Summit
Hadoop Crash Course
Hadoop Crash Course
DataWorks Summit/Hadoop Summit
Data Science Crash Course
Data Science Crash Course
DataWorks Summit/Hadoop Summit
Apache Spark Crash Course
Apache Spark Crash Course
DataWorks Summit/Hadoop Summit
Dataflow with Apache NiFi
Dataflow with Apache NiFi
DataWorks Summit/Hadoop Summit
Schema Registry - Set you Data Free
Schema Registry - Set you Data Free
DataWorks Summit/Hadoop Summit
Building a Large-Scale, Adaptive Recommendation Engine with Apache Flink and ...
Building a Large-Scale, Adaptive Recommendation Engine with Apache Flink and ...
DataWorks Summit/Hadoop Summit
Real-Time Anomaly Detection using LSTM Auto-Encoders with Deep Learning4J on ...
Real-Time Anomaly Detection using LSTM Auto-Encoders with Deep Learning4J on ...
DataWorks Summit/Hadoop Summit
Mool - Automated Log Analysis using Data Science and ML
Mool - Automated Log Analysis using Data Science and ML
DataWorks Summit/Hadoop Summit
How Hadoop Makes the Natixis Pack More Efficient
How Hadoop Makes the Natixis Pack More Efficient
DataWorks Summit/Hadoop Summit
HBase in Practice
HBase in Practice
DataWorks Summit/Hadoop Summit
The Challenge of Driving Business Value from the Analytics of Things (AOT)
The Challenge of Driving Business Value from the Analytics of Things (AOT)
DataWorks Summit/Hadoop Summit
Breaking the 1 Million OPS/SEC Barrier in HOPS Hadoop
Breaking the 1 Million OPS/SEC Barrier in HOPS Hadoop
DataWorks Summit/Hadoop Summit
From Regulatory Process Verification to Predictive Maintenance and Beyond wit...
From Regulatory Process Verification to Predictive Maintenance and Beyond wit...
DataWorks Summit/Hadoop Summit
Backup and Disaster Recovery in Hadoop
Backup and Disaster Recovery in Hadoop
DataWorks Summit/Hadoop Summit
More from DataWorks Summit/Hadoop Summit
(20)
Running Apache Spark & Apache Zeppelin in Production
Running Apache Spark & Apache Zeppelin in Production
State of Security: Apache Spark & Apache Zeppelin
State of Security: Apache Spark & Apache Zeppelin
Unleashing the Power of Apache Atlas with Apache Ranger
Unleashing the Power of Apache Atlas with Apache Ranger
Enabling Digital Diagnostics with a Data Science Platform
Enabling Digital Diagnostics with a Data Science Platform
Revolutionize Text Mining with Spark and Zeppelin
Revolutionize Text Mining with Spark and Zeppelin
Double Your Hadoop Performance with Hortonworks SmartSense
Double Your Hadoop Performance with Hortonworks SmartSense
Hadoop Crash Course
Hadoop Crash Course
Data Science Crash Course
Data Science Crash Course
Apache Spark Crash Course
Apache Spark Crash Course
Dataflow with Apache NiFi
Dataflow with Apache NiFi
Schema Registry - Set you Data Free
Schema Registry - Set you Data Free
Building a Large-Scale, Adaptive Recommendation Engine with Apache Flink and ...
Building a Large-Scale, Adaptive Recommendation Engine with Apache Flink and ...
Real-Time Anomaly Detection using LSTM Auto-Encoders with Deep Learning4J on ...
Real-Time Anomaly Detection using LSTM Auto-Encoders with Deep Learning4J on ...
Mool - Automated Log Analysis using Data Science and ML
Mool - Automated Log Analysis using Data Science and ML
How Hadoop Makes the Natixis Pack More Efficient
How Hadoop Makes the Natixis Pack More Efficient
HBase in Practice
HBase in Practice
The Challenge of Driving Business Value from the Analytics of Things (AOT)
The Challenge of Driving Business Value from the Analytics of Things (AOT)
Breaking the 1 Million OPS/SEC Barrier in HOPS Hadoop
Breaking the 1 Million OPS/SEC Barrier in HOPS Hadoop
From Regulatory Process Verification to Predictive Maintenance and Beyond wit...
From Regulatory Process Verification to Predictive Maintenance and Beyond wit...
Backup and Disaster Recovery in Hadoop
Backup and Disaster Recovery in Hadoop
Recently uploaded
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
Hiroshi Tomioka
クラウドネイティブなサーバー仮想化基盤 - OpenShift Virtualization.pdf
クラウドネイティブなサーバー仮想化基盤 - OpenShift Virtualization.pdf
FumieNakayama
デジタル・フォレンジックの最新動向(2024年4月27日情洛会総会特別講演スライド)
デジタル・フォレンジックの最新動向(2024年4月27日情洛会総会特別講演スライド)
UEHARA, Tetsutaro
TataPixel: 畳の異方性を利用した切り替え可能なディスプレイの提案
TataPixel: 畳の異方性を利用した切り替え可能なディスプレイの提案
sugiuralab
モーダル間の変換後の一致性とジャンル表を用いた解釈可能性の考察 ~Text-to-MusicとText-To-ImageかつImage-to-Music...
モーダル間の変換後の一致性とジャンル表を用いた解釈可能性の考察 ~Text-to-MusicとText-To-ImageかつImage-to-Music...
博三 太田
自分史上一番早い2024振り返り〜コロナ後、仕事は通常ペースに戻ったか〜 by IoT fullstack engineer
自分史上一番早い2024振り返り〜コロナ後、仕事は通常ペースに戻ったか〜 by IoT fullstack engineer
Yuki Kikuchi
AWS の OpenShift サービス (ROSA) を使った OpenShift Virtualizationの始め方.pdf
AWS の OpenShift サービス (ROSA) を使った OpenShift Virtualizationの始め方.pdf
FumieNakayama
CTO, VPoE, テックリードなどリーダーポジションに登用したくなるのはどんな人材か?
CTO, VPoE, テックリードなどリーダーポジションに登用したくなるのはどんな人材か?
akihisamiyanaga1
Recently uploaded
(8)
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
クラウドネイティブなサーバー仮想化基盤 - OpenShift Virtualization.pdf
クラウドネイティブなサーバー仮想化基盤 - OpenShift Virtualization.pdf
デジタル・フォレンジックの最新動向(2024年4月27日情洛会総会特別講演スライド)
デジタル・フォレンジックの最新動向(2024年4月27日情洛会総会特別講演スライド)
TataPixel: 畳の異方性を利用した切り替え可能なディスプレイの提案
TataPixel: 畳の異方性を利用した切り替え可能なディスプレイの提案
モーダル間の変換後の一致性とジャンル表を用いた解釈可能性の考察 ~Text-to-MusicとText-To-ImageかつImage-to-Music...
モーダル間の変換後の一致性とジャンル表を用いた解釈可能性の考察 ~Text-to-MusicとText-To-ImageかつImage-to-Music...
自分史上一番早い2024振り返り〜コロナ後、仕事は通常ペースに戻ったか〜 by IoT fullstack engineer
自分史上一番早い2024振り返り〜コロナ後、仕事は通常ペースに戻ったか〜 by IoT fullstack engineer
AWS の OpenShift サービス (ROSA) を使った OpenShift Virtualizationの始め方.pdf
AWS の OpenShift サービス (ROSA) を使った OpenShift Virtualizationの始め方.pdf
CTO, VPoE, テックリードなどリーダーポジションに登用したくなるのはどんな人材か?
CTO, VPoE, テックリードなどリーダーポジションに登用したくなるのはどんな人材か?
Business Innovation cases driven by AI and BigData technologies
1.
2016年10月27日 富士通株式会社 イノベーティブソリューション事業本部 シニアディレクター 倉知陽一 株式会社富士通研究所
知識情報処理研究所 人工知能研究センター 主管研究員 上田晴康 Business Innovation cases driven by AI and BigData technologies Copyright 2016 FUJITSU LIMITED0 【Hadoop Summit 2016 Tokyo】 ※記載されている製品名、サービス名などの固有名詞は、各社の商標または登録商標です。
2.
2016年10月27日 富士通株式会社 イノベーティブソリューション事業本部 シニアディレクター 倉知 陽一 E-Mail:kurachi.yoichi@jp.fujitsu.com Business
Innovation cases driven by AI and BigData technologies Copyright 2016 FUJITSU LIMITED1 【Hadoop Summit 2016 Tokyo】
3.
本日お話しする内容 Copyright 2016 FUJITSU
LIMITED 1. ビッグデータ × AI(人工知能) 2. 活用事例とソリューション 2
4.
Copyright 2016 FUJITSU
LIMITED ビッグデータ × AI(人工知能) 3
5.
ビッグデータ活用によるイノベーション Copyright 2016 FUJITSU
LIMITED 経営層・分析の専門家に加え、現場部門が活用する時代 現場部門主導によるデータ活用でイノベーションを創出 知的処理/最適化 データ活用による イノベーション 業務 基幹データ、ログデータ 外部 SNS 、オープンデータ • 設備メンテ • オムニチャネル • 動画、音声 IoT センサー、業界横断データ • ものづくりロボット • 人工知能/機械学習 • 未来医療 • インフラ保全 • 自動運転 データ利活用の 高度化 データ量拡大 分析/予測集計/可視化 4
6.
オペレーショナル・データマネジメント・アナリティクス 実践で培ったノウハウを分析シナリオとして型化し、 ビッグデータ利活用ソリューションとして提供 お客さまの業務部門 ビジネスプロセス セルフサービス型のデータ利活用 現場のデータ ・コールセンタ ・アンケート ・売場レポート ・Web書込 生の声 業務データ ・商品 ・顧客 ・POS ・在庫 企業内データ ・日報 ・作業メモ センサー/デバイス SNS/ オープンデータ 外部データ 音声・画像 多種多様・大量データの統合管理 ビジネスプロセスとの融合 構造化データ 非構造化データ ストリームデータ オペレーショナル・データマネジメント オペレーショナル・アナリティクス インテグレーションサービス
業務部門の現場自らがビッグデータを活用してビジネスイノベーションを実現 オペレーショナル・データマネジメント&アナリティクス (Operational Data Management & Analytics:ODMA) ビッグデータ×AI(人工知能)利活用ソリューション AI(人工知能) 機械学習 Copyright 2016 FUJITSU LIMITED Powered by ZinraiODMAソリューション 5
7.
Hadoop Spark 可視化 リコメンド アラート通知 Copyright 2016 FUJITSU
LIMITED ビッグデータ利活用を支える技術 ビッグデータ蓄積 ODS 並列分散処理 分析・予測 !検知 リアルタイム処理 機械学習 抽出加工 外部データ イベントデータ 気象データ SNS など 機器データ ウェアラブル デバイス 業務データ センサーデータ 情報利活用基盤(ODMA) 蓄積収集 活 用 ルール Powered by ZinraiODMAソリューション 6
8.
ビッグデータ × AI(人工知能) Copyright 2016 FUJITSU
LIMITED 活用事例と ソリューション 7
9.
予兆検知による製造ラインの安定稼働の実現 Copyright 2016 FUJITSU
LIMITED 製造機器から収集したセンサーデータをリアルタイム監視 予兆検知により、ライン停止に至るような重大障害になる前に予防保守 事例1 対象 ⇒鋳造プレス機 データ項目数 ⇒20項目 動力 温度 使用電力量 加重 予兆を検知 予防保守 リアルタイム機械学習を活用した予兆検知による計画保守の実現 Powered by ZinraiODMAソリューション ODMA予兆監視モデル 関連企業 故障予兆を 検知し 予防保守を実施 無停止稼動で 関連企業の 生産にも貢献 Spark (リアルタイム処理) データ 取得・加工 ストリーミング データ処理 アノマリ 検知 「いつもと違う」 を検知 インメモリ 並列分散処理 クレンジング フィルタリング 8
10.
Operational Data Management
& Analytics 予兆検知ソリューション アノマリ技術とは 機械学習により「いつもの状態」や「遷移」をモデル化 アノマリ(いつもと違う状態)を検知することで、異常の予兆を監視 アノマリ検知従来の異常検知 過去に発生した異常パターンを学習 (教師あり機械学習) 過去に発生した異常パターンと一致 した場合、異常として検知 「いつも」のパターンを学習 (教師なし機械学習) 「いつも」のパターンからの外れ 値を、アノマリとして検知 状態1 状態2 状態3 状態4状態5 状態6 状態7 いつもの1日 の状態遷移 サイレント 異常 異常 状態 いつもの状態からの 逸脱(アノマリ)を検出 Copyright 2016 FUJITSU LIMITED Powered by ZinraiODMAソリューション 9
11.
FUJITSU CONFIDENTIALFUJITSU CONFIDENTIAL ODMA予兆監視ソリューションの利用 Copyright
2016 FUJITSU LIMITED データの分析結果 原因の探索 センサー データ ・障害の回避、改善 ・更なる安定稼動の実現 ・監視の人的コスト低減 ・品質改善の探求 ・消耗品の効率利用 ・稼動状況の見える化 ・ベテランノウハウの共有 … センサーデータの可視化 本格的なデータ利活用 新しい製造と価値が 創造できます! AI:機械学習 アノマリ分析結果の表示 いつもとの違い (アノマリ) を自動判断 教師なし 機械学習による 自動モデル化 ODMA予兆監視ソリューション 鋳造プレス機 10
12.
FUJITSU CONFIDENTIALFUJITSU CONFIDENTIAL ODMA予兆監視の分析力 Copyright
2016 FUJITSU LIMITED 業務記録では このタイミングで 異常を検知 ⇒リセット操作実施 データの微細な変化から ODMA予兆監視では 「アノマリ警告」を検知 ⇒予兆として「警告」を利用可能 アラートView アノマリスコアグラフ 11
13.
ODMA顧客行動分析ソリューション Hadoop 販売員の声・ 接客事例・SNS お客様情報 購買履歴 グループごとに 分析し施策検討 ダイレクト メール クーポン ノベルティ 顧客行動分析によるオムニチャネルの高度化 SNS、オムニチャネルからの情報を加えた自動クラスタリング お客様のグループごとに、特性を踏まえた仮説による商品推奨 機械学習を活用した自動クラスタリングに基づき、 個々のお客様への最適アプローチを立案 事例2 Copyright
2016 FUJITSU LIMITED Powered by ZinraiODMAソリューション 機械学習(クラスタリング) 購買層を自動的に グルーピング グループごとに 個別アプローチ 並列分散処理 全顧客の 関連データを 処理 12
14.
Operational Data Management
& Analytics 顧客行動分析ソリューション 利用シーン例 お客様のターゲット層ごとの特性を踏まえた 仮説による商品やサービスをタイムリーに推奨 Copyright 2016 FUJITSU LIMITED Powered by ZinraiODMAソリューション 購買履歴 お客様情報 … 企画担当者 ライフスタイルこだわり型 健康・美への意識の高い ミドル層主婦・所得高め 顧客 グループ 年齢 来店 頻度 立ち寄っては いるが、購買は していないフロアで 買い物して いただくには・・・ ! 休日の リビングで20分 立ち止まって いたら、 クーポンや 広告を配信 年齢 30代後半~40代 購買傾向 自然素材・自然食品等 オーガニック系が多い 来店頻度 1回/2ヶ月 顧客グループごとに 新しい買い物シーンを 提案 食品 婦人服 婦人 雑貨 紳士 飲食 リビング 動線 来店客の現在位置・ 滞留時間 自然素材の ソファカバー 広告 配送無料 クーポン Wi-Fiで 位置捕捉 ルール 来店日=休日 場所=リビング 滞留=20分 判断 動線 休日はリビングに直行 13
15.
ODMA 需要予測ソリューション Hadoop 店舗C 店舗B 店舗A チャネル別販売明細を活用したメーカの売上向上 販売明細や気象/地域イベントなどを加えた マイクロマーケティングによる販売施策で売上を最大化 飲料メーカの営業が、店舗・商品ごとの需要を予測 店舗ごとに、周辺環境や世帯特性に加え、気象やイベントを考慮した販促 Copyright
2016 FUJITSU LIMITED 販売明細 地域のイベント 気象データ 店舗ごと・ 商品ごとに イベントに合わせた 販促施策を立案 企画 担当者 事例3 Powered by ZinraiODMAソリューション 機械学習 商品別 予測モデル 地域別・店舗別 並列分散処理 店舗別・ 商品別に 需要予測 14
16.
商品・店舗等、多様な軸で販売データの時系列推移を可視化 予測結果を様々な視点でアドホックに可視化できるので、 直感的な分析が可能 Copyright
2016 FUJITSU LIMITED Operational Data Management & Analytics 需要予測ソリューション 画面例 分析画面を ブックマーク保存 分析条件で 絞り込み 時間軸の粒度や 範囲を指定 売上金額と数量の予測値を表示 過去については実績値との比較も表示可能 実績値 予測値 売上金額と数量の予測値を表示 過去については実績値との比較も表示可能 ODMAソリューション Powered by Zinrai ODMAソリューション 15
17.
お客様/パートナーとの共創 企業と企業のつながり、企業と生活者、社会への関わりから 生まれる新しい価値の共創 SoRとSoEをシームレスに連携することで、お客様システム 全体のイノベーションを加速 SoR 受発注
在庫管理 ERP 生産管理 … … SoE デジタルマーケティング (オム二チャネル) M2M/ものづくり モビリティ 生活者 社会企業 ネット広告 ソーシャル メディア 店舗 公共施設 通販WEBサイト コンタクト センター ECサイト 情報利用活用 連携 業務データ 連携 現場データ 外部データ 連携 業務システム FUJITSU Knowledge Integration AI(人工知能) 機械学習 Copyright 2016 FUJITSU LIMITED16
18.
Business Innovation cases driven
by AI and BigData technologies Copyright 2016 FUJITSU LABORATORIES LTD17 2016年10月27日 株式会社富士通研究所 知識情報処理研究所 人工知能研究センター 主管研究員 上田 晴康 E-Mail:hal_ueda@jp.fujitsu.com 【Hadoop Summit 2016 Tokyo】
19.
自己紹介 大学を卒業する時は、 第2の人工知能ブームが来た頃 機械学習の研究してました 人工知能の冬の時代は、 組合せ最適化とか並列処理とか 研究していました 「ビッグデータ」時代になったので、 Hadoop, Sparkの技術開発に加えて、 人工知能を簡単に使えるようにする技術開発を しています。 Copyright 2016
FUJITSU LABORATORIES LTD18
20.
富士通のAI技術のブランド 語源 疾風迅雷(すばやくはげしいこと。) 名前に込めた想い 人の判断・行動を“スピーディ”に サポートすることで、 企業・社会の変革を”ダイナミック”に 実現させる。 ジンライ Copyright
2016 FUJITSU LIMITED 人と協調する、人を中心としたAI 継続的に成長するAI AIを商品・サービスに組込み提供 ■富士通が目指すAIの方向性 19
21.
Copyright 2016 FUJITSU
LIMITED ee p le arn ing Neuroscience Machine learning Social receptivity Simulation - Image recognition - Voice recognition - Emotion/state recognition - Natural-language processing - Knowledge processing & discovery - Pattern discovery - Inference & Planning - Prediction & optimization - Interactivity & recommendation Human Centric AI Zinrai 知覚・認識 知識化 判断・支援 学習 先端研究 ディープラーニング 機械学習 強化学習 脳科学 社会受容性 シミュレーション 人 / 企業 / 社会 アクチュエーションセンシング 画像処理 音声処理 感情・状況認識 自然言語処理 知識処理・発見 パターン発見 推論、計画 予測、最適化 対話、推薦 富士通が考えるAIのフレームワーク 20
22.
AI(機械学習)アプリケーション開発の課題 データからの学習は手間も時間もかかる Copyright 2016
FUJITSU LABORATORIES LTD 学習は何度も行われる 分析相談 効果判定 現場試行 本格運用 •目的の明確化 •入手可能データ 確認 •分析専門家と手作り で試行 データの整形 機械学習アルゴリ ズムの選択 学習パラメータの 選択 学習実行・評価 目的の精度の予測 モデルが得られる まで繰り返し •手作業でコーディング データの整形ルール 監視ルール 通知・連携機能 •データ追加への対応 •データ特性変化への 対応 •連携機能の拡張 重回帰分析? それとも SVR? 3カ月~半年 類似アプリへの展開 •データ追加への対応 •データ特性変化への 対応 •連携機能の拡張 分析し なおし? 毎月分析しなおし? お客様自身も 試したい 分析専門家 21
23.
機械学習とは? 過去のデータから隠れた法則性(予測モデル)を見つけだし その法則で新しいデータの予測をする技術 Copyright 2016
FUJITSU LABORATORIES LTD 過去のデータ プレミアム会員に ならなかった なった 年齢 収入 予測モデル 年齢 収入 新しい会員のデータ プレミアム会員になりそう プレミアム会員にならなさそう 22
24.
課題:機械学習手法の選び方 手法によって予測モデルの作り方が異なる Copyright 2016
FUJITSU LABORATORIES LTD 線形 非線形 どちらの方が 良く当たるのか? 23
25.
予測 精度 検証 機械学習の評価には時間がかかる 分析専門家による試行錯誤が必要 1回の機械学習に1日かかることもある
分析専門家といえども一発では決まらず 試行錯誤が必要 Copyright 2016 FUJITSU LABORATORIES LTD 分析 結果 大量 データ 機 械 学 習 並列処理 実装選択 サンプル 率選択 アルゴリ ズム選択 サンプ リング パラメータ 選択 学習用データ 検証用データ 組合せ 予測 モデル 数分~1日 十 分 な 精 度 ? 分析専門家 データ量が多い方が 精度は高いが 時間がかかりすぎる 24
26.
機械学習の自動化が注目されている KDnugetts※に専用カテゴリが でき、20種のソフトウェアが 登録済み。 企業: SkyTree
DataRobot Loom Systems 研究/OSS: Auto-WEKA auto-sklearn TPOT ※データサイエンティストの有名コミュニティ Copyright 2016 FUJITSU LABORATORIES LTD http://www.kdnuggets.com/software/automated-data-science.html 25
27.
しかも、こんなに組合せがある… Copyright 2016 FUJITSU
LABORATORIES LTD ×10 1~数十 数百通り以上=× 2~5 Spark(並列) R(逐次) 並列処理実装 R(逐次) Spark(並列) Spark(並列) R(並列バギング) R(逐次) R(並列バギング) R(逐次) Python(逐次) Spark(並列) 二値 分類 目的 SVM(Linear) SVM (RBF) Gradient Boosted Tree Random Forest アルゴリズム Naïve Bayes 動作条件 (ハイパーパラメータ) C: 2-50 ~250 NT: 20 ~220 MD: 20 ~220 C: 2-50 ~250 γ: 2-50 ~250 α: 0~100 NT: 20 ~220 MD: 20 ~220 R(並列バギング) R(並列バギング) Python(並列バギング) 力づくでやったら、絶対に終わらない 26
28.
機械学習自動化技術 データ量を少しずつ大きくしながら、各アルゴリズムの 精度向上を見積もる 予測精度が上がる可能性が高く、短時間に実行が終わる 候補を選定して優先実行
見込みのない候補はすばやく除外 Copyright 2016 FUJITSU LABORATORIES LTD サイズ 4000 学習時間 サイズ 1000 サイズ 2000 サイズ 4000 サイズ 8000 サイズ 1000 サイズ 2000 サイズ 1000 精度 サイズ 2000 サイズ 16000 現在の 最高精度 現在 時間はかかるが データを増やせばまだ 精度向上 ⇒ 優先的に実行 これ以上データを増やしても 精度が伸びない ⇒ 候補から除外 ロジスティック 回帰 SVM(RBF) ランダム フォレスト 27
29.
機械 学習 機械学習自動化技術の詳細 1. サンプル率を動的に変えながら見込みのあるアルゴリズム・ 動作条件に素早く絞り込み実行する技術 2. サンプリングした小さなデータの学習履歴から、動的に実行 時間と学習した予測モデルの精度を推定する技術 Apache
Spark上にプロトタイプを実装 Copyright 2016 FUJITSU LABORATORIES LTD 分析 結果大量 データ 並列処理 実装選択 アルゴリ ズム選択 パラメータ 選択 予測 精度 検証サンプ リング サンプル 率選択 学習用データ 検証用データ 1.自動チューニングする制御 2.実行時間と予測精度を推定 性能 ナレッジ 時間・精度推定 組合せ 予測 モデル サンプル率決定を 前処理ではなく 制御対象とした 28
30.
学習履歴から大データの学習精度を推定する 既存手法に比べ、推定値および 推定分布(予測区間)の両方で 過大過少評価なし Copyright 2016
FUJITSU LABORATORIES LTD 予測精度 Kolachinaの手法 Figueroaの手法 予測精度予測精度 推定値を過小評価 ⇒ 見落としが起きる 分布が広すぎる ⇒ 期待しすぎて 止められない 新規予測精度推定手法 実測 推定 29
31.
Wizz: Spark上に実装したプロトタイプ Model Perf. Report Wizz Parallel Execution
Platform Task Optimizer Input Data Hadoop(YARN/HDFS) Algorithm Knowledge Base Time/Space Estimator Model Searcher Preview Instruction UI Scheduler Shrink Controller Core API Spark Runtime MLLib Launcher External Lib (pipe) Performance Evaluator (cross-validation) Scala Spark Custom parallel bagging ShrinkerTask Queue Parallel Executor Copyright 2016 FUJITSU LABORATORIES LTD 分析専門家 Python R sklearn R Lib 30
32.
Wizzで利用可能な機械学習ライブラリ Spark MLLib
データ量が多い場合に高速 並列処理ができないアルゴリズムは実装されておらず、精度に限界 オーバーヘッドが大きく(機械学習1回30秒)、小規模データに向か ない python sklearn データサイエンティストも利用し始め、主流になりつつある データ量が多い時には、バギング並列(独自実装)を併用 R 各種ライブラリ 機械学習に関するライブラリが最も充実 データ量が多い時には、バギング並列(独自実装)を併用 Copyright 2016 FUJITSU LABORATORIES LTD31
33.
複数の機械学習を非同期・並列に実行 Copyright 2016 FUJITSU
LABORATORIES LTD R 評価 MLLib (Random Forest) python(SVM RBF) python 評価 R (Random Forest) MLLib 評価 32
34.
機械学習自動化技術の効果: 6日⇒2時間 精 度 時間 6日弱2時間強 精度推定の準備期間 2時間に短縮 見込みのない候補を除外、有望な学習 候補のみに絞り込んで処理 色々な手法を並行して処理 手法(アルゴリズム) データ量 10万
20万 40万 80万 … 2500万 5000万 Random Forest [並列バギング] 51秒 76% 52秒 80% 69秒 81% 60秒 84% 1760秒 96% †4338秒 97% Random Forest [Spark] 38秒 76% 49秒 76% 78秒 76% 114秒 76% †1590秒 76% †2695秒 76% Gradient Boosting [並列バギング] 96秒 76% 97秒 78% 119秒 81% 113秒 83% 1420秒 88% 3679秒 88% Gradient Boosting [Spark] 434秒 88% 475秒 88% 544秒 88% 691秒 88% †5221秒 88% †7933秒 88% Support Vector Machine (RBF kernel) [並列バギング] 529秒 73% 609秒 73% 815秒 79% 1,348秒 81% †1.3日 †約3日 Copyright 2016 FUJITSU LABORATORIES LTD33
35.
デモンストレーション Copyright 2016 FUJITSU
LABORATORIES LTD34
36.
自動化でAIアプリケーション開発が容易に Copyright 2016 FUJITSU
LABORATORIES LTD データ分析の一部に自動化を入れることで多くのメリット 分析相談 効果判定 現場試行 本格運用 •目的の明確化 •入手可能データ 確認 •分析専門家と手作り で試行 データの整形 機械学習アルゴリ ズムの選択 学習パラメータの 選択 学習実行・評価 目的の精度の予測 モデルが得られる まで繰り返し •手作業でコーディング データの整形ルール 監視ルール 通知・連携機能 •データ追加への対応 •データ特性変化への 対応 •連携機能の拡張 3カ月~半年 類似アプリへの展開 •データ追加への対応 •データ特性変化への 対応 •連携機能の拡張 分析専門家 自動化技術入り 分析フロー 全部自動で 試して みればいい 分析し なおし? 分析フローを 再実行する だけ 自動化技術入り 分析フロー 35
37.
Copyright 2016 FUJITSU
LABORATORIES LTD36
Download now