Submit Search
Upload
はやわかりHadoop
•
Download as PPT, PDF
•
19 likes
•
5,557 views
Shinpei Ohtani
Follow
Technology
Report
Share
Report
Share
1 of 152
Download now
Recommended
Hadoop 基礎
Hadoop 基礎
hideaki honda
Hadoopの概念と基本的知識
Hadoopの概念と基本的知識
Ken SASAKI
NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~
NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~
NTT DATA OSS Professional Services
並列分散処理基盤Hadoopの紹介と、開発者が語るHadoopの使いどころ (Silicon Valley x 日本 / Tech x Business ...
並列分散処理基盤Hadoopの紹介と、開発者が語るHadoopの使いどころ (Silicon Valley x 日本 / Tech x Business ...
NTT DATA OSS Professional Services
Apache Spark超入門 (Hadoop / Spark Conference Japan 2016 講演資料)
Apache Spark超入門 (Hadoop / Spark Conference Japan 2016 講演資料)
NTT DATA OSS Professional Services
世界一簡単なHadoopの話
世界一簡単なHadoopの話
Koichi Shimazaki
Apache Spark の紹介(前半:Sparkのキホン)
Apache Spark の紹介(前半:Sparkのキホン)
NTT DATA OSS Professional Services
ちょっと理解に自信がないなという皆さまに贈るHadoop/Sparkのキホン (IBM Datapalooza Tokyo 2016講演資料)
ちょっと理解に自信がないなという皆さまに贈るHadoop/Sparkのキホン (IBM Datapalooza Tokyo 2016講演資料)
hamaken
Recommended
Hadoop 基礎
Hadoop 基礎
hideaki honda
Hadoopの概念と基本的知識
Hadoopの概念と基本的知識
Ken SASAKI
NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~
NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~
NTT DATA OSS Professional Services
並列分散処理基盤Hadoopの紹介と、開発者が語るHadoopの使いどころ (Silicon Valley x 日本 / Tech x Business ...
並列分散処理基盤Hadoopの紹介と、開発者が語るHadoopの使いどころ (Silicon Valley x 日本 / Tech x Business ...
NTT DATA OSS Professional Services
Apache Spark超入門 (Hadoop / Spark Conference Japan 2016 講演資料)
Apache Spark超入門 (Hadoop / Spark Conference Japan 2016 講演資料)
NTT DATA OSS Professional Services
世界一簡単なHadoopの話
世界一簡単なHadoopの話
Koichi Shimazaki
Apache Spark の紹介(前半:Sparkのキホン)
Apache Spark の紹介(前半:Sparkのキホン)
NTT DATA OSS Professional Services
ちょっと理解に自信がないなという皆さまに贈るHadoop/Sparkのキホン (IBM Datapalooza Tokyo 2016講演資料)
ちょっと理解に自信がないなという皆さまに贈るHadoop/Sparkのキホン (IBM Datapalooza Tokyo 2016講演資料)
hamaken
40分でわかるHadoop徹底入門 (Cloudera World Tokyo 2014 講演資料)
40分でわかるHadoop徹底入門 (Cloudera World Tokyo 2014 講演資料)
hamaken
Apache Sparkのご紹介 (後半:技術トピック)
Apache Sparkのご紹介 (後半:技術トピック)
NTT DATA OSS Professional Services
HDFS新機能総まとめin 2015 (日本Hadoopユーザー会 ライトニングトーク@Cloudera World Tokyo 2015 講演資料)
HDFS新機能総まとめin 2015 (日本Hadoopユーザー会 ライトニングトーク@Cloudera World Tokyo 2015 講演資料)
NTT DATA OSS Professional Services
【17-E-3】Hadoop:黄色い象使いへの道 ~「Hadoop徹底入門」より~
【17-E-3】Hadoop:黄色い象使いへの道 ~「Hadoop徹底入門」より~
Developers Summit
基幹業務もHadoopで!! -ローソンにおける店舗発注業務へのHadoop + Hive導入と その取り組みについて-
基幹業務もHadoopで!! -ローソンにおける店舗発注業務へのHadoop + Hive導入と その取り組みについて-
Keigo Suda
Hadoopことはじめ
Hadoopことはじめ
均 津田
Hadoopエコシステムの最新動向とNTTデータの取り組み (OSC 2016 Tokyo/Spring 講演資料)
Hadoopエコシステムの最新動向とNTTデータの取り組み (OSC 2016 Tokyo/Spring 講演資料)
NTT DATA OSS Professional Services
Hadoop ecosystem NTTDATA osc15tk
Hadoop ecosystem NTTDATA osc15tk
NTT DATA OSS Professional Services
Hadoopデータプラットフォーム #cwt2013
Hadoopデータプラットフォーム #cwt2013
Cloudera Japan
SASとHadoopとの連携
SASとHadoopとの連携
SAS Institute Japan
SparkとCassandraの美味しい関係
SparkとCassandraの美味しい関係
datastaxjp
Hadoop概要説明
Hadoop概要説明
Satoshi Noto
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み
NTT DATA OSS Professional Services
Apache Sparkに手を出してヤケドしないための基本 ~「Apache Spark入門より」~ (デブサミ 2016 講演資料)
Apache Sparkに手を出してヤケドしないための基本 ~「Apache Spark入門より」~ (デブサミ 2016 講演資料)
NTT DATA OSS Professional Services
Pythonで入門するApache Spark at PyCon2016
Pythonで入門するApache Spark at PyCon2016
Tatsuya Atsumi
Apache Sparkの紹介
Apache Sparkの紹介
Ryuji Tamagawa
HadoopとRDBMSをシームレスに連携させるSmart SQL Processing (Hadoop Conference Japan 2014)
HadoopとRDBMSをシームレスに連携させるSmart SQL Processing (Hadoop Conference Japan 2014)
Hadoop / Spark Conference Japan
Hadoopトレーニング番外編 〜間違えられやすいHadoopの7つの仕様〜
Hadoopトレーニング番外編 〜間違えられやすいHadoopの7つの仕様〜
Cloudera Japan
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
NTT DATA OSS Professional Services
AI・HPC・ビッグデータで利用される分散ファイルシステムを知る
AI・HPC・ビッグデータで利用される分散ファイルシステムを知る
日本ヒューレット・パッカード株式会社
Hadoop, NoSQL, GlusterFSの概要
Hadoop, NoSQL, GlusterFSの概要
日本ヒューレット・パッカード株式会社
Hadoopの紹介
Hadoopの紹介
bigt23
More Related Content
What's hot
40分でわかるHadoop徹底入門 (Cloudera World Tokyo 2014 講演資料)
40分でわかるHadoop徹底入門 (Cloudera World Tokyo 2014 講演資料)
hamaken
Apache Sparkのご紹介 (後半:技術トピック)
Apache Sparkのご紹介 (後半:技術トピック)
NTT DATA OSS Professional Services
HDFS新機能総まとめin 2015 (日本Hadoopユーザー会 ライトニングトーク@Cloudera World Tokyo 2015 講演資料)
HDFS新機能総まとめin 2015 (日本Hadoopユーザー会 ライトニングトーク@Cloudera World Tokyo 2015 講演資料)
NTT DATA OSS Professional Services
【17-E-3】Hadoop:黄色い象使いへの道 ~「Hadoop徹底入門」より~
【17-E-3】Hadoop:黄色い象使いへの道 ~「Hadoop徹底入門」より~
Developers Summit
基幹業務もHadoopで!! -ローソンにおける店舗発注業務へのHadoop + Hive導入と その取り組みについて-
基幹業務もHadoopで!! -ローソンにおける店舗発注業務へのHadoop + Hive導入と その取り組みについて-
Keigo Suda
Hadoopことはじめ
Hadoopことはじめ
均 津田
Hadoopエコシステムの最新動向とNTTデータの取り組み (OSC 2016 Tokyo/Spring 講演資料)
Hadoopエコシステムの最新動向とNTTデータの取り組み (OSC 2016 Tokyo/Spring 講演資料)
NTT DATA OSS Professional Services
Hadoop ecosystem NTTDATA osc15tk
Hadoop ecosystem NTTDATA osc15tk
NTT DATA OSS Professional Services
Hadoopデータプラットフォーム #cwt2013
Hadoopデータプラットフォーム #cwt2013
Cloudera Japan
SASとHadoopとの連携
SASとHadoopとの連携
SAS Institute Japan
SparkとCassandraの美味しい関係
SparkとCassandraの美味しい関係
datastaxjp
Hadoop概要説明
Hadoop概要説明
Satoshi Noto
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み
NTT DATA OSS Professional Services
Apache Sparkに手を出してヤケドしないための基本 ~「Apache Spark入門より」~ (デブサミ 2016 講演資料)
Apache Sparkに手を出してヤケドしないための基本 ~「Apache Spark入門より」~ (デブサミ 2016 講演資料)
NTT DATA OSS Professional Services
Pythonで入門するApache Spark at PyCon2016
Pythonで入門するApache Spark at PyCon2016
Tatsuya Atsumi
Apache Sparkの紹介
Apache Sparkの紹介
Ryuji Tamagawa
HadoopとRDBMSをシームレスに連携させるSmart SQL Processing (Hadoop Conference Japan 2014)
HadoopとRDBMSをシームレスに連携させるSmart SQL Processing (Hadoop Conference Japan 2014)
Hadoop / Spark Conference Japan
Hadoopトレーニング番外編 〜間違えられやすいHadoopの7つの仕様〜
Hadoopトレーニング番外編 〜間違えられやすいHadoopの7つの仕様〜
Cloudera Japan
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
NTT DATA OSS Professional Services
What's hot
(19)
40分でわかるHadoop徹底入門 (Cloudera World Tokyo 2014 講演資料)
40分でわかるHadoop徹底入門 (Cloudera World Tokyo 2014 講演資料)
Apache Sparkのご紹介 (後半:技術トピック)
Apache Sparkのご紹介 (後半:技術トピック)
HDFS新機能総まとめin 2015 (日本Hadoopユーザー会 ライトニングトーク@Cloudera World Tokyo 2015 講演資料)
HDFS新機能総まとめin 2015 (日本Hadoopユーザー会 ライトニングトーク@Cloudera World Tokyo 2015 講演資料)
【17-E-3】Hadoop:黄色い象使いへの道 ~「Hadoop徹底入門」より~
【17-E-3】Hadoop:黄色い象使いへの道 ~「Hadoop徹底入門」より~
基幹業務もHadoopで!! -ローソンにおける店舗発注業務へのHadoop + Hive導入と その取り組みについて-
基幹業務もHadoopで!! -ローソンにおける店舗発注業務へのHadoop + Hive導入と その取り組みについて-
Hadoopことはじめ
Hadoopことはじめ
Hadoopエコシステムの最新動向とNTTデータの取り組み (OSC 2016 Tokyo/Spring 講演資料)
Hadoopエコシステムの最新動向とNTTデータの取り組み (OSC 2016 Tokyo/Spring 講演資料)
Hadoop ecosystem NTTDATA osc15tk
Hadoop ecosystem NTTDATA osc15tk
Hadoopデータプラットフォーム #cwt2013
Hadoopデータプラットフォーム #cwt2013
SASとHadoopとの連携
SASとHadoopとの連携
SparkとCassandraの美味しい関係
SparkとCassandraの美味しい関係
Hadoop概要説明
Hadoop概要説明
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み
Apache Sparkに手を出してヤケドしないための基本 ~「Apache Spark入門より」~ (デブサミ 2016 講演資料)
Apache Sparkに手を出してヤケドしないための基本 ~「Apache Spark入門より」~ (デブサミ 2016 講演資料)
Pythonで入門するApache Spark at PyCon2016
Pythonで入門するApache Spark at PyCon2016
Apache Sparkの紹介
Apache Sparkの紹介
HadoopとRDBMSをシームレスに連携させるSmart SQL Processing (Hadoop Conference Japan 2014)
HadoopとRDBMSをシームレスに連携させるSmart SQL Processing (Hadoop Conference Japan 2014)
Hadoopトレーニング番外編 〜間違えられやすいHadoopの7つの仕様〜
Hadoopトレーニング番外編 〜間違えられやすいHadoopの7つの仕様〜
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
Similar to はやわかりHadoop
AI・HPC・ビッグデータで利用される分散ファイルシステムを知る
AI・HPC・ビッグデータで利用される分散ファイルシステムを知る
日本ヒューレット・パッカード株式会社
Hadoop, NoSQL, GlusterFSの概要
Hadoop, NoSQL, GlusterFSの概要
日本ヒューレット・パッカード株式会社
Hadoopの紹介
Hadoopの紹介
bigt23
OSC2012 OSC.DB Hadoop
OSC2012 OSC.DB Hadoop
Shinichi YAMASHITA
Cloudera大阪セミナー 20130219
Cloudera大阪セミナー 20130219
Cloudera Japan
Hadoop事始め
Hadoop事始め
You&I
Tuning maniax 2014 Hadoop編
Tuning maniax 2014 Hadoop編
ThinkIT_impress
Osc2012 spring HBase Report
Osc2012 spring HBase Report
Seiichiro Ishida
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
NTT DATA OSS Professional Services
Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)
Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)
Cloudera Japan
[db tech showcase Tokyo 2018] #dbts2018 #E28 『Hadoop DataLakeにリアルタイムでデータをレプリケ...
[db tech showcase Tokyo 2018] #dbts2018 #E28 『Hadoop DataLakeにリアルタイムでデータをレプリケ...
Insight Technology, Inc.
Hadoop loves H2
Hadoop loves H2
Tadashi Satoh
Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017
Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017
Cloudera Japan
[db tech showcase Tokyo 2015] B34:データの仮想化を具体化するIBMのロジカルデータウェアハウス by 日本アイ・ビー・エ...
[db tech showcase Tokyo 2015] B34:データの仮想化を具体化するIBMのロジカルデータウェアハウス by 日本アイ・ビー・エ...
Insight Technology, Inc.
ビッグデータ活用支援フォーラム
ビッグデータ活用支援フォーラム
Recruit Technologies
JavaOne2013報告会 LT資料 Hadoopの話を聞いてきた
JavaOne2013報告会 LT資料 Hadoopの話を聞いてきた
Takashi Aoe
分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向 (オープンソースカンファレンス 2015 Tokyo/Spring 講...
分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向 (オープンソースカンファレンス 2015 Tokyo/Spring 講...
NTT DATA OSS Professional Services
BdasとSpark概要
BdasとSpark概要
Yu Ishikawa
[db tech showcase Tokyo 2017] A32: Attunity Replicate + Kafka + Hadoop マルチデータ...
[db tech showcase Tokyo 2017] A32: Attunity Replicate + Kafka + Hadoop マルチデータ...
Insight Technology, Inc.
ATN No.1 MapReduceだけでない!? Hadoopとその仲間たち
ATN No.1 MapReduceだけでない!? Hadoopとその仲間たち
AdvancedTechNight
Similar to はやわかりHadoop
(20)
AI・HPC・ビッグデータで利用される分散ファイルシステムを知る
AI・HPC・ビッグデータで利用される分散ファイルシステムを知る
Hadoop, NoSQL, GlusterFSの概要
Hadoop, NoSQL, GlusterFSの概要
Hadoopの紹介
Hadoopの紹介
OSC2012 OSC.DB Hadoop
OSC2012 OSC.DB Hadoop
Cloudera大阪セミナー 20130219
Cloudera大阪セミナー 20130219
Hadoop事始め
Hadoop事始め
Tuning maniax 2014 Hadoop編
Tuning maniax 2014 Hadoop編
Osc2012 spring HBase Report
Osc2012 spring HBase Report
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)
Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)
[db tech showcase Tokyo 2018] #dbts2018 #E28 『Hadoop DataLakeにリアルタイムでデータをレプリケ...
[db tech showcase Tokyo 2018] #dbts2018 #E28 『Hadoop DataLakeにリアルタイムでデータをレプリケ...
Hadoop loves H2
Hadoop loves H2
Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017
Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017
[db tech showcase Tokyo 2015] B34:データの仮想化を具体化するIBMのロジカルデータウェアハウス by 日本アイ・ビー・エ...
[db tech showcase Tokyo 2015] B34:データの仮想化を具体化するIBMのロジカルデータウェアハウス by 日本アイ・ビー・エ...
ビッグデータ活用支援フォーラム
ビッグデータ活用支援フォーラム
JavaOne2013報告会 LT資料 Hadoopの話を聞いてきた
JavaOne2013報告会 LT資料 Hadoopの話を聞いてきた
分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向 (オープンソースカンファレンス 2015 Tokyo/Spring 講...
分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向 (オープンソースカンファレンス 2015 Tokyo/Spring 講...
BdasとSpark概要
BdasとSpark概要
[db tech showcase Tokyo 2017] A32: Attunity Replicate + Kafka + Hadoop マルチデータ...
[db tech showcase Tokyo 2017] A32: Attunity Replicate + Kafka + Hadoop マルチデータ...
ATN No.1 MapReduceだけでない!? Hadoopとその仲間たち
ATN No.1 MapReduceだけでない!? Hadoopとその仲間たち
More from Shinpei Ohtani
Amazon Aurora
Amazon Aurora
Shinpei Ohtani
AWS Lambda and Amazon API Gateway
AWS Lambda and Amazon API Gateway
Shinpei Ohtani
ECS for Docker Meetup #4
ECS for Docker Meetup #4
Shinpei Ohtani
JVM的な何か@JVM Operation Casual Talk
JVM的な何か@JVM Operation Casual Talk
Shinpei Ohtani
Amazon kinesisで広がるリアルタイムデータプロセッシングとその未来
Amazon kinesisで広がるリアルタイムデータプロセッシングとその未来
Shinpei Ohtani
Amazon Elastic MapReduce@Hadoop Conference Japan 2011 Fall
Amazon Elastic MapReduce@Hadoop Conference Japan 2011 Fall
Shinpei Ohtani
プログラマブルクラウドの薦め
プログラマブルクラウドの薦め
Shinpei Ohtani
サンプルから見るMapReduceコード
サンプルから見るMapReduceコード
Shinpei Ohtani
Hadoopソースリーディング第1回アジェンダ
Hadoopソースリーディング第1回アジェンダ
Shinpei Ohtani
サンプルから見るMap reduceコード
サンプルから見るMap reduceコード
Shinpei Ohtani
Hadoopソースリーディング第1回アジェンダ
Hadoopソースリーディング第1回アジェンダ
Shinpei Ohtani
T2 Web Framework
T2 Web Framework
Shinpei Ohtani
T2 Hacks
T2 Hacks
Shinpei Ohtani
T2 webframework
T2 webframework
Shinpei Ohtani
Struts2を始めよう!
Struts2を始めよう!
Shinpei Ohtani
Struts2 in a nutshell
Struts2 in a nutshell
Shinpei Ohtani
ASP.NET MVC 1.0
ASP.NET MVC 1.0
Shinpei Ohtani
More from Shinpei Ohtani
(17)
Amazon Aurora
Amazon Aurora
AWS Lambda and Amazon API Gateway
AWS Lambda and Amazon API Gateway
ECS for Docker Meetup #4
ECS for Docker Meetup #4
JVM的な何か@JVM Operation Casual Talk
JVM的な何か@JVM Operation Casual Talk
Amazon kinesisで広がるリアルタイムデータプロセッシングとその未来
Amazon kinesisで広がるリアルタイムデータプロセッシングとその未来
Amazon Elastic MapReduce@Hadoop Conference Japan 2011 Fall
Amazon Elastic MapReduce@Hadoop Conference Japan 2011 Fall
プログラマブルクラウドの薦め
プログラマブルクラウドの薦め
サンプルから見るMapReduceコード
サンプルから見るMapReduceコード
Hadoopソースリーディング第1回アジェンダ
Hadoopソースリーディング第1回アジェンダ
サンプルから見るMap reduceコード
サンプルから見るMap reduceコード
Hadoopソースリーディング第1回アジェンダ
Hadoopソースリーディング第1回アジェンダ
T2 Web Framework
T2 Web Framework
T2 Hacks
T2 Hacks
T2 webframework
T2 webframework
Struts2を始めよう!
Struts2を始めよう!
Struts2 in a nutshell
Struts2 in a nutshell
ASP.NET MVC 1.0
ASP.NET MVC 1.0
Recently uploaded
IoT in the era of generative AI, Thanks IoT ALGYAN.pptx
IoT in the era of generative AI, Thanks IoT ALGYAN.pptx
Atomu Hidaka
Amazon SES を勉強してみる その12024/04/12の勉強会で発表されたものです。
Amazon SES を勉強してみる その12024/04/12の勉強会で発表されたものです。
iPride Co., Ltd.
スマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システム
sugiuralab
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
Ryo Sasaki
20240412_HCCJP での Windows Server 2025 Active Directory
20240412_HCCJP での Windows Server 2025 Active Directory
osamut
UPWARD_share_company_information_20240415.pdf
UPWARD_share_company_information_20240415.pdf
furutsuka
新人研修のまとめ 2024/04/12の勉強会で発表されたものです。
新人研修のまとめ 2024/04/12の勉強会で発表されたものです。
iPride Co., Ltd.
PHP-Conference-Odawara-2024-04-000000000
PHP-Conference-Odawara-2024-04-000000000
Shota Ito
Postman LT Fukuoka_Quick Prototype_By Daniel
Postman LT Fukuoka_Quick Prototype_By Daniel
danielhu54
Recently uploaded
(9)
IoT in the era of generative AI, Thanks IoT ALGYAN.pptx
IoT in the era of generative AI, Thanks IoT ALGYAN.pptx
Amazon SES を勉強してみる その12024/04/12の勉強会で発表されたものです。
Amazon SES を勉強してみる その12024/04/12の勉強会で発表されたものです。
スマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システム
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
20240412_HCCJP での Windows Server 2025 Active Directory
20240412_HCCJP での Windows Server 2025 Active Directory
UPWARD_share_company_information_20240415.pdf
UPWARD_share_company_information_20240415.pdf
新人研修のまとめ 2024/04/12の勉強会で発表されたものです。
新人研修のまとめ 2024/04/12の勉強会で発表されたものです。
PHP-Conference-Odawara-2024-04-000000000
PHP-Conference-Odawara-2024-04-000000000
Postman LT Fukuoka_Quick Prototype_By Daniel
Postman LT Fukuoka_Quick Prototype_By Daniel
はやわかりHadoop
1.
はやわかり Hadoop shot6
2.
Hadoop
3.
最近名前をよく聞く
4.
たまに いる
5.
「おお、あの 新型 DB
だろ? 早いの?」
6.
たまに いる
7.
「あのクラウドね。 SaaS だっけ?」
8.
「ああ、 Google のあれでしょ?」
9.
おしい
10.
実態がよくわかってない人も多い
11.
NO PROBLEM
12.
何ら恥じることはない
13.
Hadoop とは
14.
並列分散処理基盤
15.
・・・
16.
バッチ基盤 分析基盤
17.
なんとなくわかる
18.
巨大な データ
19.
100GB のログ
20.
これを 処理する
21.
並列 に
22.
そして 安価 に
23.
サーバを追加
24.
=
25.
処理性能アップ
26.
でも最も重要な点
27.
生態系
28.
29.
エコ システム
30.
全体を俯瞰
31.
これ 重要
32.
この LT の目的
33.
ディストリビューション
34.
そもそも 3 つ
ある
35.
Apache Hadoop
36.
本家 本元
37.
特徴
38.
リリースが慎重
39.
様々な 要望
40.
色々な 事情
41.
あるはず
42.
早く進化したい
43.
もっと 機能追加したい
44.
あるはず
45.
OSS の ジレンマ
46.
47.
でも
48.
互換性 重視
49.
堅実 な進化
50.
大人 な OSS
51.
Cloudera Hadoop
52.
米国 Cloudera 社
53.
54.
特徴
55.
エンタープライズ 向け?
56.
簡単
57.
yum/ apt
58.
即 インストール
59.
設定も 楽ちん
60.
大量バグフィックス
61.
例えば
62.
hadoop-0.20.1 +169
63.
169 個 の
バグフィックス
64.
Apache 版に貢献済
65.
Cloudera Desktop
66.
Hadoop の管理ツール
67.
68.
69.
超絶便利 ( まだ
α )
70.
Yahoo Hadoop
71.
Yahoo で使用
72.
巨大クラスタでの実績
73.
品質向上 に全力
74.
セキュリティ などの新機能
75.
勿論膨大なバグフィックス
76.
Apache 版に貢献済
77.
Hadoop を 支える
トライアングル
78.
Apache Hadoop Cloudera
Hadoop Yahoo Hadoop フィードバック フィードバック 意見交換
79.
機能
80.
大量
81.
Core Map Reduce
HDFS Zoo Keeper HBase Pig Hive Chukwa Cloudera Desktop Avro Sqoop
82.
Core
83.
Hadoop の中核
84.
基本的な通信、 IO 、ファイルシステム、設定などなど
85.
HDFS
86.
H adoop D
istributed F ile S ystem
87.
Hadoop 分散ファイルシステム
88.
巨大ファイルを でかめのブロックに分割し、 管理・保存
89.
ノード間は勝手にレプリケーションする
90.
Elastic さを持つファイルシステム
91.
92.
NameNode は、ファイル名、ブロック、ノードの対応の管理
93.
DataNode は、ブロックを 管理
94.
Hadoop MapReduce
95.
みんな大好き MapReduce プログラミング
96.
並列処理 プログラミング モデルの一種
97.
Hadoop と プログラマの
基本的な 接点
98.
Map :
ある観点でデータをまとめる。
99.
Reduce : ソート済みデータを集約・計算する
100.
仕組み
101.
ジョブトラッカーと タスクトラッカー
102.
ジョブトラッカー と タスクトラッカー
103.
104.
キモイ… .
105.
じゃなくて
106.
MapReduce ジョブを適切なタスクに分解し管理
107.
ジョブトラッカーと タスクトラッカー
108.
分解された タスクを実行。
109.
Map/Reduce タスクは 子
JVM 起動 して実行。
110.
データがある ところで、 タスクを起動。
111.
ここまでが 基本中の基本
112.
こっからは 早足
113.
HBase
114.
Hadoop 上に構築した DB
115.
BigTable クローン
116.
Hadoop が本来不得意な 小口データ
を効率よく処理
117.
Hive/Pig
118.
119.
ちょ w
120.
MapReduce を書くのが メンドイ
121.
そんな人のための簡易言語
122.
Pig のほうが独自っぽい
123.
Pig は Yahoo
が 作成
124.
Hive は SQL
っぽい
125.
Hive は FaceBook
が作成
126.
Zoo Keeper
127.
やあ
128.
ちょ w
129.
分散協調サービス
130.
リソースやデータの 調整役
131.
Chukwa
132.
データ収集システム
133.
小さな大量ログを Hadoop で扱い易く
134.
使ってる人いない ^^;?
135.
Avro
136.
シリアライズシステム
137.
非常に高速かつ柔軟
138.
ベンチ マーク
139.
140.
爆速
141.
現状 Hadoop に組み込まれていない
142.
今後 Avro ベースになるはず
143.
要注目
144.
他にも
145.
Cascading
146.
まとめ
147.
Hadoop
148.
ひとつの ミドルウェア
149.
ではなく
150.
複数ミドルウェアを 支える
151.
プラットフォーム
152.
Have fun with
Hadoop family !
Download now