データがない？あるある！！そこら中にあるんだぞ！～Web から取得できるデータの可能性～

シニアテクニカルアーキテクト
清水優吾（しみずゆうご） / 株式会社セカンドファクトリー
@yugoes1021
yugoes1021 Microsoft MVP
for Data Platform - Power BI
(2017.02 -)
データがない？あるある！！そこら中にあるんだぞ！
～Web から取得できるデータの可能性～
2019-03-30
Power BI 勉強会 #12
https://www.slideshare.net/yugoes1021

自己紹介：
清水優吾 (Yugo Shimizu) ♂
株式会社セカンドファクトリー
シニアテクニカルアーキテクト
2019/03/30 Power BI 勉強会 #12 2
UX を看板に掲げて、飲食業を営んでいる IT 企業に勤めている会社員で
Data Platform をメインに活動をしている Technical Architect
専門・興味:
Power Platform (PowerApps, Flow, Power BI), o365 周辺サービス
Twitter: @yugoes1021 Facebook: yugoes1021
Qiita: https://qiita.com/yugoes1021
Power BI 勉強会: https://powerbi.connpass.com
Japan Power BI User Group: https://www.facebook.com/groups/JapanPBUG/
Microsoft MVP
for Data Platform -
Power BI
(2017.02 - )
MVP
プロフィールページ

まずはこちらをご覧ください
2019/03/30 Power BI 勉強会 #12 3
http://bit.ly/PBI-PrinceReportCollection

まずはこちらをご覧ください
2019/03/30 Power BI 勉強会 #12 4
ご覧いただいたレポートは
すべて Web にあるデータソースから
作成しています
つまり誰でも作れるのです

今日着目していただきたいところは...
2019/03/30 Power BI 勉強会 #12 5
【Web からデータを取る４つのパターン】
1. Web 上にある Excel / CSV ファイル
2. HTML の Table タグ
3. HTML の要素を CSS セレクターで指定
4. RSS フィード
Power BI のどのコネクタを使用しているか？

今日のゴール
2019/03/30 Power BI 勉強会 #12 6
Web 上にある４パターンのデータソースを
扱う方法をご理解いただき、試すことが
できるスタートラインに立っていただくこと

1.Web 上にある Excel / CSV ファイル
2019/03/30 Power BI 勉強会 #12 7

１．Web上にある Excel / CSV ファイル
2019/03/30 Power BI 勉強会 #12 8
花粉飛散情報2019: http://bit.ly/kafun2019

2019/03/30 Power BI 勉強会 #12 9
NPO法人花粉情報協会
https://www.env.go.jp/chemi/anzen/kafun/
http://pollen-net.com/zennkoku24/sugi2019.xls
http://pollen-net.com/zennkoku24/hinoki2019.xls
なるほど、Excel ファイル (.xls) か。
さて、みなさん。
どのコネクタを使用しますか？

2019/03/30 Power BI 勉強会 #12 10
NPO法人花粉情報協会
https://www.env.go.jp/chemi/anzen/kafun/
http://pollen-net.com/zennkoku24/hinoki2019.xls
A. Web コネクタです
注意：
.xls のファイルの場合、以下をインストールしてください
Microsoft Access データベースエンジン 2010 再頒布可能コンポーネント
https://www.microsoft.com/ja-jp/download/details.aspx?id=13255
なお Power BI service でスケジュール更新させたい場合
オンプレミスデータゲートウェイが必要です。

2019/03/30 Power BI 勉強会 #12 11
Excel.Workbook(Web.Contents("http://pollen-net.com/zennkoku24/sugi2019.xls"), null, true)

2019/03/30 Power BI 勉強会 #12 12
Excel.Workbook(Web.Contents("http://pollen-net.com/zennkoku24/sugi2019.xls"), null, true)
PowerQuery の関数が調べたいときは http://bit.ly/PQFuncJP へ

2.HTML の Table タグ
2019/03/30 Power BI 勉強会 #12 13
Power BI Desktop から Web ページに接続する
https://docs.microsoft.com/ja-jp/power-bi/desktop-connect-to-web

２．HTML の Table タグ
Power BI 勉強会 #12 14
FlowConnectors: http://bit.ly/FlowConnectors

2019/03/30 Power BI 勉強会 #12 15
縄神様 (@twit_ahf) の有難いコネクタリスト
https://connectorinfo.z31.web.core.windows.net/index.html
https://connectorinfo.z31.web.core.windows.net/apilist.html
https://connectorinfo.z31.web.core.windows.net/templatelist.html
縄神様(小尾さん) の YouTube は
Nawaチャンネルへ
ライブでのお題は
LogicApps/Flow ライブ作成お題募集

2019/03/30 Power BI 勉強会 #12 16
<table>
<thead>
<tr> <th>列名</th> <th>列名</th> </tr>
</thead>
<tbody>
<tr> <td>値</td> <td>値</td> </tr>
<tr> <td>値</td> <td>値</td> </tr>
</tbody>
</table>
解釈

2019/03/30 Power BI 勉強会 #12 17
Web.Page(Web.Contents("https://connectorinfo.z31.web.core.windows.net/"))

3.HTML の要素を CSS セレクターで指定
2019/03/30 Power BI 勉強会 #12 18
例を指定して Web ページからデータを取得する
https://docs.microsoft.com/ja-jp/power-bi/desktop-connect-to-web-by-example

３．HTML の要素を CSS セレクターで指定
2019/03/30 Power BI 勉強会 #12 19
Ultraman List – ウルトラマン一覧: http://bit.ly/ultraman-list

2019/03/30 Power BI 勉強会 #12 20
ウルトラヒーロー – 円谷ステーション:
https://m-78.jp/ultraheros/

2019/03/30 Power BI 勉強会 #12 21

2019/03/30 Power BI 勉強会 #12 22

2019/03/30 Power BI 勉強会 #12 23

2019/03/30 Power BI 勉強会 #12 24

4.RSSフィード
2019/03/30 Power BI 勉強会 #12 25

４．RSSフィード
2019/03/30 Power BI 勉強会 #12 26
虚構新聞RSS: http://bit.ly/kyoko-rss

Power BI 勉強会 #12 27
虚構新聞RSS: http://bit.ly/kyoko-rss

2019/03/30 Power BI 勉強会 #12 28
虚構新聞社のRSSフィード: http://kyoko-np.net/index.xml

2019/03/30 Power BI 勉強会 #12 29
【清水の脳内MTGの様子】
RSS のコネクタは Power BI にはないんだよなー
どうする？スケジュール更新はさせたいしな
だよねー。あ、そうだ！
なになに？
たしか Microsoft Flow に RSS コネクタ、あったべ？
あー、あるね。
そっか、アレ使ってどっかにデータ溜めるか
だったら Excel on OneDrive とかどうよ？
おー、いいじゃん。それでいこ。

2019/03/30 Power BI 勉強会 #12 30
というわけでこんな感じ
Power BI service
RSS Excel
On OneDrive
レポート作成
毎日9:00
毎日9:30
スケジュール更新

2019/03/30 Power BI 勉強会 #12 31
【OneDrive 上にある Excel ファイルを Power BI のデータソースにする際の注意点】
Power BI Desktop で OneDrive for Business リンクを使用する
https://docs.microsoft.com/ja-jp/power-bi/desktop-use-onedrive-business-links

2019/03/30 Power BI 勉強会 #12 32

2019/03/30 Power BI 勉強会 #12 33

2019/03/30 Power BI 勉強会 #12 34
で、この資料を作っていて気付いた
RSS って要は Web 上にある XML ファイルだべ？
もしかして、Power BI だけでイケんじゃね…？

2019/03/30 Power BI 勉強会 #12 35
結論：イケた

まとめ
2019/03/30 Power BI 勉強会 #12 36

2019/03/30 Power BI 勉強会 #12 37
というわけで今日わかったこと
「Web コネクタ、最強じゃね？」

Access.Database(Web.Contents("http://sample.jp/sample.accdb"))
Csv.Document(Web.Contents("http://sample.jp/sample.csv"))
Excel.Workbook(Web.Contents("http://sample.jp/sample.xlsx"))
Json.Document(Web.Contents("http://sample.jp/sample.json"))
Csv.Document(Web.Contents("http://sample.jp/sample.txt"))
Web.Page(Web.Contents("http://sample.jp/"))
Xml.Tables(Web.Contents("http://sample.jp/sample.xml"))
Pdf.Tables(Web.Contents("http://sample.jp/sample.pdf"))

例を使用してテーブルを追加の場合
Html.Table(
"<div class=""name"">Jo</div><span>Manager</span>",
{
{"Name", ".name"},
{"Title", "span"}
},
[RowSelector=".name"]
)

2019/03/30 Power BI 勉強会 #12 40
https://www.facebook.com/groups/JapanPBUG/
Power BI に興味がある人はもちろん
興味がない人も
ぜひご登録を(*’ω’*)

ご清聴ありがとうございました！
～ご不明な点は何なりと！～
2019/03/30 Power BI 勉強会 #12 41
より詳細にお話聞きたい、
実案件でご相談があるという場合は
遠慮なくお声がけください
m(_ _)m

データがない？あるある！！そこら中にあるんだぞ！～Web から取得できるデータの可能性～

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Similar to データがない？あるある！！そこら中にあるんだぞ！～Web から取得できるデータの可能性～

Similar to データがない？あるある！！そこら中にあるんだぞ！～Web から取得できるデータの可能性～ (20)

More from Yugo Shimizu

More from Yugo Shimizu (17)

データがない？あるある！！そこら中にあるんだぞ！～Web から取得できるデータの可能性～