用強大的 nodejs 完成你的爬蟲程式及服務 範例檔：https://github.com/chungchiehlun/WebSpider/

1. 輕輕鬆鬆寫網路爬蟲
鍾傑倫

2. 範例專案
• https://github.com/chungchiehlun/WebSpider
• site : express 與爬蟲程式寫成的網站服務
• spider : 爬蟲程式

3. 攻略⽬目標

4. 爬蟲三步驟
• 分析網⾴頁
• 開始寫爬蟲程式
• 解析爬到的內容

5. https://www.vanilla-air.com/reservation/ibe/ibe/booking

6. chrome developer tools
觀察瀏覽器(client)與 server 如何溝通

8. 分析結論
• 需要拿到 cookie ：
GET request 取得
• 需要送出完整版表單：
POST request 完整表單

9. 認識 https.request
var https = require(‘https’)

10. Start Coding

11. 解析資料
• 把爬到的資料存下來： fs
• 解析爬到的⽂文件： cheerio

12. 快完成了

13. Finish !!

14. 感謝您的聆聽
歡迎您⼀一起讓這專案變得更好