Sep 16, 2016

嘉明湖山屋爬蟲 : part 1

沒想到檜谷山莊/營地、嘉明湖山屋、向陽山屋的申請網站竟然換地方了，記得 2015 年的時候，都還是在台灣山林悠遊網裡頭的，現在竟然分成了 2 個網站，然後分別屬於屏東林管處和台東林管處的…

所以囉，之前寫過的爬蟲又要重寫了

令人稍感欣慰的是，嘉明湖山屋的申請網站（嘉明湖國家步道）從原本的 ASP.NET 改成用 PHP 寫了，所以寫爬蟲送 Ajax 的時候，終於不用處理一堆 .NET 專屬的 __VIEWSTATE 了。

可喜可樂

爬蟲開始

我是用 Node.js 寫爬蟲的，用到的套件有下面這些：

let moment = require('moment');      // 常用的時間處理套件
let co = require('co');              // 用來寫漂亮的 flow-control 
let rp = require('request-promise'); // 用來發 http request
let cheerio = require('cheerio');    // 用來做 html parser

利用 request-promise 發出不帶 query 的 Ajax，我們就能拿到當月份的山屋資訊網頁。