Alger Huang says to OKTW Network 大數據收集資料 所以爬蟲每天要爬的東西不少 可能幾百萬頁 預算上不可能讓你開幾千台機器 做不同的線程去爬 只有幾台 所以他們會很驚人的速度在爬