Michael Kuan
says to
Happy Web Developer
假設你是php的話
https://github.com/owner888/phpspider
有現成工具