爬蟲是什麼？

認識爬蟲是學習爬蟲的第一步。
曾經我覺得爬蟲是一個很高大上的玩意兒，高大上到我完全不知道它是做什麼用的。
後來因爲幫別人做一個二手車網站，需要知道所有車的類別、車型、車系，於是就用curl抓去了某網的所有這方面信息，對，你沒有猜錯，就是它的，算是用php的curl寫了一個初級不能再初級的“爬蟲”，才知道，我了個X，還能這麼玩。
就用curl爬了某圖片網站所有美女圖片，然後聽說python的爬蟲用起來更爽更酷炫，就決心嘗試性的學習一下。
對，我之前沒有任何python基礎，就把廖雪峯老師的python教程看了看。
包括這個系列筆記也是從網上別人那裏學來，自己吸收之後重新寫出來的。


那麼，什麼是爬蟲呢？網絡蜘蛛麼？那什麼是網絡蜘蛛呢？


程序被寫出來就是爲了完成特定任務的，爬蟲也是程序，被寫出來也就是爲了完成某種特定的任務----比如把某站美女圖片下載到本機上。比如把科比一生的賽況抓取下來進行數據分析，比如……


對，這就是爬蟲。