蜘蛛（Spider），其實用通用的話來說就是搜索引擎編寫的程序，這個程序非常的複雜，但是他的作用就是順着互聯網上的鏈接，讀取到下一個網頁，並將網站內所有的鏈接都讀取一遍，並將信息數據帶回到搜索引擎數據庫內。
蜘蛛程序最早是被叫做“機器人”（Computer Robot）程序，因爲他由搜索引擎放出去以後，就順着互聯網類似蜘蛛爬行似的，到處尋找鏈接，並順着鏈接讀取網站信息，形成了跟網似的，類似蜘蛛網，因此大家都叫他蜘蛛程序。
每個搜索引擎將蜘蛛都分爲多類，然後將其分佈在多臺服務器上，最終將結果存儲在一臺或者幾臺服務器上。
seo是搜索引擎優化