python新人小白學爬蟲，學習筆記（一)——初涉爬蟲

作爲一個小小預備役的程序員學生，在經過兩年的學校基礎課程之後，對以前的課程進行總結和自我拓展，記錄自己的拓展學習課程，複習的部分整理看後期情況進行那個總結記錄(給自己立一個flag)。

那麼新人小白的第一篇博客，就這樣開始了。（作爲一名小白，博客內容均爲自我的理解，可能存在很大的失誤和片面性，歡迎大佬們指出）

大學兩年的專業課學習，瞭解了軟件開發和設計的常用基本語言，如：c/c++,python,java,java web(js,css,html5,jsp)，當然大學的課程只能對各項語言進行基礎的入門學習，關於STL，框架的學習，日後會根據自身情況進行記錄（又是一個flag）。

首先，自學python爬蟲技術，選取的學習材料爲網易雲課堂中的免費課程：連接https://study.163.com/course/courseMain.htm?courseId=1004714034 （Python爬蟲：零基礎全實戰入門）和正在學習的課本《零基礎入門學python》（小甲魚）。

首先，作爲一名新人小白，需要充分的認識和知道爬蟲的使用價值和使用背景。目前的時代已經由TB時代轉向爲DB時代。在大數據盛行的當下，你所需要的數據和資料，可能大部分都不存在於自己的資料庫中，而是以零散的狀態存在於網絡上，那麼如何能夠有效地從網絡上篩選和抓取自己需要的信息，就成了一個至關重要的問題。這個時候網絡爬蟲技術就爲我們提供了便利的獲取數據的方法。目前爬蟲技術應用範圍非常廣，例如：搜索引擎，論文檢索，購物軟件的商品檢索……可以說我們周圍的基本所有的信息獲取方式都有爬蟲的身影。

當然爬蟲技術的應用不僅僅限於python環境，js也可以實現網頁信息的獲取。但是在爬蟲技術的發展方面，python3還是給出了極爲便利的條件，也是主流的爬蟲實現環境。（當然也可能是新人的知識面瞭解不夠，如果有其他的便利方式，歡迎推薦）。所以學習python爬蟲勢在必行！作爲入門級的小白，爬蟲之路還有很長要走，那麼下一站就開始進行實踐吧！

小白，向前進！！！