原创 使用selenium爬取動態頁面

在爬取某些頁面時,由於其一些內容是使用js動態加載,導致只能爬取到部分的內容(靜態內容)。此時,可以使用selenium庫來解決。 # coding=utf-8 from selenium import webdriver fro

原创 關於"FileNotFoundError: [Errno 2] No such file or directory"的錯誤

昨天學習爬蟲,保存文件時,突然發現文件找不到的錯誤: 但是我用的是with open() as f:的語句,找不到的話,會幫我創建的啊。 後面晚上睡覺時回想下,可能是因爲含有"/"的符號,這裏已經包含路徑的分割了,我們需要講它刪

原创 小白通過Fiddler爬取手機app的數據並提取出來(詳細版)

我們就以爬取安卓端上的王者營地上英雄熱度榜爲例: 前期準備工作:下載安裝Fiddler,並配置好相關連接選項 1.下載 Fiddler下載網站,進入網站點擊Download now 再填寫好相關信息,點擊紅色的Download

原创 解決“本地配置域名,正常配置完成後,可以ping通,但在瀏覽器打不開”的一種方法

今天在學習spring框架時,配置本地域名 localhost可以打開,但域名無法打開 在網上搜了一堆方法都無法解決。 當我準備放棄時,就試了下360的網絡修復 修復完成後,重新正常配置hosts文件,再去試試,竟然成功了

原创 Jupyter Notebook生成的文件路徑配置

當我們一開始打開Jupyter Notebook時, 其的路徑是默認的。 此時,我們應打開Anaconda Prompt,輸入jupyter notebook --generate-config,然後確認輸入y。 之後,去到

原创 在idle使用tomcat服務時,卡在deployDirectory Deploying web application directory

昨天在學習Java的SSH框架時,照着網上學習的視頻敲代碼。卻發現,在部署Tomcat服務時,卡在deployDirectory Deploying web application directory中,半天也沒反應。 後面,去

原创 python運行時出現AttributeError:’NoneType‘ object has no attribute ’find_all‘的錯誤

今天,在用python練習爬蟲時,突然出現了出現‘AttributeError: ‘NoneType’ object has no attribute ‘find_all’’的錯誤。 分析: article的類型是爲‘None

原创 Python實現輸入某日期得到其後兩天日期

在某些編程習題中,經常我們會遇到輸入某個日期從而來輸出後面的日期。因爲每個月的天數規律不同,有時輸入比較多的代碼來完成,在這裏,使用了Python裏面的字典,可以方便些。 代碼如下: # 判斷是否爲閏年 def isLeapYe

原创 新手購買服務器搭建屬於自己的網站(詳細版)

對於很多小白來說,都想搭建一個屬於自己的網站。下面將從6大方面來詳細介紹如何從購買服務器一步一步的去搭建網站。 1.購買服務器 對於我們大部分來說是學生,或者是24歲以下,我們可以去購買學生服務器,一個月不到10元。直接在百度搜索

原创 通過Python提取文本中指定開始/結尾中的內容

今天,在爬取數據後,提取時,遇到了無法直接通過標籤獲取數據。 <ul class="key clearfix"> <li>開 本:16開</li> <li>紙 張:膠版紙</li>

原创 解決Electron下載安裝失敗的問題

當我們一開始按照官網的教程,在命令行輸入以下指令後 運行的時候會發現一下報錯 這時,你按照它的提醒,將node_modules的文件刪除,再重新安裝,還是不行。 我們應該刪除,重新安裝,只需將第三步中的npm install