原创 爬蟲——Scrapy框架案例一:手機APP抓包

以爬取鬥魚直播上的信息爲例: URL地址:http://capi.douyucdn.cn/api/v1/getVerticalRoom?limit=20&offset=0 爬取字段:房間ID、房間名、圖片鏈接、存儲在本地的圖片路徑

原创 Python: 轉換文本編碼

最近在做週報的時候,需要把csv文本中的數據提取出來製作表格後生產圖表。 在獲取csv文本內容的時候,基本上都是用with open(filename, encoding =‘UTF-8’) as f:來打開csv文本,但是實際使

原创 [Linux]lnmp一鍵安裝包,訪問yii/tp5/laravel的時候,報錯500或者空白頁面

當你將默認的訪問路徑改後(nginx.conf中的root 之後的路徑),同時應該將/home/wwwroot/default/.user.ini 中的路徑也改了! .user.ini 是隱藏文件,需要 ls -a 查看; 第一

原创 爬蟲——Scrapy框架案例二:陽光問政平臺

陽光熱線問政平臺 URL地址:http://wz.sun0769.com/index.php/question/questionType?type=4&page= 爬取字段:帖子的編號、投訴類型、帖子的標題、帖子的URL地址、部門

原创 教你用Python做個打飛機小遊戲超詳細教程

01 前言 這次還是用python的pygame庫來做的遊戲。關於這個庫的內容,讀者可以上網瞭解一下。本文只講解用到的知識。代碼參考自網上,自己也做了一點代碼簡化。儘量把最核心的方面用最簡單的方式呈現給大家,讓大家儘快掌握這個遊戲

原创 8種網站防止盜鏈的方法

作爲普通的網民來說,一般不需要知道也不用關心什麼是盜鏈,不過如果你是網站的開發者或維護者,就不得不重視盜鏈的問題了。如果你剛剛開發完一個沒有防盜鏈的帶有文件下載功能的網站,掛上internet,然後上傳幾個時下非常熱門的軟件或電影

原创 Python: 讀寫Excel(openpyxl / win32com.client)

項目週報彙報的時候要做數據彙總,總是要從不同的excel文件中去獲取數據最後彙總到一個excel表裏面,所以決定用python直接寫個自動化腳本來自動執行。 用python來讀寫excel,目前找了2個方法:win32com.cl

原创 Linux下Python安裝完成後如何使用pip命令

一、很多讀者Python安裝完成之後,想要下載相關的包,例如:numpy、pandas等Python中這些基礎的包,但是,發現pip根本用不了,主要表現在一下幾種情況: 二、出現這種情況其實並不意外,雖然Python3.6.3自

原创 Python:Selenium Chrome無彈窗+property/attribute/text

我們在用Selenium寫自動化程序時候,並不希望程序在實際運行過程中一直彈Chrome窗口,這個時候就需要讓Chrome默默打開,自動讀取數據,然後默默關閉掉就好。 以下是讓chrome用無界面形式打開方法,主要是chrome_

原创 Python爬蟲教程:200行代碼實現一個滑動驗證碼

做網絡爬蟲的同學肯定見過各種各樣的驗證碼,比較高級的有滑動、點選等樣式,看起來好像挺複雜的,但實際上它們的核心原理還是還是很清晰的,本文章大致說明下這些驗證碼的原理以及帶大家實現一個滑動驗證碼。 實際上這類驗證碼的校驗是分爲兩個步

原创 Linux下安裝Python

一般的Linux上都有默認的Python版本,CentOS6.5默認的Python版本的2.6.6的,因爲工作原因,這裏需要用到Python3.6.3的版本,在這裏,小編將會一步步的教大家進行再Linux下Python3的安裝。

原创 Python學習路線:Python就業指導建議

最近有很多夥伴希望我能給一些關於python的就業指導;之前出過很多關於Python學習路線的就業指導方面文章,但是並不是很完善,所以希望這期關於python的就業指導能夠很全面很詳細的聊聊就業的那些事,以下都是個人經驗和建議,如

原创 linux服務器重啓指令

一、Linux 的五個重啓命令 1、shutdown 2、poweroff 3、init 4、reboot 5、halt 二、五個重啓命令的具體說明 shutdown reboot 在linux下一些常用的關機/重啓命令有shut

原创 Python-生成個性二維碼

一、問題描述 通過調用MyQR模塊來實現生成個人所需二維碼。 安裝: pip install myqr 二、代碼實現 1.普通二維碼 from MyQR import myqr # 普通二維碼 myqr.run( wo

原创 Python: pyinstaller打包exe(含file version信息)

最近項目上一直都是用Spyder直接運行.py文件的方式來執行每日的自動化程序,每天都要手動去點擊Run來執行一次,所以考慮把.py文件直接打包成exe,然後用windows的task schedule功能來讓它自動每天運行。 用