原创 Django框架-目錄文件簡介

轉載鏈接:http://www.cnblogs.com/cherishry/p/6204187.html 1.介紹Django Django:一個可以使Web開發工作愉快並且高效的Web開發框架。 使用Django,使你能夠

原创 使用BeautifulSoup中的find()和findAll()函數時關鍵字參數的注意事項

BeautifulSoup是Python裏最受歡迎的HTML解析庫之一。它可以提供一些簡單的、python式的函數用來處理導航、搜索、修改分析樹等功能。它是一個工具箱,通過解析文檔爲用戶提供需要抓取的數據,因爲簡單,所以不需要多

原创 實驗室NEWIFI-D1路由小云系統簡易配置參考

上一篇博客使用的是華碩的固件,但是無奈硬盤在第三方固件下可能會出現未能識別的錯誤,折騰一天也無法解決。所以重新刷回了NEWIFI官方的老的路由系統,也是基本能實現功能。 預期實現功能 需要實現的三大功能 FTP文件共享 實現

原创 Python自動化運維筆記(五):使用filecmp模塊實現文件以及文件目錄差異對比

運行環境:Python3.6,Windwos10 RS1,Pycharm 參考書籍—《Python自動化運維--技術與最佳實踐》劉天斯著 模塊介紹 Python2.3以上的版本默認自帶了filecmp模塊,無需額外安裝

原创 Python自動化運維筆記(六):使用smtplib模塊發送電子郵件

運行環境:Python3.6,Windwos10 RS1,Pycharm 參考書籍—《Python自動化運維--技術與最佳實踐》劉天斯著 模塊介紹 我們在監測系統狀態發送警報信息,或者業務質量報表的時候,可以通過發送郵

原创 我的反爬解決方案(3)——一些站點的反反爬解決方案Demo

在前兩篇文章中針對反爬提供了更換代理IP和模擬登陸兩個方面的項目。 在第三篇中我打算收集一些常見站點的反爬解決技巧,針對數據的加密、混淆、下毒等反爬手段,涉及的僞技術棧包括JS逆向、APP逆向、繞過反爬以及一些數據提取接口分享等。

原创 我的反爬解決方案(1)—— 懟代理IP

項目地址 免費代理IP池地址(長期維護):https://github.com/IMWoolei/FreeProxyPool 前言 在常見的反爬手段中,最常見的是針對訪問頻度反爬,頻度反爬中最常用的又是針對出口IP訪問頻率的限制。

原创 我的反爬解決方案(2)—— 模擬登陸

項目地址 常見站點模擬登陸(長期維護):https://github.com/IMWoolei/fuck-login 前言 爬蟲的任務不僅僅是採集數據,自動刷訪問量、自動發佈內容等都屬於爬蟲所涉及的範圍。 而完成自動刷訪問量、發佈

原创 Python中日誌的處理示例,根據不同的日誌級別輸出至日誌文件,以及多進程中日誌輸出解決方案

前言 在工作中有好幾個小夥伴問我關於Python日誌模塊的使用和日誌文件這塊我通常是怎麼處理的,所以我打算總結一下我在Python普通程序(非中大型項目)中的日誌常見處理方法。 操作環境:Python3.6、MacOS 10.1

原创 利用Flask寫了一個代理IP提取接口,並附上電影下載站點刷分程序用於測試代理IP可用性

熱烈慶祝失蹤人口迴歸 代理IP獲取接口 接口地址:http://api.faceme.site/proxy/ 請求方法:GET 接口參數: limit 單次代理IP提取數量,默認提取全部,int類型 scheme

原创 MySQL學習筆記(一):修改MySQL中的提示符

運行環境:MySQL5.7.2, Windwos10 RS3 前言 在登陸進入mysql數據庫後,mysql的初始提示符只是一個很簡單內容 mysql> ,沒有其他任何信息。通過--prompt=name可以自定義提示信息,通過配

原创 MySQL學習筆記(三):子查詢語句中ANY、SOME、ALL關鍵字的使用

前言 在使用子查詢語句的過程中經常使用ANY、SOME、ALL(另外還有一個IN)關鍵字作爲篩選條件。 ANY、SOME、ALL關鍵字的使用 使用關係表一覽 運算符\關鍵字 ANY SOME ALL > 、>= 最小值

原创 MySQL學習筆記(二):查找記錄方法-SELECT(詳細)

SELECT使用方法 查找記錄 SELECT select_expr[,select_expr...] [ FROM tb_references [WHERE where_condition] [GROUP BY {col_na

原创 Python2和Python3中urllib庫中urlencode的使用注意事項

這篇文章主要介紹了Python2和Python3中urllib庫中urlencode的使用注意事項,非常不錯,具有一定的參考借鑑價值,需要的朋友可以參考下 前言 在Python中,我們通常使用urllib中的url

原创 使用Tornado框架寫了一個用於獲取電影下載鏈接的API接口,歡迎大家使用 :-)

20180806更新: 由於我的阿里雲服務器到期了,所以這個API接口失效了。 請求方式 請求方式GET: http://119.23.242.165:8888/resource/movie?id={id}&kw={kw} - id