原创 WifiStateMachine死鎖導致Binder Thread超限觸發Watchdog重啓

0.系統信息:問題發生的系統是Android P,跑壓測復現到,復現過兩次,目前看起來是google原生的bug。 1.異常報如下trace,也就是在等binderThread創建超時 Watchdog: Reporting st

原创 微信文章爬蟲demo -- 綜合實驗和練習

  這周最主要的是寫各種小爬蟲,像京東商城圖片抓取爬蟲、糗事大百科抓取爬蟲、微信文章爬蟲,這些是跟着韋瑋老師的書走的。不同的是,我比較喜歡按自己的思路做實現,然後再對比韋瑋老師書中的實現,找到自己的不足和差距。   這周做下來,發現小爬

原创 爬蟲自動抓取騰訊視頻評論 -- json的使用和數據解析

  這周和大家分享下騰訊視頻評論抓取爬蟲,實際抓下來的數據裏面除了評論還有其他不少有價值的信息,有部分用戶數據可以使用的,不過具體就看大家自己怎麼用了。   這個demo的具體源碼在最後面,下文將對這個demo的實現過程進行說明。  

原创 模擬登陸CSDN -- Python爬蟲練習之正則表達式和cookie

  這周學習的主題是正則表達式和cookie,原本是計劃每天晚上11點下班到家,練上一兩個鍾就把這部分過了,結果這周各種事情和不再狀態,所以沒整完,直至今天才把相關問題過掉。其實這部分也挺不錯的,也並沒有想象中容易,所以好事多磨。這周練習

原创 TinyHttpSever

Across the great wall, we can reach every corner in the world. TinyHttpd源碼分析 TinyHttpd源碼分析 背景 源碼解析 主體框架 - main

原创 反爬蟲繞過初級——添加http header和gzip解壓處理

  這陣子在學習爬蟲,做練習需要一個禁止爬蟲且只需添加Header就能繞過的網站。運氣不錯,找到一個HTTPS協議的,考慮到該網站內容比較special(人類進步的階梯^_^),所以本文會把網站的相關信息碼掉。   python處理ht

原创 第一篇博文

  很久之前就想整一個博客寫文章,主要是想記錄自己的一些所思所得,記錄自己讀過的書和學的新技能,也可以做一些分享。因此,在開CSDN這個博客之前,我在WordPress上申請了一個賬號,創建了一個博客 : 影子,這個博客記錄了我看的兩本書