原创 golang time常用方法

說明         在golang中,時間轉換都會通過Time類型做一系列轉換。主要包含,時間戳和時間字符串,時間字符串轉換成另外的格式。總之所有的轉換都是通過Time類型做中間轉換。參考文檔:https://golang.org/pk

原创 Docker 加速器

sudo mkdir -p /etc/docker sudo tee /etc/docker/daemon.json <<-'EOF' { "registry-mirrors": ["https://ue0yw56h.mirror.

原创 teamviewer疑似商用

說明 teamviewer封鎖是針對疑似商用作出的一種查封手段。一般來說個人是免費使用的,但是使用過程過於頻繁就會導致封鎖。 以下給出一種解決封鎖的終極手段,因爲我也試過很多次,但是都是沒有效果的。受到爬蟲被封鎖的啓示,針對此軟件作出被封

原创 golang switch

1,在golang中,switch默認會包含break。 num := 10 switch num { case 1: fmt.Println("輸入的是1") case 2: fmt.Println("輸入的是2") case 3

原创 golang 枚舉 iota

1,iota 常量自動生成器 2,每隔一行,自動加1 3,iota給常量賦值 const ( a = iota b = iota c = iota ) fmt.Println(a, b, c) // 0 1 2 4,iota遇到c

原创 win10 mysql導出csv

 win10導出csv有兩種方式,第一種是藉助工具,Navicat for Mysql是一個非常好用的mysql可視化工具,可以導出多種格式的數據,但是也有其侷限。第二種是原始SQL語句導出。 Navicat For Mysql 安裝軟件

原创 golang 編譯不同平臺可執行文件

1、Mac下編譯Linux, Windows平臺的64位可執行程序: $ CGO_ENABLED=0 GOOS=linux GOARCH=amd64 go build test.go $ CGO_ENABLED=0 GOOS=win

原创 Docker 極速器

sudo mkdir -p /etc/docker sudo tee /etc/docker/daemon.json <<-'EOF' { "registry-mirrors": ["https://ue0yw56h.mirror.

原创 golang中的slice

概念     Slice即切片,它和數組(array)很類似,可以用下標的方式進行訪問。如果越界,就會產生 panic。但是它比數組更靈活,可以自動地進行擴容。 1,slice源碼 // runtime/slice.go type sl

原创 領英模擬登陸

說明 上一篇文章已經爬蟲目的, 脈脈模擬登陸。 領英模擬登陸難度略大於脈脈 操作 1、登陸接口 其中session_key是用戶名,session_password是密碼。 關鍵點 1、loginCsrfParam 2、cookie 3

原创 脈脈模擬登陸

說明 最近弄得最熱的就是什麼互聯網寒冬,裁員等關鍵字,於是脈脈,領英的平臺的熱度就上去了,我就做了脈脈,領英的爬蟲。 操作 脈脈模擬登陸難度不大,只是需要驗證碼處理 我用的雲打碼,數字的加減法  1、通過抓包分析,登陸的地址爲 http

原创 起點網 字體反爬

起點女生網爬蟲,主要反爬措施,字體混淆,16進制轉換。 目標網站 https://www.qidian.com/mm/all 本爬取該網站40W+小說信息(不包含小說詳細內容),存進mongodb 操作 1、主要對如下字段進行解釋 2、

原创 網易有道翻譯接口破解

說明 該網站是有反爬措施的,主要的措施是JS加密參數,隨機COOKIE參數 目標網站 http://fanyi.youdao.com/ 目的: 我們希望獲取翻譯接口,可以使用代碼調用其接口來做翻譯。 操作 1、打開瀏覽器進入網站,隨便輸入

原创 Appium爬蟲環境搭建

環境說明 1、所需軟件 appium,java,android-sdk 2、安裝 appium下載地址:https://github.com/appium/appium-desktop/releases/tag/v1.8.2 根據自己電腦

原创 Appium爬蟲(hello world)

前提條件 環境準備妥當,環境參考 https://blog.csdn.net/yunlongl/article/details/83898507 操作步驟 本篇先使用JAVA,python後面更新。 打開intelliJ IDEA,創建一