原创 某音無水印短視頻獲取思路分享

原創 菜鳥童靴 菜鳥童靴 1周前 首先預告一下,文章末尾有彩蛋,好東西是需要分享的   開門見山,甩出一批代碼,先操練起來: import re import requests def get(share_url) -> dict

原创 Linux下打開超大文件方法

  在Linux下用VIM打開大小几個G、甚至幾十個G的文件時,是非常慢的。 這時,我們可以利用下面的方法分割文件,然後再打開。 1 查看文件的前多少行 head -10000 /var/lib/mysql/slowquery.log >

原创 js逆向之某聯社sign值參數解析

原創 Mr.Yang 菜鳥童靴 今天 聲明:本文只作學習研究,禁止用於非法用途,否則後果自負,如有侵權,請告知刪除,謝謝!   練習網站平臺:   aHR0cHMlM0EvL3d3dy5jbHMuY24v 抓取目標:   這次要分析的

原创 JS某網站登錄(密碼加密)分析

聲明:本文只作學習研究,禁止用於非法用途,否則後果自負,如有侵權,請告知刪除,謝謝! 網站: aHR0cCUzQS8vOTk3MThoLmNvbS8= 當我們輸入密碼時,點擊登錄 搜索password定位js加密代碼: 打上斷點,調試

原创 Appium+Python自動化測試(一)--環境搭建

Appium簡介 Appium是一個自動化測試開源工具,支持IOS和Android平臺上的移動原生應用、移動Web應用和混合應用。所謂的“移動原生應用”是指那些用IOS或者Android SDK寫的應用;所謂的“移動Web應用”是指使用移

原创 LRU算法你理解多少

what LRU ?(來自百度百科): LRU是Least Recently Used的縮寫,即最近最少使用,是一種常用的頁面置換算法,選擇最近最久未使用的頁面予以淘汰。該算法賦予每個頁面一個訪問字段,用來記錄一個頁面自上次被訪問以來所經

原创 新一代王者搜索引擎來了,比百度好用 N 倍

高級農民工 分享 Python 爬蟲、數據分析、數據挖掘、機器學習和大數據等領域原創前沿乾貨。 上週一家叫「Peak Labs」的公司發佈了一款人工智能版的搜索引擎:Magi。 這款搜索引擎有什麼特點呢,首先就是暗黑風格高顏值、無廣告,

原创 Python tesserocr模塊使用示例

安裝tesseract OCR,即Optical Character Recognition,光學字符識別,是指通過掃描字符,然後通過其形狀將其翻譯成電子文本的過程。對於圖形驗證碼來說,它們都是一些不規則的字符,這些字符確實是由字符稍加扭

原创 python類中的self參數和cls參數

  1. self表示一個類的實例對象本身。如果用了staticmethod就無視這個self了,就將這個方法當成一個普通的函數使用了。 2. cls表是這個類本身。 # 代碼爲證 class A(object): def fu

原创 Git使用教程

Git使用教程: 最詳細、最傻瓜、最淺顯、真正手把手教!   導讀:因爲教程詳細,所以行文有些長,新手邊看邊操作效果出乎你的預料。GitHub雖然有些許改版,但並無大礙。 一、Git是什麼? Git是目前世界上最先進的分佈式版本控制系統。

原创 python 破解字體反爬 (一)

爬取一些網站的信息時,偶爾會碰到這樣一種情況:網頁瀏覽顯示是正常的,用python爬取下來是亂碼,F12用開發者模式查看網頁源代碼也是亂碼。這種一般是網站設置了字體反爬 這裏我們以58同城爲例: 點擊進入https://sz.58.com

原创 Google Chrome調試js入門

      平常在開發過程中,經常會接觸到前端頁面。那麼對於js的調試那可是家常便飯,不必多說。最近一直在用火狐的Firebug,但是不知道怎麼的不好使了。網上找找說法,都說重新安裝狐火瀏覽器就可以了,但是我安裝了好多遍,也沒好使,後來聽

原创 python init.py 文件的作用以及意義

  init.py 文件的作用以及意義 介紹一: 這個文件(這個文件定義了包的屬性和方法)其實它可以什麼也不定義;可以只是一個空文件,但是必須存在。如果 init.py 不存在,這個目錄就僅僅是一個目錄,而不是一個包,它就不能被導入或者包

原创 Scrapy爬蟲框架(一)原理介紹

Scrapy爬蟲原理:       架構分爲如下幾個部分: Scrapy Engine:引擎負責控制數據流在系統中所有組件中流動,並在相應動作發生時觸發事件,此組件相當於爬蟲的“大腦”,是整個爬蟲的調度中心。 調度器(Scheduler

原创 Python 如何實現方法重載:

  Python 通過單分派泛函數部分支持了方法重載。 官方文檔是這樣定義泛函數以及單分派函數的: A generic function is composed of multiple functions implementing the