原创 js破解 楚楚 街的登錄參數加密

http://seller.chuchujie.com/sqe.php?s=/User/index 發起請求 找到登錄參數  找到加密參數   import requests import hashlib def test(n

原创 Linux 使用 crontab 定時執行 Scrapy

 sh 文件 [root@mostchh-04 spider]# which scrapy /soft/python3/bin/scrapy #!/bin/bash cd /home/spider/news_spider/news_

原创 js破解 中國國際航空公司登錄

http://et.airchina.com.cn/www/jsp/userManager/myinfo.jsp  隨便登錄一個賬號密碼,查看請求參數 找加密參數 點擊登錄 觸發  摳出js代碼 var window = {}; /

原创 Python scrapy 下載圖片

https://blog.csdn.net/weixin_42336574/article/details/80946587  https://blog.csdn.net/weixin_42428357/article/details/1

原创 js破解 微博登錄參數

抓請求包 全局搜索 會發現很多參數在這個請求裏 多抓幾次包 會發現 只有 su  和 sp 然後找加密的js代碼  su  base64   sp   Python 實現 import requests,time, base64

原创 js破解 DNS登錄

https://www.dns.com 先登錄找請求參數 _token  在頁面源碼中  找password  和 email 的加密參數   用 execjs 實現 import requests import execjs im

原创 js破解 登錄 新榜 的參數

https://www.newrank.cn/ 先登錄找請求參數  找加密參數 能用 Python 重寫的就用Python重寫  import random import math import requests import

原创 js破解 極X助手 登錄

https://www.jidaihome.com 找到post 請求的 url  進行 XHR 斷點   沒找到需要的內容,點擊右側的堆棧看看  然後在進行打斷點   JavaScript加密庫Crypto-JS的使用集成了很多加

原创 Ubuntu無界面Linux 使用pyppeteer 報錯:pyppeteer.errors.BrowserError: Browser closed unexpectedly:

 安裝依賴 sudo apt-get install gconf-service libasound2 libatk1.0-0 libatk-bridge2.0-0 libc6 libcairo2 libcups2 libdbus-1

原创 Scrapy 運行多個爬蟲spider文件

https://www.cnblogs.com/yunlongaimeng/p/11526466.html 1. 在項目文件夾中新建一個commands文件夾 2. 在command的文件夾中新建一個文件 crawlall.py 3.在c

原创 requests 獲取 cookie

import requests url = 'https://www.baidu.com' headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x6

原创 Python 正則 re 高級用法

 https://docs.python.org/zh-cn/3/library/re.html http://blog.sina.com.cn/s/blog_6dc145220100zoe2.html https://www.cnblo

原创 Python Scrapy 中 scrapy.Request 傳參數

# -*- coding: utf-8 -*- # 中國產業競爭情報網 # http://www.chinacir.com.cn/hyzx/ import scrapy from urllib.parse import urljoi

原创 Python 二龍湖愛情故事2020下載

import requests import re from urllib.parse import urljoin import os import time # 獲取所有ts的url def one_movie_get_ts(ur

原创 js 破解 cookie獲取

import requests import re import execjs url = 'http://www.gsxt.gov.cn/corp-query-entprise-info-hot-search-list.html?p