原创 Python爬蟲之scrapy框架使用技巧(scrapy命令大全 + 各文件講解)

文章目錄Python爬蟲之scrapy框架使用技巧1. scrapy框架命令講解2. scrapy項目文件結構2.1 sample_spider代碼講解2.2 itmes代碼講解2.3 middlewares代碼講解2.4 pip

原创 Python獲取各種文件路徑的方法

Python獲取各種文件路徑的方法 使用方法都寫在程序裏面的註釋中,請盡情享用,如果您覺得不錯可以點個贊哦🙂 代碼如下: # -*- coding:utf-8 -*- import os import sys __author_

原创 Python爬蟲之BeautifulSoup使用技巧

文章目錄一、BeautifulSoup簡介及安裝1. 簡介2. 安裝二、BeautifulSoup使用方法介紹1. 注意事項2. 使用方法2.1 獲取標籤信息2.2 獲取元素節點2.3 使用方法選擇器2.4 使用CSS選擇器 一、

原创 Python裝飾器使用技巧

裝飾器的概念 Python的裝飾器就是一個嵌套函數,它可以讓其他函數在不需要做任何代碼變動的狀態下增加額外的功能,裝飾器的返回值也是一個函數對象。它經常用於有統一性需求的場景,比如:插入日誌、事務處理、緩存、權限校驗等場景。裝飾器

原创 Python爬蟲之xpath使用技巧

Python爬蟲之xpath使用技巧 使用方法都寫在程序裏面的註釋中,請盡情享用,如果您覺得不錯可以點個贊哦🙂 代碼如下: """<<常用表達式規則>> 表達式: 含義: nodename 選擇此節

原创 成功解決瀏覽器打不開github網站問題

文章目錄成功解決瀏覽器打不開github網站問題一、確定github網站的ip二、確定域名ip三、確定靜態資源ip四、修改hosts文件 成功解決瀏覽器打不開github網站問題 一、確定github網站的ip 打開網址:http