原创 scrapy 中修改圖片的名稱

在原來下載圖片基礎上: 1.在設置文件中定義好圖像名稱字段 IMAGES_NAME_FIELD = 'image_names' 2.在images.py文件中修改名稱 類變量中添加: DEFAULT_IMAGES_URLS_FIELD

原创 scrapy 修改爲scrapy_redis後parse無反應

  原因: REDIS_URL寫錯 REDIS_URL = 'redis://root:[email protected]:6380/1' REDIS_URL 即 //用戶名:密碼@ip:port/表

原创 bert 分類模型

大神的帖子:https://blog.csdn.net/xmxoxo/article/details/89315370 github: https://github.com/xmxoxo/BERT-train2deploy 記錄本人訓練情

原创 duilib 各控件響應的消息類型

消息 說明 Sender 宏定義 link   CTextUI、CListTextElementUI DUI_MSGTYPE_LINK menu   CButtonUI、CControlUI

原创 fiddler抓不了google的包解決方案

1.設置fiddler 重啓下!!! 2.設置瀏覽器 瀏覽器設置成fiddler模式,保證端口一致 就可以抓包了

原创 familia編譯缺少libpython3.6m.so.1.0

familia編譯時報錯:缺少libpython3.6m.so.1.0 方法1:去別的環境下找下有沒 libpython3.6m.so.1.0,導過來加到共享庫路徑LD_LIBRARY_PATH,python版本需一樣 方法2:自己重新動

原创 urllib.error, status_code:405

req = requests.post(surl, headers=header, data=data, timeout=(5, 10)) 報405,檢查了下header和data沒毛病,查了一圈是請求方式錯了 req = requ

原创 BeautifulSoup的解析器,沒有解析表格?

之前一般解析用的html.parser 這次正文後附帶表格,打印後發現沒有表格內容,查詢後換成html5lib就ok了,原因後續添加

原创 記一次chmod -R 777 / 之後 修復方法

linux系統誤操作執行:chmod -R 777 / 之後 修復方法 誤操作“chmod -R 777 / ”怎麼辦,不慌聽我講解   手賤執行chmod -R 777 /, ctrl c後所有命令執行報錯:     -bash: /u

原创 BeautifulSoup 解析總結

持續更新 1.並列標籤的所有內容 soup.find_all(['p', 'div'])