原创 爬蟲 選擇框處理
1、單選框 s = driver.find_element_by_id("boy").is_selected() print s driver.find_element_by_id("boy").click() # 點擊後，判斷元素是否
2020-06-19 18:07:49
4
原创 python 爬蟲：requests抓取的頁面信息和瀏覽器中看到的不一樣
網址:https://www.rmfysszc.gov.cn/statichtml/rm_obj/108362.shtml 用 請求出的網頁解析爲 <div id="time1" style="width:100%; height:6
2020-06-19 18:07:49
1
原创 selenium.common.exceptions.WebDriverException: Message: 'chromedriver'解決
selenium.common.exceptions.WebDriverException: Message: 'chromedriver’解決 轉載網址: https://blog.csdn.net/weixin_4431883
2020-06-19 17:07:48
原创 word打開就提示Can't find the word document templant:WordToRqm.doc
打開word文件時彈出提示 Cannot find the Word template:WordToRqm.dot 出現這種情況的原因百好像是安裝了power designer 12或者 power designer 16的原因。 使用w
2020-06-19 17:07:48
2
原创 python 根據字典中value值大小進行排序
temp_dict = {"2": 2, "1": 1, "3": 3, "4": 4} temp = sorted(temp_dict.items(), key=lambda x: x[1], reverse=True) # 按照字
2020-06-19 17:07:48
原创 開始生成CMM客戶信息數據
import gzip import os import random import re import time from concurrent.futures.thread import ThreadPoolExecutor fro
2020-06-19 17:07:48
原创 模擬生成個人電話信息數據和個人基本信息數據
from faker import Faker import os, random, gzip import re, time from pypinyin import pinyin, Style from datetime impor
2020-06-19 17:07:48
原创 python 爬取中間標籤的內容
# python 爬取<span></span>中間標籤的內容 html = """ <div> <span class='red'>item1</span> <div> <span id='s1'>it
2020-06-19 17:07:48
原创 python獲取程序運行時間
# 獲取程序運行時間 # 方法一 import time start = time.time() time.sleep(3) end = time.time() print(end - start) # 3.0000083446502
2020-06-19 17:07:48
原创 詞雲庫wordcloud 顯示亂碼或者不能正常顯示問題
詞雲庫wordcloud 顯示亂碼或者不能正常顯示問題 原因:wordcloud中字體設置爲DroidSansMono.ttf，需要修改所需要的字體，這裏需要的字體是simhei.ttf fromwordcl
2020-06-19 16:16:37
原创 hadoop can't installation: $HADOOP_HOME or $HADOOP_PREFIX must be set
在終端執行hive時，出現錯誤 Cannot find hadoop installation: $HADOOP_HOME or $HADOOP_PREFIX must be set or hadoop must be in the pa
2020-06-19 16:16:37
原创 mysql安裝navicat之後，出現2059，Authentication plugin。以及本地鏈接虛擬機docker，遠程鏈接服務器
序言 在安裝完MySql和navicat之後，進行連接時報出了ERROR 2059 (HY000): Authentication plugin ‘caching_sha2_password’ cannot be loaded: ÕÒ²»
2020-06-19 16:16:37
原创 python 移除\ufeff
從csv文件中讀取中文時，開頭可能出現\ufeff,需要去掉\ufeff 出現\ufeff是因爲使用的utf-8編碼不是utf-8-sig編碼。需要使用utf-8-sig打開 F=open(r'a.txt',encoding='utf-8
2020-06-19 16:16:37
2
原创 Scrapy 常用命令集錦
以下命令需要在dos窗口執行 1、創建項目 scrapy startproject <project_name> 2、啓動scrapy shell 做交互命令 scrapy shell <url> 如打開百度URL scrapy she
2020-06-19 16:16:37
原创 字符串與變量名相同並根據字符串取出對應變量的值
a_1 = 1 a_2 = 2 a_3 = 3 def foo(str, a_i): # print((type(a_i))) print(str, a_i) for i in range(1, 4):
2020-04-21 16:32:31