原创 爬取西刺代理的免費IP

背景 出於爬取其他項目的需求,爬取點代理ip存成文本文件,隨機取一個簡單驗證,方便自己其他代碼裏面調用。 環境 win10, python 3.6, pycharm 乾貨 import requests from bs4 im

原创 LeetCode題庫 數據庫分類 困難 185. 部門工資前三高的員工 MS SQL解法 答案

最近在刷leetcode題庫,剛好看到中文網站已經上線了,新增了ms sql解釋器。困難難度鏈接在這,就順便吐槽一下這個中文名字吧。 [ 力扣題庫 ] 185. 部門工資前三高的員工 Employee 表包含所有員工信息,每

原创 用requests和pandas爬取中國福彩網官網 雙色球 歷年全部彩票數據

網址 中國福彩網: http://www.cwl.gov.cn/kjxx/ssq/kjgg/ 環境 win10, python 3.6, pycharm 乾貨 import requests import json impor

原创 LeetCode題庫 數據庫分類 困難 262. 行程和用戶 MS SQL解法 答案

最近在刷leetcode題庫,剛好看到中文網站已經上線了,新增了ms sql解釋器。困難難度鏈接在這,就順便吐槽一下這個中文名字吧。 [ 力扣題庫 ] 262. 行程和用戶 Trips 表中存所有出租車的行程信息。每段行程有

原创 十行代碼用pandas的read_html爬取中彩網雙色球歷年全部數據

網址 中彩網雙色球查詢:http://kaijiang.zhcw.com/zhcw/html/ssq/list_1.html 環境 win10, python 3.6, pycharm 乾貨 import pandas as

原创 一鍵實現前程無憂(51job)簡歷不停刷新(selenium)

前段時間找工作投簡歷,每天要刷新簡歷好麻煩有木有! 藍後在英明神武的課代表的啓發下,寫腳本自動刷有木有,永久最新有木有! 參考 詳情請參考我們神奇課代表的博客:http://blog.csdn.net/mrlevo520/art

原创 用SQLCMD操作SQL Server數據庫(挖坑以後再填)

以前上課的時候老師用了一哈哈這個SQLCMD,默默記哈了寄幾玩一把。 正文 首先打開win+R 打開cmd,這個非常重要hhhhh。 藍後,輸入sqlcmd \?或者sqlcmd -?查看下幫助。 輸入sqlcmd

原创 python3的requests解析中文頁面時亂碼問題解決方法

最近碰到個問題,用requests爬51job時候,發現中文亂碼,傳給bs的是r.text,排查發現r.encoding是 ISO-8859-1。 發現指定編碼方式之後,可以正常顯示。 # method 1 r = requests.

原创 LeetCode題庫 數據庫分類 困難 601. 體育館的人流量 MS SQL解法 答案

最近在刷leetcode題庫,剛好看到中文網站已經上線了,新增了ms sql解釋器。困難難度鏈接在這,就順便吐槽一下這個中文名字吧。 [ 力扣題庫 ] 601. 體育館的人流量 X 市建了一個新的體育館,每日人流量信息被記錄