原创 mysql 設置root賬號密碼,更改賬號密碼

方法1 用SET PASSWORD命令 1 1、打開終端win+r輸入cmd回車即可打開; 2、通過mysql -u用戶名 -p指定root用戶登錄MySQL,輸入後回車會提示輸入密碼。 3、修改MySQL的root用戶密碼,格式:mys

原创 python 爬蟲返回521

今天爬取網站返回狀態碼521,經過分析發現是JS混淆加密,以下是具體破解代碼: import execjs import re import requests import time url = 'http://www.mps.gov

原创 mysql 根據1個或多個列刪除重複值,sql語句 刪除重複值

問題:數據庫表t,根據name和age字段去除重複值,重複值留1條數據,其他的重複值標記爲status=0 mysql 5.6版本SQL語句(版本不一樣sql可能會有變化) UPDATE t  set status=0 WHERE id

原创 mysql 啓動服務/關閉服務

1、啓動服務器命令 net start mysql       如果拒絕訪問,使用管理員方式打開cmd,再啓動   2、停止服務命令 net stop mysql       在設置了密碼的情況下的命令爲: mysqladmin

原创 突破前端反調試--阻止頁面不斷debugger(F12不能調試)

突破前端反調試--阻止頁面不斷debugger chrome-devtools前端調試調試前端網頁爬蟲 原文地址: https://segmentfault.com/a/11...   問題復現 一次扒某網站的前端代碼,打開控制檯要看Ne

原创 pip 安裝超時問題解決方案

我們用默認pip源進行安裝第三方模塊時,經常會碰到超時問題,下面是解決方案 首先在下面文件夾下建立一個pip文件夾 C:\Users\Administrator\AppData\Roaming 然後在pip文件夾下新建一個文件pip.in

原创 正則只匹配中文漢字

[^\u4e00-\u9fa5] //匹配非中文字符 [\u4e00-\u9fa5] //匹配中文字符 ^[1-9]\d*$ //匹配正整數 ^[A-Za-z]+$ //匹配由26個英文字母組成的字符串 ^[A-Z]+$ //匹配由26個

原创 python 讀取sql server 中文字符亂碼問題?sql server 中文亂碼問?

1、連接數據庫是採用  utf-8 charset="utf8" 2、內容採用手動編碼方式 text.encode('latin-1', errors='ignore').decode('gbk', errors='ignore')

原创 使用Kettle 轉移數據遇到中文亂碼問題

最近使用kettle從測試環境遷移數據到生產環境 ,遇到中文亂碼問題。 找了很久資料,最終才解決。 解決方法: 在 起始數據庫 跟 目標數據庫 的選項裏 都配置編碼 (characterEncoding=utf8): 然後運行就ok了

原创 pandas 讀寫mysql數據庫 csv文件

一、讀取mysql數據 #方式一 import pymysql import pandas as pd pd.set_option('display.max_columns', None) #顯示所有列 pd.set_option(

原创 Charles 抓包使用教程

原文鏈接:https://www.cnblogs.com/mawenqiangios/p/8270238.html Charles 是在 Mac 下常用的網絡封包截取工具,在做 移動開發時,我們

原创 破解js加密--python execjs庫 執行js代碼

import execjs import re import requests import time #測試url url = 'http://gaj.chifeng.gov.cn/default.php?mod=article&f

原创 Redis數據庫

  Redis如何通過本機客戶端訪問遠程服務器端   遠程服務連接: $ redis-cli -h 127.0.0.1 -p 6379   windows下 :redis-cli.exe -h 127.0.0.1 -p 6379   re

原创 scrapy定時爬取和斷點測試

scrapy定時爬取:每10分鐘爬取一次       爬蟲文件下新建main.py文件,代碼如下:        import os import time while True: print('啓動爬蟲程序.........'

原创 pandas用法大全

  一、生成數據表  1、首先導入pandas庫,一般都會用到numpy庫,所以我們先導入備用: import numpy as np import pandas as pd 1 2 2、導入CSV或者xlsx文件: df = pd.