原创 爬取上交所公司信息,根據公司股票代碼獲取公司註冊地址以及地址的經緯度

之前爬取網頁上的靜態數據時,直接解析頁面html內容即可,但是有時候會遇到table數據內容存放於動態的JavaScript中,使用瀏覽器才能加載出來,簡單的爬取網頁的html內容,發現找不到數據。此時需要phantomjs這個模擬器

原创 Python基於百度地圖API根據地址獲取經緯度

根據一箇中文的地址信息,獲取該地址所對應的經緯度信息。(專業的說法是地理編碼)。編程語言:Python3,百度地圖API接口:http://lbsyun.baidu.com/index.php?title=webapi 獲取地址的經緯

原创 sqlserver存儲過程和觸發器

存儲過程就是作爲可執行對象存放在數據庫中的一個或多個SQL命令。 通俗來講:存儲過程其實就是能完成一定操作的一組SQL語句。 存儲過程的特點 存儲過程只在創造時進行編譯,以後每次執行存儲過程都不需再重新編譯一般SQL語句每執行一次就

原创 Numpy練習

100道NumPy Exercise題 https://github.com/rougier/numpy-100/blob/master/100_Numpy_exercises.ipynb 1.導包查看numpy import n

原创 Oracle Check約束

最近做一份數據庫的任務,發現MySQL中不支持在創建表定義字段時使用check約束,如果要在MySQL中使用類似字段約束取值,有兩種方式:1.枚舉enum,2.創建觸發器 MySQL關於check約束無效的解決辦法 下面正式記錄一

原创 秋招-SQL備戰練習1(最後的衝刺)

SQL是每個學CS的必備技能,看上去內容就是些簡單的建庫建表、修表修值,增刪查改,子查詢,表連接,索引,存儲過程,觸發器,實則很難精通,遇到寫複雜的SQL,反應半天也很難寫出,看到別人寫的答案,頓覺得豁然開朗。 下面記錄寫在牛客網上的

原创 秋招-SQL備戰練習3

續接前兩篇博客秋招-SQL備戰練習1 秋招-SQL備戰練習2 用到的數據庫表如下: employees_test CREATE TABLE employees_test( ID INT PRIMARY KEY NOT NULL, NA

原创 將博客搬至CSDN

將博客搬至CSDN

原创 2018研究生數學建模心路歷程

2018-09-19 19:25:26 今天中午一直睡覺到下午六點半,醒的那一刻才感覺自己慢慢復活了。剛過去的100小時(2018年9月15日8點—2018年9月19日12點),真的是一段難忘和煎熬的過程。 研究生數學建模的過程是對身

原创 秋招-SQL備戰練習2

續接上一篇博客秋招-SQL備戰練習1(最後的衝刺) 備註:下文中的SQL語句使用與SQLite,也基本適用於MySQL中 用到的數據庫表如下: 電影表film CREATE TABLE IF NOT EXISTS film ( fil

原创 分類模型的效果評估

數據挖掘建模中最後一步就是對模型進行效果評估,驗證模型的性能,讓你的模型具有說服力,本文對分類模型的評估做了彙總,並結合Sklearn講解如何繪製ROC曲線、PR曲線。 混淆矩陣 真正例TP(True Positive)、假負例FN

原创 2018研究生數學建模成績分析

2018研究生數學建模成績分析,主要從以下幾個方面進行分析 數據來源:2018研究生數學建模成績彙總 1. 按‘隊長所在單位’統計每個學校的獲獎數量,並畫出柱狀圖展示 #coding:utf-8 import numpy as np

原创 數據分析崗-機器學習相關知識

1. 解釋共線性 我們進行迴歸分析需要了解每個自變量對因變量的單純效應, 多重共線性就是說自變量間存在某種函數關係,如果你的兩個自變量間(X1和X2)存在函數關係,那麼X1改變一個單位時,X2也會相應地改變, 此時你無法做到固定其他條

原创 秋招面試準備-數據庫知識

索引、觸發器、存儲過程、連接、死鎖機制、數據庫的恢復、備份、union、MySQL引擎 索引 深入淺出數據庫索引原理 索引是什麼? 索引是對數據庫表中一列或多列的值進行排序的一種結構,使用索引可快速訪問數據庫表中的特定信息。索

原创 Linux命令英文解釋(按英文字母順序)

Linux(Centos)常用命令的英文解釋(按英文字母順序組織) 對於一個喜歡探索爲什麼的青年,使用linux時必須要知道它的具體含義,原始含義,方便理解和記憶。是不是頗有強迫症的疑問。 Linux命令大全查詢 A apt = A