原创 matplotlib基礎概念

數據分析概念: 1、什麼是數據分析?          數據分析是用適當的方法對收集來的大量數據進行分析,幫助人們做出判斷,以便於採取行動。 2、數據分析的流程 (1)提出問題 (2)準備數據 (3)分析數據 (4)獲取數據 (5)成果可

原创 六個優質Flask實戰項目

       Flask 是一個微型的 Python 開發的 Web 框架,基於 Werkzeug WSGI 工具箱和 Jinja2 模板引擎。Flask 使用 BSD 授權。Flask 也被稱爲 “microframework”,因爲它

原创 python的自省與反射

1.反射自省的概念   自省:自省就是能夠獲得自身的結構和方法,給開發者可以靈活的調用,給定一個對象,返回該對象的所有屬性和函數列表,或給定對象和該對象的函數或者屬性的名字,返回對象的函數或者屬性實例 反射就是通過字字符串的形式來操作對

原创 python經典練習題彙總

告別枯燥,60秒學會一個Python小例子。收錄整理了42個例子一次性送給大家,希望對大家有所幫助!總有一款適合你~~ 一、基本操作 1 鏈式比較 i = 3 print(1 < i < 3)  # False print(1 < i 

原创 帆軟報表填報導入excel數據出現錯誤

    今天在做普通的填報報表的時候發現填報導入的數據有問題,所以將出現的問題做個總結:    1、填報報表與excle裏面字段是否一致,        如果字段名稱不一致的話會出現對應的字段的數據導入,但是字段不對應的數據導不進去,特別

原创 matplotib入門練習

數據分析     ▲行文目錄結構,重點是右三分支     01 關於Matplotlib   Matplotlib是Python的一個繪圖庫,與Numpy、pandas共享數據科學三劍客的美譽,也是很多高級可視化庫的基礎。Matplot

原创 Linux常用命令(初學者)

===================目錄操作======================== mkdir: 創建目錄   -p : 遞歸的創建目錄 也就是可以創建多層目錄   一次創建多個目錄: mkdir {a,b,c,d,e,f}

原创 scrapy框架基本概念詳解

基礎部分: 1、框架的基本定義是什麼?         所謂的框架就是被集成了許多的功能且具有很強的通用性的項目模塊。 2、什麼是scrapy框架?         一個專門用於異步爬蟲的框架。 3、scrapy框架有哪些常見的功能?  

原创 數據分析的幾大黃金法則

       大數據時代的到來使人類的認識變得更精確系統、更全面廣泛、更快速有效。然而面對各種數據源收集來的海量數據,究竟如何對其進行歸類、計算、建模和解釋,卻需要高超的智慧。因數據本身始終沉默,需要依賴認識主體的賦予。     爲什麼你

原创 如何搭建實時數據倉庫(詳解)

一、技術選型介紹         在設計篇中,我們給出了RTDP(Real-time Data Platform)的一個整體架構設計(圖1)。在技術篇裏,我們則會推薦整體技術組件選型;對每個技術組件做出簡單介紹,尤其對我們抽象並實現的四個

原创 爬蟲中cookice和代理

cookice相關概念: 1、cookice是什麼?          cookice是存儲在客戶端的組鍵值對。(服務器端產生) 2、web中cookice的典型應用?         免密登錄 3、cookie和爬蟲有什麼聯繫?    

原创 GET和POST的區別小結

表面的區別 1. GET在瀏覽器回退時是無害的,而POST會再次提交請求。 2. GET產生的URL地址可以被Bookmark,而POST不可以。 3. GET請求會被瀏覽器主動cache,而POST不會,除非手動設置。 4. GET請求

原创 python經典習題(七)

1.一上來就是編程題三連 1.1 大概意思就是:倆列表a b,如果a中的元素在b中,那麼就保存此元素在a中的索引值,最後統一輸出所有索引值。要求:時間複雜度小於O(n) 這個我當時想到的是循環遍歷a,然後判斷是否i in b,但是這個時

原创 假如沒有主鍵,InnoDB會以哪個字段建立主鍵

問題 MySQL數據表使用InnoDB作爲存儲引擎的時候,數據結構就是使用B+樹,而數據本身存儲在主鍵索引上,也就是通常所說的聚簇索引,也就是每個表都需要有個聚簇索引樹,但是,在建表的時候卻發現可以不用指定主鍵,那麼MySQL對於沒有指定

原创 爬蟲數據解析方法詳解

數據解析的方法:           1、正則           2、bs4           3、xpath           4、pyquery   1、如何爬取圖片數據?     方式1:基於requests    方式2:基