原创 python 爬蟲 7 (scrapy架構、中間件、動態ip代理池)

scrapy架構、中間件、動態ip代理池1、scrapy架構2、中間件process_requestprocess_responseprocess_exception3、動態ip代理池3.1、先測試一下我們的代理能用不3.2、開始

原创 python 爬蟲 6 (scrapy item、scrapy pipelines)

scrapy item、scrapy pipelines寫在前面1、scrapy item1.1、開始寫代碼1.1.1、使用scrapy shell測試UniversityItem對象1.1.2、修改usnews.py2、scra

原创 JavaScript 的簡寫技巧

JavaScript 的簡寫技巧寫在前面1、三目運算2、循環語句3、十進制數4、變量賦值5、對象屬性6、箭頭函數7、隱式返回值8、默認參數值9、模板字符串10、解構賦值11、展開運算符12、強制參數13、Array.find14、

原创 python 爬蟲 5 (scrapy重爬世界大學排名)

scrapy重爬世界大學排名寫在前面1、scrapy入門小demo2、安裝scrapy所需依賴庫3、scrapy重爬世界大學排名3.1、創建項目3.2、開始寫代碼4、配置pycharm,一鍵啓動scrapy5、scrapy she

原创 django中使用celery(分佈式任務隊列)

django中使用celery寫在前面1、開始使用1.1、安裝celery redis:1.2、安裝celery1.3、開始寫代碼1.3.1、開啓celery服務1.3.2、測試運行1.3.3、異步測耗時2、django中使用ce

原创 Flask 2(對接網頁)

Flask 對接網頁1、GET傳參2、不同url同一函數3、POST請求4、反向解析5、request5.1、request.method5.2、request.args(適用於get)5.3、request.form(適用於po

原创 Flask 1(開始入門)

Flask 入門寫在前面1、開始使用1.1、寫一個html標籤試試1.2、參數配置①debug=True②PIN碼③Environment: production④手動指定host和端口2、flask插件2.1、想和django保

原创 Django 14購物商城項目(購物車商品選中邏輯)

Django 13購物商城項目 1、單個商品選中邏輯1.1、最終效果展示1.2、html1.3、js1.4、views.py2、購物車全選2.1、邏輯2.2、html2.3、css2.4、js2.5、視圖2.6、路由 1、單個商品

原创 Flask 10(Flask-RESTful)

Flask 接口寫在前面1、Flask-RESTful開始1.1、新建一個flask項目1.2、開始使用Flask-RESTful1.3、json序列化器1.4、級聯嵌套序列化1.5、列表級聯嵌套序列化1.6、序列化模板2、Fla

原创 Flask 9(flask-mail、註冊時短信激活)

Flask flask-mail1、郵箱flask-mail1.1、安裝1.2、配置1.3、測試2、註冊時短信激活2.1、使用網易雲信發送短信2.2、代碼裏的各種參數來源2.3、開始寫代碼2.4、將驗證碼存入reids緩存 1、郵

原创 Flask 3(會話技術)

Flask 會話技術1、Cookie(存到客戶端)1.1、存儲Cookie1.2、獲取Cookie信息2、Session(存到服務器-->客戶端)2.1、Session持久化,將Session存到redis中 1、Cookie(存

原创 python 04數據分析(numpy矩陣算術、數學函數、io操作)

python 04數據分析寫在前面1、矩陣相關概念1.1、逆矩陣1.2、點積(又叫點乘)1.3、廣播機制2、矩陣乘法np.dot(a,b)3、矩陣加減法np.add(a,b)np.subtract(b,a)4、矩陣求平均數a.me

原创 Django 17購物商城項目(支付實現:支付寶沙箱環境)

Django 17購物商城項目 1、支付2、支付寶沙箱環境(用於支付測試,不是真實上線環境)2.1、python使用支付寶沙箱流程2.1.1、安裝alipay2.1.2、生成密鑰2.1.3、支付接口代碼3、路由和視圖(測試是否可用

原创 Flask 6(反爬策略:數據加密、js動態加載)

Flask 數據傳輸加密1、先創建一個庫並添加、查詢2、反爬策略:數據加密、js動態加載2.1、先把數據變成js加載2.2、對news_content進行base64加密2.3、爬取看看能獲取什麼數據2.4、隱藏js2.4.1、番

原创 機器學習 1 (KNN原理和入門)

KNN原理和入門1、KNN解釋2、實例:預測電影類型2.1、算法實現2.2、算法原理3、實例:識別手寫數字3.1、算法實現3.1、算法優化 1、KNN解釋 鄰近算法,或者說K最近鄰(kNN,k-NearestNeighbor)分類