原创 python學習之自動化運維項目
項目實戰: CMDB自動化資產掃描 1. 項目介紹 本項目通過KVM虛擬化搭建Linux系統集羣,使用 Ansible實現Linux集羣下的批量部署與自動化管理,實現Web形式的自動化運維繫統,集中批量控制服務器, 最終實現能支撐1000臺
2020-05-05 18:11:24
原创 python學習之容器化管理docker
Docker簡介 1.1 什麼是虛擬化在計算機中,虛擬化(英文: Virtualization)是一種資源管理技術,是將計算機的各種實體資源(如: 服務器、網絡、內存及存儲等)予以抽象、轉化後呈現出來, 打破實體間不可切割的障礙,使用戶可以
2020-05-03 17:28:00
原创 python學習之數據分析與數據挖掘
數據採集 利用各種手段獲取數據,數據樣式不限制,但一般而言是形如 excel 或者 csv 這樣的表格格式。數據採集: urllib , requests數據解析: Xpath , BS4 , 正則表達式數據持久化存儲: pd.to_csv
2020-05-03 17:28:00
原创 python學習之爬蟲項目ScrapyProject總結
項目名稱： ScrapyProject 項目介紹： 1抓取圖書http://www.shicimingju.com: 1). 請求圖書詳情頁parse(self, response)函數的修改-ScrapyProject/ScrapyPro
2020-04-22 17:01:26
原创 python學習之ajax和可視化管理工具
Ajax爬蟲 瀏覽器中可看到正常顯示的數據,但使用requests得到的結果並沒有。 這是什麼原因呢?requests獲取的是原始的HTML文檔,而瀏覽器中的頁面是經過JS處理數據後生成的結果。 這些數據的來源有哪些情況呢?Ajax加載、
2020-04-22 17:01:26
原创 python學習之Scrapy爬蟲框架
Scrapy架構流程 • Scrapy,Python開發的一個快速、高層次的屏幕抓取和web抓取框架,用於抓取web站點並從頁面中提取結構化的數據。• Scrapy吸引人的地方在於它是一個框架,任何人都可以根據需求方便的修改。它也提供了多種
2020-04-21 17:29:27
原创 python學習之爬蟲理論總結
通用爬蟲和聚焦爬蟲 根據使用場景，網絡爬蟲可分爲 通用爬蟲 和 聚焦爬蟲 兩種.通用網絡爬蟲 是 捜索引擎抓取系統(Baidu、Google、Yahoo等)的重要組成部分。主要目的是將互聯網上的網 頁下載到本地,形成一個互聯網內容的鏡像備份
2020-04-19 18:07:32
原创 python學習之網絡數據解析
正則表達式 實際上爬蟲一共就四個主要步驟: 明確目標 (要知道你準備在哪個範圍或者網站去搜索) 爬 (將所有的網站的內容全部爬下來) 取 (去掉對我們沒用處的數據) 處理數據(按照我們想要的方式存儲和使用)正則表達式,又稱規則表達式,通常
2020-04-19 18:07:32
原创 爬蟲post請求獲取有道詞典在線翻譯
import urllibfrom urllib import requestimport reurl="http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule
2020-04-19 18:07:22
原创 整理django 知識點
1. 列舉Http請求中常見的請求方式? GET 向特定的路徑資源發出請求，數據暴露在url中POST 向指定路徑資源提交數據進行處理請求（一般用於上傳表單或者文件），數據包含在請求體中OPTIONS 返回服務器針對特定資源所支持的HTT
2020-04-07 12:50:27
原创 python學習之javascripts
JavaScript 簡介 JavaScript 是互聯網上最流行的腳本語言，這門語言可用於 HTML 和 web，更可廣泛用於服務器、PC、筆記本電腦、平板電腦和智能手機等設備。JavaScript 是腳本語言 JavaScript 是一
2020-02-24 12:49:23
原创 python 學習之javascipts中的jQuery
jQuery介紹jquery是一個函數庫,一個js文件,頁面用script標籤引入這個js文件就可以使用。下載地址:jQuery官方網站: http://jquery.com/<script type="text/javascript" s
2020-02-24 12:49:23
原创 python學習之複習整理
計算機網絡相關知識點整理: 1. OSI,TCP/IP,五層協議的體系結構,以及各層協議? OSI分層（7層） 物理層、數據鏈路層、網絡層、運輸層、會話層、表示層、應用層 TCP/IP分層（4層） 網絡接口層、網絡層、
2020-02-20 12:49:51
1
原创 python學習之web中css
css 介紹CSS 指層疊樣式表 (Cascading Style Sheets)定義如何顯示控制 HTML 元素,從而實現美化HTML網頁。 爲了讓網頁元素的樣式更加豐富,也爲了讓網頁的內容和樣式能拆分開,CSS由此思想而誕生,有了CSS
2020-02-20 12:49:51
原创 python學習之數據庫mariadb操作
數據庫簡介數據庫分類關係型數據庫:指採用了關係模型來組織數據的數據庫。關係模型指的就是二維表格模型,而一個關係型數據庫就是由二維表及其之間的聯繫所組成的一個數據組織。主流的關係型數據庫有:Oracle、Microsoft SQL Serve
2020-02-20 12:49:51
2