原创 阿里雲部署爬蟲項目

我是完全不懂Linux的小白。寫了爬蟲程序之後發現辣雞電腦老是會自動關機,因此不得不去用雲服務器。接下來和大家講講買服務器-安裝Python3-安裝各種module-爬蟲程序的修改-上傳爬蟲程序-運行爬蟲的全過程。爬蟲爬的是一個

原创 模塊安裝失敗

安裝模塊時總是失敗,失敗原因如下: raise ReadTimeoutError(self._pool, None, ‘Read timed out.’) pip._vendor.urllib3.exceptions.ReadT

原创 Python爬蟲數據解析:正則表達式解析;xpath解析數據;BeautifulSoup(bs4)解析

爬蟲爬取到的數據一般要進行解析,常用解析數據的方法一般有以下幾種: 正則表達式解析 xpath解析 BeautifulSoup解析 其它不常用的不再介紹 1、正則表達式解析 2、xpath解析 xpath下標從1開始 (1)匹

原创 超燃勵志你走的每一步都藏着未來的影子

【勵志向|二十句話重燃鬥志|新的開始】

原创 Python基礎(2)if...else while循環 for循環 break語句 continue語句

1.選擇語句 (1)最簡單if語句 number = 5 if number == 5: print("數值爲{0}".format(number)) 結果: 數值爲5 (2)if…else 語句 a = 9 if a >

原创 認識Django MTV模式,Django常用命令

1.Django架構模式 MTV架構 Django採用了MTV架構模式 Django也是一個MVC框架。但是在Django中,控制器接受用戶輸入的部分由框架自行處理,所以 Django裏更關注的是模型(Model)、模板(T

原创 Scrapy爬蟲Scrapy爬蟲項目CrawlSpider爬蟲

Scrapy爬蟲1、Scrapy原理圖、項目創建及常用命令2、爬蟲基本流程3、兩種重要的Json存儲方法4、多頁面爬取5、CrawlSpider爬蟲6、微信小程序教程爬蟲(使用CrawlSpider) 1、Scrapy原理圖、項目

原创 matplotlib(2)---柱狀圖, 直方圖, 餅狀圖的繪製

一. 柱狀圖 電影票房柱狀圖1 import matplotlib.pyplot as plt import numpy as np # 設置matplotlib正常顯示中文和負號

原创 matplotlib(1)---概念及折線圖的繪製

一. 基本概念(組成) matplotlib組成: 由棧組成, 分爲三層: Scripting(腳本), Artist(美工),Backend(後臺). 在整個matplotlib中, 圖形中所能看到的元素都屬於Artist對象

原创 NumPy(1) ---- 基本操作知識數組

一. Numpy簡介 matplotlib: 主要進行繪圖, 可視化顯示 numpy:  主要進行數據運算 pandas:  主要進行數據處理 1. Numpy優點 一個強大的N維數組對象 支持大量的數據運算 集成C/C++

原创 MySQL怎麼刪除表中數據

使用命令: delete from 表名; 這隻會刪除表內數據,不會刪除表。 下面代碼是刪除表的( 慎用 ): drop table 表名;

原创 selenium、webdriver打開Chrome瀏覽器閃退問題(版本號一致)

使用selenium、webdriver打開谷歌瀏覽器,登錄頁面後閃退,但是版本號是對應的,是因爲driver的全局變量問題 1、不設置driver爲全局,放在函數內(會閃退) from selenium import webdr

原创 PyCharm自動換行最新

新版Pycharm設置自動換行 1、打開Pycharm後,按鍵盤上ctrl+alt+s鍵打開設置,再依次打開Editor>General,找到如下紅色框選項: 2、再選項框中打對勾選中,在後面輸入框中輸入; *.py,再點擊確定

原创 Python基礎(1)保留字數據類型運算符format

1.保留字與標識符 import keyword print(keyword.kwlist) print(len(keyword.kwlist)) 輸出: ['False', 'None', 'True', 'and', 'as

原创 Python基礎(7)集合及常用操作

集合(set) 集合(set)是一個無序的不重複元素序列,因此可以做字典的鍵。 可以使用大括號 { } 或者 set() 函數創建集合,注意:創建一個空集合必須用 set() 而不是 { },因爲 { } 是用來創建一個空字典。