Python爬蟲--爬取非小號中虛擬幣的價格

原創 催催催不翠 2020-06-21 09:02 
#coding=utf-8

import requests,random
from bs4 import BeautifulSoup
import sys,datetime,time
from xlrd import open_workbook
from xlutils.copy import copy
import xlrd,xlwt

reload(sys)
sys.setdefaultencoding('utf-8')


class Fire:

    global i

    def __init__(self):
        self.headers_1 = {      # ADA/USDT請求頭信息
            'Accept':'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
            'Accept-Encoding':'gzip, deflate, br',
            'User-Agent':'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36',
            'Accept-Language':'zh-CN,zh;q=0.9',
            'Cache-Control':'max-age=0',
            'Connection':'keep-alive',
            'Cookie':'UM_distinctid=1632920ba7831d-08796d23010447-7e5a600d-ff000-1632920ba7928d; Hm_lvt_192e611c7ffa4b2f8a5047e5cf45403f=1525403401; usid=39af3e641c8f2ace; CNZZDATA1263003344=1945603078-1525399934-%7C1525405335; Hm_lpvt_192e611c7ffa4b2f8a5047e5cf45403f=1525409964',
            'Host':'www.feixiaohao.com',
            'Upgrade-Insecure-Requests':'1'
        }

        self.headers_2 = {      # EOS/USDT請求頭信息
            'Accept':'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
            'Accept-Encoding':'gzip, deflate, br',
            'User-Agent':'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36',
            'Accept-Language':'zh-CN,zh;q=0.9',
            'Cache-Control':'max-age=0',
            'Connection':'keep-alive',
            'Cookie':'UM_distinctid=1632920ba7831d-08796d23010447-7e5a600d-ff000-1632920ba7928d; Hm_lvt_192e611c7ffa4b2f8a5047e5cf45403f=1525403401; usid=39af3e641c8f2ace; CNZZDATA1263003344=1945603078-1525399934-%7C1525416135; Hm_lpvt_192e611c7ffa4b2f8a5047e5cf45403f=1525419382',
            'Host':'www.feixiaohao.com',
            'Upgrade-Insecure-Requests':'1'
        }

        self.headers_3 = {
            'Accept':'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
            'Accept-Encoding':'gzip, deflate, br',
            'User-Agent':'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36',
            'Accept-Language':'zh-CN,zh;q=0.9',
            'Cache-Control':'max-age=0',
            'Connection':'keep-alive',
            'Cookie':'UM_distinctid=1632920ba7831d-08796d23010447-7e5a600d-ff000-1632920ba7928d; Hm_lvt_192e611c7ffa4b2f8a5047e5cf45403f=1525403401; usid=39af3e641c8f2ace; CNZZDATA1263003344=1945603078-1525399934-%7C1525428845; Hm_lpvt_192e611c7ffa4b2f8a5047e5cf45403f=1525431281',
            'Host':'www.feixiaohao.com',
            'Upgrade-Insecure-Requests':'1'
        }

        self.headers_4 = {
            'Accept':'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
            'Accept-Encoding':'gzip, deflate, br',
            'User-Agent':'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36',
            'Accept-Language':'zh-CN,zh;q=0.9',
            'Cache-Control':'max-age=0',
            'Connection':'keep-alive',
            'Cookie':'UM_distinctid=1632920ba7831d-08796d23010447-7e5a600d-ff000-1632920ba7928d; Hm_lvt_192e611c7ffa4b2f8a5047e5cf45403f=1525403401; usid=39af3e641c8f2ace; CNZZDATA1263003344=1945603078-1525399934-%7C1525428845; Hm_lpvt_192e611c7ffa4b2f8a5047e5cf45403f=1525431460',
            'Host':'www.feixiaohao.com',
            'Upgrade-Insecure-Requests':'1'
        }

        self.headers_6 = {      # WICC/BTC請求頭信息
            'Accept':'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
            'Accept-Encoding':'gzip, deflate, br',
            'User-Agent':'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36',
            'Accept-Language':'zh-CN,zh;q=0.9',
            'Cache-Control':'max-age=0',
            'Connection':'keep-alive',
            'Cookie':'UM_distinctid=1632920ba7831d-08796d23010447-7e5a600d-ff000-1632920ba7928d; usid=39af3e641c8f2ace; CNZZDATA1263003344=1945603078-1525399934-%7C1525754408; Hm_lvt_192e611c7ffa4b2f8a5047e5cf45403f=1525662535,1525662540,1525754228,1525754968; Hm_lpvt_192e611c7ffa4b2f8a5047e5cf45403f=1525754968',
            'Host':'www.feixiaohao.com',
            'Upgrade-Insecure-Requests':'1'
        }

        self.headers_7 = {  # APPC/BTC請求頭信息
            'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
            'Accept-Encoding': 'gzip, deflate, br',
            'User-Agent': 'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36',
            'Accept-Language': 'zh-CN,zh;q=0.9',
            'Cache-Control': 'max-age=0',
            'Connection': 'keep-alive',
            'Cookie': 'UM_distinctid=1632920ba7831d-08796d23010447-7e5a600d-ff000-1632920ba7928d; usid=39af3e641c8f2ace; CNZZDATA1263003344=1945603078-1525399934-%7C1525754408; Hm_lvt_192e611c7ffa4b2f8a5047e5cf45403f=1525662540,1525754228,1525754968,1525754983; Hm_lpvt_192e611c7ffa4b2f8a5047e5cf45403f=1525755161',
            'Host': 'www.feixiaohao.com',
            'Upgrade-Insecure-Requests': '1'
        }

        self.headers_8 = {  # SNT/BTC請求頭信息
            'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
            'Accept-Encoding': 'gzip, deflate, br',
            'User-Agent': 'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36',
            'Accept-Language': 'zh-CN,zh;q=0.9',
            'Cache-Control': 'max-age=0',
            'Connection': 'keep-alive',
            'Cookie': 'UM_distinctid=1632920ba7831d-08796d23010447-7e5a600d-ff000-1632920ba7928d; usid=39af3e641c8f2ace; CNZZDATA1263003344=1945603078-1525399934-%7C1525754408; Hm_lvt_192e611c7ffa4b2f8a5047e5cf45403f=1525662540,1525754228,1525754968,1525754983; Hm_lpvt_192e611c7ffa4b2f8a5047e5cf45403f=1525755543',
            'Host': 'www.feixiaohao.com',
            'Upgrade-Insecure-Requests': '1'
        }

        self.headers_10 = {  # REQ/BTC請求頭信息
            'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
            'Accept-Encoding': 'gzip, deflate, br',
            'User-Agent': 'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36',
            'Accept-Language': 'zh-CN,zh;q=0.9',
            'Cache-Control': 'max-age=0',
            'Connection': 'keep-alive',
            'Cookie': 'UM_distinctid=1632920ba7831d-08796d23010447-7e5a600d-ff000-1632920ba7928d; usid=39af3e641c8f2ace; CNZZDATA1263003344=1945603078-1525399934-%7C1525754408; Hm_lvt_192e611c7ffa4b2f8a5047e5cf45403f=1525662540,1525754228,1525754968,1525754983; Hm_lpvt_192e611c7ffa4b2f8a5047e5cf45403f=1525755820',
            'Host': 'www.feixiaohao.com',
            'Upgrade-Insecure-Requests': '1'
        }

        self.headers_11 = {  # MTN/BTC請求頭信息
            'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
            'Accept-Encoding': 'gzip, deflate, br',
            'User-Agent': 'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36',
            'Accept-Language': 'zh-CN,zh;q=0.9',
            'Cache-Control': 'max-age=0',
            'Connection': 'keep-alive',
            'Cookie': 'UM_distinctid=1632920ba7831d-08796d23010447-7e5a600d-ff000-1632920ba7928d; usid=39af3e641c8f2ace; CNZZDATA1263003344=1945603078-1525399934-%7C1525754408; Hm_lvt_192e611c7ffa4b2f8a5047e5cf45403f=1525662540,1525754228,1525754968,1525754983; Hm_lpvt_192e611c7ffa4b2f8a5047e5cf45403f=1525756173',
            'Host': 'www.feixiaohao.com',
            'Upgrade-Insecure-Requests': '1'
        }

        self.headers_12 = {  # MTN/BTC請求頭信息
            'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
            'Accept-Encoding': 'gzip, deflate, br',
            'User-Agent': 'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36',
            'Accept-Language': 'zh-CN,zh;q=0.9',
            'Cache-Control': 'max-age=0',
            'Connection': 'keep-alive',
            'Cookie': 'UM_distinctid=1632920ba7831d-08796d23010447-7e5a600d-ff000-1632920ba7928d; usid=39af3e641c8f2ace; CNZZDATA1263003344=1945603078-1525399934-%7C1525754408; Hm_lvt_192e611c7ffa4b2f8a5047e5cf45403f=1525662540,1525754228,1525754968,1525754983; Hm_lpvt_192e611c7ffa4b2f8a5047e5cf45403f=1525757054',
            'Host': 'www.feixiaohao.com',
            'Upgrade-Insecure-Requests': '1'
        }

        self.headers_13 = {  # BCH/USDT請求頭信息
            'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
            'Accept-Encoding': 'gzip, deflate, br',
            'User-Agent': 'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36',
            'Accept-Language': 'zh-CN,zh;q=0.9',
            'Cache-Control': 'max-age=0',
            'Connection': 'keep-alive',
            'Cookie': 'UM_distinctid=1632920ba7831d-08796d23010447-7e5a600d-ff000-1632920ba7928d; usid=39af3e641c8f2ace; CNZZDATA1263003344=1945603078-1525399934-%7C1525754408; Hm_lvt_192e611c7ffa4b2f8a5047e5cf45403f=1525662540,1525754228,1525754968,1525754983; Hm_lpvt_192e611c7ffa4b2f8a5047e5cf45403f=1525757637',
            'Host': 'www.feixiaohao.com',
            'Upgrade-Insecure-Requests': '1'
        }


        self.proxy_list = [  # 設置代理
            {'http': '202.117.120.242:8080'},  #
            {'http': '113.200.214.164:9999'},  #
            {'http': '27.46.5.97:9797'},  #
            {'http': '113.200.214.164:9999'},  #
            {'http': '42.157.5.154:9999'},  #
            {'http': '113.118.96.46:9797'},  #
            {'http': '210.26.125.142:8080'},  #
        ]
        self.proxy = random.choice(self.proxy_list)

#ADA/USDT 火幣pro
    def test_messageADA_G(self):     # 獲取想要得到的數據：幣種交易平臺、當前價格、當前時間
        result = requests.post('https://www.feixiaohao.com/currencies/cardano/',headers=self.headers_1)     #發送請求並獲得返回數據
        #print result.content     #打印返回的數據信息
        result_soup = BeautifulSoup(result.text,'lxml')    #使用BeautifulSoup來解析我們獲取到的網頁（‘lxml’是指定的解析器
        adress = result_soup.find('table', class_='table3 tableMaxWidth').find_all(
            'tr')  # 查找該class下的table標籤，然後再找到裏面所有的tr標籤
        del adress[0]  # 去掉第一個不正確的msg標籤信息
        for info in adress:  # 遍歷所有數據的信息
            name = info.find('img')['alt']  # 獲取交易平臺的信息
            price = info.find('td', class_='price')['data-usd']  # 獲取該交易平臺該幣種的金額
            jiaoyidui = info.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-5:-1] == "USDT":  # 當所得到的交易平臺正確時，將數據存入excel中
                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')   # 打開想要更改的excel文件
                new_excel = copy(old_excel)    # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)   # 獲取第一個sheet
                ws.write(1,1,price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break  # 正確存取之後跳出for循環



# EOS/USDT  火幣pro
    def test_messageEOS_G(self):  # 獲取想要得到的數據：幣種交易平臺名稱、當前價格、當前時間
        result = requests.post('https://www.feixiaohao.com/currencies/eos/',
                               headers=self.headers_2)  # 發送請求並獲得返回數據
        # print result.content     #打印返回的數據信息
        result_soup = BeautifulSoup(result.text, 'lxml')  # 使用BeautifulSoup來解析我們獲取到的網頁（‘lxml’是指定的解析器
        adress = result_soup.find('table', class_='table3 tableMaxWidth').find_all(
            'tr')  # 查找該class下的table標籤，然後再找到裏面所有的tr標籤
        del adress[0]     #去掉第一個不正確的msg標籤信息
        for info in adress:     #遍歷所有數據的信息
            name = info.find('img')['alt']     # 獲取交易平臺的信息
            price = info.find('td',class_='price')['data-usd']     # 獲取該交易平臺該幣種的金額
            jiaoyidui = info.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-5:-1] == "USDT":  # 當所得到的交易平臺正確時，將數據存入excel中
                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')   # 打開想要更改的excel文件
                new_excel = copy(old_excel)    # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)   # 獲取第一個sheet
                ws.write(2,1,price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break     # 正確存取之後跳出for循環

# AST/BTC 火幣pro平臺
    def test_messageAST_G(self):  # 獲取想要得到的數據：幣種交易平臺名稱、當前價格、當前時間
        result = requests.post('https://www.feixiaohao.com/currencies/airswap/',
                               headers=self.headers_3)  # 發送請求並獲得返回數據
        # print result.content     #打印返回的數據信息
        result_soup = BeautifulSoup(result.text, 'lxml')  # 使用BeautifulSoup來解析我們獲取到的網頁（‘lxml’是指定的解析器
        adress = result_soup.find('table', class_='table3 tableMaxWidth').find_all(
            'tr')  # 查找該class下的table標籤，然後再找到裏面所有的tr標籤
        del adress[0]  # 去掉第一個不正確的msg標籤信息
        for info in adress:  # 遍歷所有數據的信息
            name = info.find('img')['alt']  # 獲取交易平臺的信息
            price = info.find('td', class_='price')['data-btc']  # 獲取該交易平臺該幣種的金額
            jiaoyidui = info.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-4:-1] == "BTC":  # 當所得到的交易平臺正確時，將數據存入excel中
                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')   # 打開想要更改的excel文件
                new_excel = copy(old_excel)    # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)   # 獲取第一個sheet
                ws.write(3,1,price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break  # 正確存取之後跳出for循環


# BFT/BTC 火幣pro平臺
    def test_messageBFT_G(self):  # 獲取想要得到的數據：幣種交易平臺名稱、當前價格、當前時間
        result = requests.post('https://www.feixiaohao.com/currencies/bnktothefuture/',
                               headers=self.headers_4)  # 發送請求並獲得返回數據
        # print result.content     #打印返回的數據信息
        result_soup = BeautifulSoup(result.text, 'lxml')  # 使用BeautifulSoup來解析我們獲取到的網頁（‘lxml’是指定的解析器
        adress = result_soup.find('table', class_='table3 tableMaxWidth').find_all(
            'tr')  # 查找該class下的table標籤，然後再找到裏面所有的tr標籤
        del adress[0]  # 去掉第一個不正確的msg標籤信息
        for info in adress:  # 遍歷所有數據的信息
            name = info.find('img')['alt']  # 獲取交易平臺的信息
            price = info.find('td', class_='price')['data-btc']  # 獲取該交易平臺該幣種的金額
            jiaoyidui = info.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-4:-1] == "BTC":  # 當所得到的交易平臺正確時，將數據存入excel中
                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')   # 打開想要更改的excel文件
                new_excel = copy(old_excel)    # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)   # 獲取第一個sheet
                ws.write(4,1,price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break  # 正確存取之後跳出for循環


# 寶寶的幣

# WICC/BTC 火幣pro平臺
    def test_messageWICC_B(self):  # 獲取想要得到的數據：幣種交易平臺名稱、當前價格、當前時間
        result = requests.post('https://www.feixiaohao.com/currencies/waykichain/',
                               headers=self.headers_6)  # 發送請求並獲得返回數據
        # print result.content     #打印返回的數據信息
        result_soup = BeautifulSoup(result.text, 'lxml')  # 使用BeautifulSoup來解析我們獲取到的網頁（‘lxml’是指定的解析器
        adress = result_soup.find('table', class_='table3 tableMaxWidth').find_all(
            'tr')  # 查找該class下的table標籤，然後再找到裏面所有的tr標籤
        del adress[0]  # 去掉第一個不正確的msg標籤信息
        for info in adress:  # 遍歷所有數據的信息
            name = info.find('img')['alt']  # 獲取交易平臺的信息
            price = info.find('td', class_='price')['data-btc']  # 獲取該交易平臺該幣種的金額
            jiaoyidui = info.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-4:-1] == "BTC":  # 當所得到的交易平臺正確時，將數據存入excel中
                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')   # 打開想要更改的excel文件
                new_excel = copy(old_excel)    # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)   # 獲取第一個sheet
                ws.write(6,1,price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break  # 正確存取之後跳出for循環

# APPC/BTC 火幣pro平臺
    def test_messageAPPC_B(self):  # 獲取想要得到的數據：幣種交易平臺名稱、當前價格、當前時間
        result = requests.post('https://www.feixiaohao.com/currencies/appcoins/',
                               headers=self.headers_7)  # 發送請求並獲得返回數據
        # print result.content     #打印返回的數據信息
        result_soup = BeautifulSoup(result.text, 'lxml')  # 使用BeautifulSoup來解析我們獲取到的網頁（‘lxml’是指定的解析器
        adress = result_soup.find('table', class_='table3 tableMaxWidth').find_all(
            'tr')  # 查找該class下的table標籤，然後再找到裏面所有的tr標籤
        del adress[0]  # 去掉第一個不正確的msg標籤信息
        for info in adress:  # 遍歷所有數據的信息
            name = info.find('img')['alt']  # 獲取交易平臺的信息
            price = info.find('td', class_='price')['data-btc']  # 獲取該交易平臺該幣種的金額
            jiaoyidui = info.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-4:-1] == "BTC":  # 當所得到的交易平臺正確時，將數據存入excel中
                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')  # 打開想要更改的excel文件
                new_excel = copy(old_excel)  # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)  # 獲取第一個sheet
                ws.write(7, 1, price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break  # 正確存取之後跳出for循環

# SNT/USDT 火幣pro平臺
    def test_messageSNT_B(self):  # 獲取想要得到的數據：幣種交易平臺名稱、當前價格、當前時間
        result = requests.post('https://www.feixiaohao.com/currencies/status/',
                               headers=self.headers_8)  # 發送請求並獲得返回數據
        # print result.content     #打印返回的數據信息
        result_soup = BeautifulSoup(result.text, 'lxml')  # 使用BeautifulSoup來解析我們獲取到的網頁（‘lxml’是指定的解析器
        adress = result_soup.find('table', class_='table3 tableMaxWidth').find_all(
            'tr')  # 查找該class下的table標籤，然後再找到裏面所有的tr標籤
        del adress[0]  # 去掉第一個不正確的msg標籤信息
        for info in adress:  # 遍歷所有數據的信息
            name = info.find('img')['alt']  # 獲取交易平臺的信息
            price = info.find('td', class_='price')['data-usd']  # 獲取該交易平臺該幣種的金額
            jiaoyidui = info.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-5:-1] == "USDT":  # 當所得到的交易平臺正確時，將數據存入excel中
                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')  # 打開想要更改的excel文件
                new_excel = copy(old_excel)  # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)  # 獲取第一個sheet
                ws.write(8, 1, price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break  # 正確存取之後跳出for循環
        #SNT/BTC)
        for info1 in adress:  # 遍歷所有數據的信息
            name = info1.find('img')['alt']  # 獲取交易平臺的信息
            price = info1.find('td', class_='price')['data-btc']  # 獲取該交易平臺該幣種的金額
            jiaoyidui = info1.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-4:-1] == "BTC":  # 當所得到的交易平臺正確時，將數據存入excel中
                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')  # 打開想要更改的excel文件
                new_excel = copy(old_excel)  # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)  # 獲取第一個sheet
                ws.write(9, 1, price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break  # 正確存取之後跳出for循環

# REQ/BTC 火幣pro平臺
    def test_messageREQ_B(self):  # 獲取想要得到的數據：幣種交易平臺名稱、當前價格、當前時間
        result = requests.post('https://www.feixiaohao.com/currencies/request-network/',
                               headers=self.headers_10)  # 發送請求並獲得返回數據
        # print result.content     #打印返回的數據信息
        result_soup = BeautifulSoup(result.text, 'lxml')  # 使用BeautifulSoup來解析我們獲取到的網頁（‘lxml’是指定的解析器
        adress = result_soup.find('table', class_='table3 tableMaxWidth').find_all(
            'tr')  # 查找該class下的table標籤，然後再找到裏面所有的tr標籤
        del adress[0]  # 去掉第一個不正確的msg標籤信息
        for info in adress:  # 遍歷所有數據的信息
            name = info.find('img')['alt']  # 獲取交易平臺的信息
            price = info.find('td', class_='price')['data-btc']  # 獲取該交易平臺該幣種的金額
            jiaoyidui = info.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-4:-1] == "BTC":  # 當所得到的交易平臺正確時，將數據存入excel中
                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')  # 打開想要更改的excel文件
                new_excel = copy(old_excel)  # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)  # 獲取第一個sheet
                ws.write(10, 1, price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break  # 正確存取之後跳出for循環

# MTN/BTC 火幣pro平臺
    def test_messageMTN_B(self):  # 獲取想要得到的數據：幣種交易平臺名稱、當前價格、當前時間
        result = requests.post('https://www.feixiaohao.com/currencies/medical-chain/',
                               headers=self.headers_11)  # 發送請求並獲得返回數據
        # print result.content     #打印返回的數據信息
        result_soup = BeautifulSoup(result.text, 'lxml')  # 使用BeautifulSoup來解析我們獲取到的網頁（‘lxml’是指定的解析器
        adress = result_soup.find('table', class_='table3 tableMaxWidth').find_all(
            'tr')  # 查找該class下的table標籤，然後再找到裏面所有的tr標籤
        del adress[0]  # 去掉第一個不正確的msg標籤信息
        for info in adress:  # 遍歷所有數據的信息
            name = info.find('img')['alt']  # 獲取交易平臺的信息
            price = info.find('td', class_='price')['data-btc']  # 獲取該交易平臺該幣種的金額
            jiaoyidui = info.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-4:-1] == "BTC":  # 當所得到的交易平臺正確時，將數據存入excel中
                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')  # 打開想要更改的excel文件
                new_excel = copy(old_excel)  # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)  # 獲取第一個sheet
                ws.write(11, 1, price)
                ws.write(12, 1, price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break  # 正確存取之後跳出for循環

# BTM/BTC 火幣pro平臺
    def test_messageBTM_B(self):  # 獲取想要得到的數據：幣種交易平臺名稱、當前價格、當前時間
        result = requests.post('https://www.feixiaohao.com/currencies/bytom/',
                               headers=self.headers_12)  # 發送請求並獲得返回數據
        # print result.content     #打印返回的數據信息
        result_soup = BeautifulSoup(result.text, 'lxml')  # 使用BeautifulSoup來解析我們獲取到的網頁（‘lxml’是指定的解析器
        adress = result_soup.find('table', class_='table3 tableMaxWidth').find_all('tr')  # 查找該class下的table標籤，然後再找到裏面所有的tr標籤
        del adress[0]  # 去掉第一個不正確的msg標籤信息
        for info in adress:  # 遍歷所有數據的信息
            name = info.find('img')['alt']  # 獲取交易平臺的信息
            price = info.find('td', class_='price')['data-btc']  # 獲取該交易平臺該幣種的金額
            jiaoyidui = info.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-4:-1] == "BTC":  # 當所得到的交易平臺正確時，將數據存入excel中                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')  # 打開想要更改的excel文件
                new_excel = copy(old_excel)  # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)  # 獲取第一個sheet
                ws.write(13, 1, price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break  # 正確存取之後跳出for循環

# BCH/USDT 火幣pro平臺
    def test_messageBCH_B(self):  # 獲取想要得到的數據：幣種交易平臺名稱、當前價格、當前時間
        result = requests.post('https://www.feixiaohao.com/currencies/bitcoin-cash/',
                               headers=self.headers_13)  # 發送請求並獲得返回數據
        # print result.content     #打印返回的數據信息
        result_soup = BeautifulSoup(result.text, 'lxml')  # 使用BeautifulSoup來解析我們獲取到的網頁（‘lxml’是指定的解析器
        adress = result_soup.find('table', class_='table3 tableMaxWidth').find_all(
            'tr')  # 查找該class下的table標籤，然後再找到裏面所有的tr標籤
        del adress[0]  # 去掉第一個不正確的msg標籤信息
        for info in adress:  # 遍歷所有數據的信息
            name = info.find('img')['alt']  # 獲取交易平臺的信息
            price = info.find('td', class_='price')['data-usd']  # 獲取該交易平臺該幣種的金額
            jiaoyidui = info.find_all('td')[2].get_text()
            if name == "火幣Pro-Huobi" and jiaoyidui[-5:-1] == "USDT":  # 當所得到的交易平臺正確時，將數據存入excel中                # 將數據寫入excel中
                old_excel = xlrd.open_workbook('Original.xls')  # 打開想要更改的excel文件
                new_excel = copy(old_excel)  # 將操作文件對象拷貝，變成可寫的workbook對象
                ws = new_excel.get_sheet(0)  # 獲取第一個sheet
                ws.write(14, 1, price)
                new_excel.save('Original.xls')
                print ""+jiaoyidui+" = "+price+""
                break  # 正確存取之後跳出for循環


if __name__ == "__main__":
    m = Fire()
    m.test_messageADA_G()
    m.test_messageEOS_G()
    m.test_messageAST_G()
    m.test_messageBFT_G()

    m.test_messageWICC_B()
    m.test_messageAPPC_B()
    m.test_messageSNT_B()
    m.test_messageREQ_B()
    m.test_messageMTN_B()
    m.test_messageBTM_B()
    m.test_messageBCH_B()
    ```
發表評論
所有評論
還沒有人評論，想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章

pyppeteer初次運行需要下載Chrome無法下載或者下載慢的解決方案

目前網上最多的其實都是自己手動下載，這裏說一下最簡單的、最方便的解決方案。 這裏進行替換就好了，這裏是不需要修改源碼的。 只要在我們引用之前設置下環境變量就好了。 import os DEFAULT_DOWNLOAD_HOST

成小新 2020-07-08 05:42:09

爬蟲入門--糗百

文章目錄1.爬蟲基本概念2.Requests 庫基本介紹3.Beautiful Soup 庫介紹 本文目標： 掌握爬蟲的基本概念 Requests 及 Beautiful Soup 兩個 Python 庫的基本使用 通過以上知識完

shelley__huang 2020-07-08 05:17:04

爬蟲知識梳理

爬蟲知識簡單梳理 文章目錄爬蟲知識簡單梳理1.分類2.模擬瀏覽器請求數據（常用）3.數據提取XML和HTML區別a. 正則（re模塊）b. Beautiful Soup4模塊[API鏈接](http://beautifulsoup

AggressionStorm 2020-07-08 04:15:54

爬取高清站長之家美圖（想爬多少爬多少）

方方面面總是會需要使用一些圖片做封面或背景。圖片有兩種來源：一是通過創可貼自己動手修改下就可以用了，還一種就是在網上下載圖片。 那如何下載高清並且可以供使用的圖片了？我是使用的站長之家網站下載來的圖片（http://sc.chin

iplaypy(蟒蛇师) 2020-07-08 10:43:01

爬蟲-獲取指定城市所有企業信息

之前寫過一個博客：python爬蟲從企查查獲取企業信息-手工繞開企查查的登錄驗證 https://blog.csdn.net/rock4you/article/details/88254612 但只能獲取指定公司的信息，這篇博客的目的是獲

rock4you 2020-07-08 08:24:13

學習爬蟲基礎6-HTTP響應狀態碼參考：

HTTP響應狀態碼參考： 1xx:信息 100 Continue 服務器僅接收到部分請求，但是一旦服務器並沒有拒絕該請求，客戶端應該繼續發送其餘的請求。 101 Switching Protocols 服務器轉換協議：服務器

疯狂打码中 2020-07-08 07:56:24

【Python成長之路】Boss直聘爬蟲第2彈：selenium找不到元素的常見問題

哈嘍大家好，我是鵬哥。   今天繼續上週的主題是 —— boss直聘網站的爬蟲。   ~~~上課鈴~~~   盜墓筆記·十年人間李常超（Lao乾媽） - 盜墓筆記·十年人間 1 寫在前面 上一篇文章講的如何破解boss直聘網站的滑塊

鹏哥贼优秀 2020-07-08 06:35:40

【Python成長之路】破解Boss直聘網站滑塊驗證

  哈嘍大家好，我是鵬哥。   今天要記錄的內容是 —— 破解Boss直聘網站的滑塊驗證。     …… 上 課 鈴…… TuesdayBurak Yeter;Danelle Sandoval - Tuesday 1 寫在前面 最近

鹏哥贼优秀 2020-07-08 06:35:38

4.8實驗記錄（爬取so問答）

只爬取指定的類的div from bs4 import BeautifulSoup soup=BeautifulSoup(h,'html.parser') a=soup.find_all('div',class_="post-te

Rbdash 2020-07-08 06:12:59

爬蟲MOOC 第二週 入門

首先下載Beautiful Soup 4，然後解壓安裝，記得安裝代碼是 python setup.py install 這裏要說明一點！！！很重要，我吃了一個多小時的虧。 我把文件命名爲 bs4.py 這時候如果要from bs4 im

Dr_David_S 2020-07-08 03:09:02

Wireshark抓包工具介紹

      在編寫爬蟲抓取app數據的時候，往往需要通過抓包工具對app進行抓包分析，例如：Fiddler、Charles等，但是在偶爾的情況下，你會發現通過這些工具抓包抓取失敗，一啓用抓包工具，就會顯示網絡錯誤。爲什麼會這樣了？ 我個人

刘延林 | 梦陆 2020-07-08 02:38:37

Python根據地名獲取經緯度

以下是通過訪問高德地圖接口獲取指定地名的經緯度信息代碼： import requests import re import json '''獲取地址座標''' def get_get_location_m(name): url

刘延林 | 梦陆 2020-07-08 02:38:27

【python】解決網頁gb2312編碼中文亂碼問題

在寫爬蟲的時候，有時候會遇到非utf-8的網頁，可能會造成中文亂碼問題，比如說遇到的是gb2312的編碼。直接打印中文就會變成亂碼 1.查看網頁編碼 document.characterSet 2.正確解碼 網頁使用的是gb23

冰冷的希望 2020-07-08 01:22:12

Scrapy 架構分析(一)

Scrapy（/ˈskreɪpi/) 是一個Python編寫的開源網絡爬蟲框架。它是一個被設計用於爬取網絡數據、提取結構性數據的程序框架。 使用Scrapy框架可以很方便地爬取網站。 一、Scrapy入門 菜鳥教程Scrapy入門

Tawn0000 2020-07-08 00:37:36

菜鳥爬蟲——獲取安居客二手房信息

以安居客二手房爲例前言瞭解爬蟲爬蟲目錄結構爬蟲主體代碼items.py反反爬蟲策略運行爬蟲 前言 因爲需要一些二手房數據，菜鳥開啓了爬蟲之路！不過需要注意的是，在爬取數據時，要遵守《中華人民共和國網絡安全法》以及《規範互聯網信息服

温柔小静 2020-07-08 00:33:51