爬蟲學習之01-request模塊爬取豆瓣電影

"""
    獲取豆ban電影中的電影:https://movie.****.com/
    代碼僅供學習
    date:2020-05-23
"""


import requests

if __name__ == '__main__':
    start = input('輸入數字(從第幾部電影開始取,0開始):')
    limit = input('輸入數字(一次獲取幾部電影):')

    # 1.指定URL
    url = 'https://movie.****.com/j/chart/top_list'

    # 2.UA僞裝
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3947.100 Safari/537.36'
    }

    # 3.參數
    params = {
        'type': '24',   # 喜劇
        'interval_id': '100:90',   # 好於100%-90%的電影
        'action': '',
        'start': start,  # 從電影的第幾部開始取
        'limit': limit  # 一次取幾部電影
    }


    # 4.發起get請求
    resp = requests.get(url=url, headers=headers, params=params)

    # 5.獲取數據
    page_dic = resp.json()

    for i in page_dic:
        print(i)