Python爬蟲後獲取重定向url的兩種方法

方法(一)

    # 獲得重定向url
    from urllib import request
    # https://zhidao.baidu.com/question/681501874175782812.html
    url = "https://www.baidu.com/link?url=IscBx0u8h9q4Uq3ihTs_PqnoNWe7slVWAd2dowQKrnqJedvthb3zrh9JqcMJu3ZqFrbW_DKVuTnTypDbMkZx_hwCQIGFPRVWGyxRXA-65jK&wd=&eqid=f7aeecba00092ed7000000065ec62596"
    print(request.urlopen(url).geturl())

方法(二)

    # 請求頭,這裏我設置了瀏覽器代理
    headers = headers = {'User-Agent': 'xx'}
    # 這裏chrome的user-agent獲取方式:在瀏覽器地址欄輸入 about://version 即可得到結果
    url = "https://www.baidu.com/link?url=IscBx0u8h9q4Uq3ihTs_PqnoNWe7slVWAd2dowQKrnqJedvthb3zrh9JqcMJu3ZqFrbW_DKVuTnTypDbMkZx_hwCQIGFPRVWGyxRXA-65jK&wd=&eqid=f7aeecba00092ed7000000065ec62596"
    # 請求網頁
    response = requests.get(url, headers=headers)
    # print(response.status_code)  # 打印響應的狀態碼
    print(response.url)  # 打印重定向後的網址

# 兩個結果都是:https://zhidao.baidu.com/question/681501874175782812.html



  

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章