python爬取食藥監局企業信息

import requests
import json

if __name__ == '__main__':
    headers = {
        'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.122 Safari/537.36'
    }
    url = 'http://125.35.6.84:81/xk/itownet/portalAction.do?method=getXkzsList'

    id_list = []  # 存儲頁面的所有企業id
    info_list = []  # 存儲所有企業的詳細信息對象
    for page in range(1,137):
        page=str(page)
        param ={
            'on': 'true',
            'page': page,
            'pageSize': '15',
            'productName':'',
            'conditionType': '1',
             'applyname':'',
             'applysn':''
        }
        data_obj = requests.post(url=url,data=param,headers=headers).json()
        #提取json中的指定部分內容,此處爲id
        for obj in data_obj['list']:
            id_list.append(obj['ID'])

    url = 'http://125.35.6.84:81/xk/itownet/portalAction.do?method=getXkzsById'
    for id in id_list:
        param={
                'id':id
        }
        cur_obj = requests.post(url=url, data=param, headers=headers).json()
        print('公司名稱:' + cur_obj["epsName"] + ' 法人: ' + cur_obj["legalPerson"] + "地址:" + cur_obj["epsAddress"])
        info_list.append(cur_obj)


  #  fp = open("食藥監局所有企業的詳細信息.json",'w',encoding='utf-8')
   # json.dump(info_list,fp=fp,ensure_ascii=False)

    print("爬取完成!")

 

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章