C#爬蟲應用

1.抓取接口數據,這個比較簡單,HttpWebRequest模擬get,post請求。


2.當沒有現成的接口,只能抓取網頁上數據的時候,方案2就可以用了。原理:get請求獲取html源碼,然後利用開源的AngleSharp來解析html。父選擇器:直接填jquery的css選擇器。子選擇器:列名+選擇器,如果多個用;分割。


3.文件下載,目前支持:迅雷、快車、qq旋風,暫不支持ftp下載。

Demo下載:http://download.csdn.net/download/qq237183141/10232190


發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章