php如何實現爬取數據原理

QueryList使用jQuery選擇器來做採集,讓你告別複雜的正則表達式;QueryList具有jQuery一樣的DOM操作能力、Http網絡操作能力、亂碼解決能力、內容過濾能力以及可擴展能力;可以輕鬆實現諸如:模擬登陸、僞造瀏覽器、HTTP代理等意複雜的網絡請求;擁有豐富的插件,支持多線程採集以及使用PhantomJS採集JavaScript動態渲染的頁面。

安裝

通過Composer安裝:
composer require jaeger/querylist

使用教程:

直接上代碼:

<?php
include './vendor/autoload.php';
// 使用composer安裝後引入目錄
use QL\QueryList;
// 使用插件
  
$html = file_get_contents('https://www.biqudu.com/14_14778/');
// 手動獲取頁面
$data = QueryList::html($html);
// 得到頁面內容
$data = QueryList::setHtml('https://www.biqudu.com/14_14778/');
// 等同於上面的html()
$data->rules([
  // 採集所有a標籤的href屬性
  'link' => ['a','href'],
  // 採集所有a標籤的文本內容
  'text' => ['a','text']
  ]);
// 此處$data = 上面已經獲取到網頁內容之後的對象
// 設置採集規則 替代了傳統正則
$data->query();
// 此處$data = 上面已經獲取到網頁內容之後的對象 
// query 執行操作
$data->getData();
// 此處$data = 上面已經獲取到網頁內容之後的對象
// 得到數據結果
$data->all();
// 此處$data = 上面已經獲取到網頁內容之後的對象
// 將數據轉換成二維數組
print_r($data->all());
// 打印結果
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章