Python3爬虫教程:PyQuery详解!

Python3爬虫教程:PyQuery详解!

PyQuery 简介

PyQuery 用于对 XML 文档进行操作,比如:查询 XML 文档中的某个元素,获取某个元素的属性等。它的 API 和前端著名框架 jQuery 相似,名字的由来也是基于此。(官方介绍:pyquery: a jquery-like library for python)

安装

<pre >$ pip3 install pyquery

</pre>

加载 XML 文档

pyquery 提供了三种 XML 加载方式:

从字符串中加载;
从 url 加载;
从文件加载;
这里,我们一般使用 Requests 获取网络资源数据,接着,使用 pyquery 从字符串中加载数据。

这样做的理由是,Requests 作为一个专门的网络库,有较强的定制能力。

简单看下示例代码:

Python3爬虫教程:PyQuery详解!

查询元素
Python3爬虫教程:PyQuery详解!

查询元素的核心点是 CSS 选择器(CSS Selector),大家可以通过搜索引擎查找相关资料。

Tip

PyQuery 支持手动选择解析器(parser),如下:

<pre >pq('<html><body><p>toto</p></body></html>', parser='xml')

</pre>

parse 的取值是:

xml
html
html5
soup
html_fragments
默认使用的是 lxml 的 xml 解析器,一般不需要手动选择。这里只是作为一个小知识点提及。

结语

最后,如果你跟我一样都喜欢python,想成为一名优秀的程序员,也在学习python的道路上奔跑,欢迎你加入python qun:839383765 每天都会分享最新业内资料,分享python免费课程,共同交流学习,让学习变(编)成(程)一种习惯!

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章