关键词：
使用XPath
XPath，全称XML Path Language，即XML路径语言，它是在XML语言中查找信息的语言。它最初是用来搜寻XML文档的，但是它同样适用于HTML文档的搜索。
在上一篇文章中讲述了正则表达式的使用方法，正则表达式的难度还是比较大的，如果不花足够多的时间去做的话还是比较难的，所以今天就来分享比正则简单的内容，方便大家接下来的学习。
XPath常用规则
XPath的规则是非常丰富的，本篇文章无法一次性全部概括，只能为大家介绍几个常用的规则。
| 表达式 | 描述 |
|---|---|
| nodename | 选取此节点的所有子节点 |
| / | 从当前节点选取直接子节点 |
| // | 从当前节点选取子孙节点 |
| . | 选取当前子节点 |
| .. | 选取当前节点的父节点 |
| @ | 选取属性 |
准备工作
在使用之前得先安装好lxml这个库，如果没有安装请参考下面的安装方式。
pip install lxml
案例导入
现在通过实例来xpath对网页解析的过程
from lxml import etree
text = \'\'\'
<div>
<ul>
<li class="item-0"><a href="link1.htpython爬虫应用实战案例-pyquery在爬虫中的应用，爬取猫眼电影数据(代码片段)
什么是pyquerypyquery是类似于jquery的网页解析工具，让你使用jquery的风格来遍历xml文档，它使用lxml操作html的xml文档，它的语法与jquery很像，和我们之前所讲的解析库xpath与BeautifulSoup比起来更加灵活与简便，并且增加了添加类和移... 查看详情
关于爬虫解析数据的4种方式(代码片段)
...utifulSoup的使用3、使用BeautifulSoup爬取淘宝网首页三、正则表达式1、正则表达式2、正则语法3、特殊序列4、正则处理函数5、课堂案例（下载糗事百科小视频）6、课外案例四、pyquery解析数据1、pyquery2、pyquery的初始化方式3... 查看详情
python爬虫解析神器-正则表达式如何正确运用？案例详解
先详细的整理一下Python中的正则表达式的相关内容。正则表达式在Python爬虫中的作用就像是老师点名时用的花名册一样，是必不可少的神兵利器。一、正则表达式基础1.1.概念介绍正则表达式是用于处理字符串的强大工具，它并... 查看详情
如何入门爬虫（基础篇）
...处理Python爬虫入门六之Cookie的使用Python爬虫入门七之正则表达式二、爬虫实战Python爬虫实战一之爬取糗事百科段子Python爬虫实战二之爬取百度贴吧帖子Python爬虫实战三之实现山东大学无线网络掉线自动重连Python爬虫实战四之抓取... 查看详情
python爬虫应用实战-爬取股票数据做分析
...python字符串：分割、拼接、中文字符判断；2、python正则表达式；3、爬虫requests请求库、xpath获取数据、代理服务器；4、selenium用法：无头浏览器、元素定位、显式等待、数据获取；5、python操作mongodb02网站分析代码和数据我们到... 查看详情
python应用实战案例：python如何实现异步爬虫？
...理解高级教程（附源码）tableau可视化数据分析高级教程python快速学习实战应用系列课程爬虫程序的链条整理需求分析目标发出网络请求文本解析数据入库数据出库 查看详情
python应用实战案例：python如何实现异步爬虫？
...理解高级教程（附源码）tableau可视化数据分析高级教程python快速 查看详情
python爬虫实战之xpath解析(代码片段)
...MLParser())#./test.html为本地的html文件的路径html.xpath('xpath表达式')2、将从互联网上获取的源码数据加载到etree对象中etree.HtML('page_data')#page_data为从页面获取的源码数据示例：fromlxmlimporte 查看详情
〖python网络爬虫实战⑨〗-正则表达式基本原理(代码片段)
...在里面。我们怎么样才可以获取我们想要的数据呢。正则表达式就是其中一个有效的办法。本文，我们就来了解一下正则表达式的用法。⭐️正则表达式 大家好，大家都听过正则表达式 查看详情
python爬虫编程思想（36）：项目实战-抓取斗破小说网的目录和全文
...3个Python网络库（urllib、urllib3和requests），以及通过正则表达式过滤字符串。现在该来点实战了。本节以及后面2节会给出3个案例，分别使用urllib、urllib3以及requests，并通过正则表达式抓取Web数据，这些数据或者显示在Console中， 查看详情
python爬虫应用实战案例-jsonpath在爬虫中的应用，爬取照片信息(代码片段)
关于JSONJSON是一个标记符序列。这套标记符包括：构造字符、字符串、数字和三个字面值。构造字符JSON包括六个构造字符，分别是：左方括号、右方括号、左大括号、右大括号、冒号与逗号。JSON值JSON值可以是对象、数组、数字... 查看详情
5.网络爬虫——xpath解析(代码片段)
网络爬虫——Xpath解析Xpath简介Xpath解析节点选择路径表达式谓语未知节点Xpath实战演示豆果美食实战获取数据源代码前言：📝📝此专栏文章是专门针对Python零基础爬虫，欢迎免费订阅！📝📝第... 查看详情
python爬虫编程思想（87）：项目实战--抓取豆瓣电影排行榜
...瓣电影Top250排行榜页面的代码，然后使用lxml、XPath和正则表达式对HTML代码进行解析，最后将抓取到的信息保存到SQLite数据库中。豆瓣电影Top250排行榜页面的URL如下。https://movie.douban.com/top250页面效果如图1所示。 豆瓣电影Top250... 查看详情
python爬虫编程思想（87）：项目实战--抓取豆瓣电影排行榜
...瓣电影Top250排行榜页面的代码，然后使用lxml、XPath和正则表达式对HTML代码进行解析，最后将抓取到的信息保存到SQLite数据库中。豆瓣电影Top250排行榜页面的URL如下。https://movie.douban.com/top250页面效果如图1所示。 豆瓣电影Top250... 查看详情
爬虫必备安装和使用xpath正则表达式插件以及f12的抓包流程(代码片段)
...的下载使用目录1.安装Xpath插件2.使用Xpath插件3.安装正则表达式插件4.使用正则表达式插件5.F12抓包，CSDN评论为例子5.1Header5.2Preview6.F12抓包，B站评论为例子1.安装Xpath插件打开谷歌浏览器这里&# 查看详情
python爬虫编程思想（42）：xpath实战：匹配属性
目录1.属性匹配与获取2.多属性匹配1.属性匹配与获取 在前面的例子中只是根据节点名称进行匹配，其实XPath的匹配功能远不止如此，比较常用的匹配就是根据属性值来选取节点。引用属性值需... 查看详情
python爬虫编程思想（41）：xpath实战：选取dom节点
目录1选取所有节点2.选取子节点3.选取父节点1选取所有节点 以2个斜杠（//）开头的XPath规则会选取所有符合要求的节点。如果使用\'//*\'，那么会选取整个HTML文档中所有的节点 查看详情
python爬虫编程思想（44）：xpath实战：节点轴选择(代码片段)
XPath提供了很多节点轴选择方法，包括获取祖先节点、兄弟节点、子孙节点等。本节将介绍XPath中一些常用的节点轴。下面的例子使用XPath和索引得到特定的<a>节点，并输出<a>节点的文... 查看详情