0

0

Python lxml xpath用法 使用lxml库进行高效XPath查询

幻夢星雲

幻夢星雲

发布时间:2026-02-19 04:41:14

|

418人浏览过

|

来源于php中文网

原创

lxml xpath 返回空列表的常见原因包括:命名空间未声明或未正确传入namespaces参数;误用etree.xml()解析html文档;源数据含bom或编码不匹配;xpath大小写敏感;text()与string()语义混淆;属性查询遗漏@符号;全局//搜索性能低且易出错。

python lxml xpath用法 使用lxml库进行高效xpath查询

lxml XPath 查询返回空列表,常见原因有哪些

查不到节点不是 XPath 写错了就完事,lxml 对文档结构、命名空间、编码和解析模式非常敏感。

  • XML 带命名空间但没声明或没用 namespaces 参数——tree.xpath('//item') 在带 xmlns="http://example.com" 的文档里必然为空
  • HTML 文档用 etree.XML() 解析(应改用 etree.HTML())——XML 解析器遇到 <br> 或自闭合标签直接报错或跳过整段
  • 源数据含 BOM 或编码不匹配(如 UTF-8 with BOM 被当 ASCII 读),导致根节点解析失败,后续所有 xpath() 都返回空
  • XPath 表达式本身对大小写敏感://DIV 不会匹配 <div>,HTML 场景建议统一用小写 <h3>namespaces 参数怎么传才真正生效</h3> <p>命名空间不是加个字典就行,必须和 XPath 字符串里的前缀严格对应,且前缀名可自定义,但 URI 必须一字不差。</p> <ul> <li>先从文档中提取命名空间:用 <code>tree.nsmap 查看实际注册的映射,注意 None 键代表默认命名空间
  • 给默认命名空间起别名(比如 'd'),然后在 XPath 中显式使用:tree.xpath('//d:book', namespaces={'d': 'http://purl.org/dc/elements/1.1/'})
  • 如果不想改 XPath,也可用 local-name() 绕过前缀:tree.xpath("//*[local-name()='book']"),但性能略低,且无法区分同名不同 ns 的元素

text() 和 string() 在 lxml 中行为差异明显

text() 是 XPath 轴,只取直接子文本节点;string() 是函数,返回节点及其后代所有文本拼接结果——二者不能混用,且返回类型不同。

考拉新媒体导航
考拉新媒体导航

考拉新媒体导航——新媒体人的专属门户网站

下载
  • tree.xpath('//p/text()') 返回 ['Hello', 'World'](列表,每个是字符串)
  • tree.xpath('string(//p)') 返回 'HelloWorld'(单个字符串,无换行/空格保留)
  • 想取带格式的全部文本(含子标签间的空白)?用 .xpath('normalize-space(//p)') 更稳妥
  • 若目标是获取某个属性值,别漏掉 @//img/@src,写成 //img/src 会返回空

大规模 XML 解析时,XPath 性能卡在哪

瓶颈往往不在 XPath 引擎本身,而在树构建和重复查询方式上。

立即学习Python免费学习笔记(深入)”;

  • 避免对同一节点反复调用 xpath():先用 tree.xpath('//section') 获取节点列表,再对每个 section 调用 .xpath('.//title')(注意开头的 .
  • 不用 // 开头的全局搜索查深层固定路径:比如已知结构是 /root/data/item/title,就写 /root/data/item/title,比 //title 快一个数量级
  • 大文件慎用 etree.parse() 全加载;改用 etree.iterparse() 边解析边处理,配合 clear() 释放内存
  • 纯文本提取场景,有时正则比 XPath 更快——但前提是结构稳定、不嵌套、无 CDATA 干扰

命名空间处理和 text() / string() 的语义差异,是线上排查最耗时间的两个点,尤其当别人提供的 XML 格式不规范时。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

770

2023.08.02

pdf怎么转换成xml格式
pdf怎么转换成xml格式

将 pdf 转换为 xml 的方法:1. 使用在线转换器;2. 使用桌面软件(如 adobe acrobat、itext);3. 使用命令行工具(如 pdftoxml)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1929

2024.04.01

xml怎么变成word
xml怎么变成word

步骤:1. 导入 xml 文件;2. 选择 xml 结构;3. 映射 xml 元素到 word 元素;4. 生成 word 文档。提示:确保 xml 文件结构良好,并预览 word 文档以验证转换是否成功。想了解更多xml的相关内容,可以阅读本专题下面的文章。

2104

2024.08.01

xml是什么格式的文件
xml是什么格式的文件

xml是一种纯文本格式的文件。xml指的是可扩展标记语言,标准通用标记语言的子集,是一种用于标记电子文件使其具有结构性的标记语言。想了解更多相关的内容,可阅读本专题下面的相关文章。

1129

2024.11.28

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

573

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

216

2023.09.04

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

1553

2023.10.24

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

640

2023.11.24

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

561

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.4万人学习

Django 教程
Django 教程

共28课时 | 4.4万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.6万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号