介绍
Python etree是Python语言中的一个快速解析XML和HTML的利器。它底层使用libxml2和libxslt进行解析和转换的，因此速度非常快。而且Python etree提供了非常简单易用的API，使得开发者可以轻松地解析XML和HTML文档，获取其中的数据。本文将对Python etree进行全方位的介绍。
背景
在Web开发中，我们常常需要从HTML或XML文档中提取数据。例如，我们需要从HTML页面中获取某个网站的所有链接列表，或者需要从XML文档中读取数据并将其存储到数据库中。实现这些需求的一个常见做法是使用Python etree。
获取XML和HTML文档
在使用Python etree之前，我们需要先获取XML或HTML文档。获取文档的方法可以有多种，例如从一个URL中下载文档，或者从一个文件中读取文档。以下是一个从URL中下载XML文档的示例代码：
import requests
# 下载XML文件
r = requests.get('http://example.com/sample.xml')
xml_content = r.content
以下是一个从本地文件中读取HTML文档的示例代码：
# 读取HTML文件
with open('example.html', 'rb') as f:
html_content = f.read()
解析XML和HTML文档
使用Python etree解析XML和HTML文档非常简单，只需要调用etree模块中的parse()函数即可：
from lxml import etree # 解析XML文档 xml_tree = etree.parse(xml_content) # 解析HTML文档 html_tree = etree.HTML(html_content)
上述代码中，我们使用etree.parse()函数解析了XML和HTML文档。该函数返回一个树形结构的对象，我们可以通过该对象来查找、遍历和修改文档中的元素。
遍历XML和HTML元素
在Python etree中，遍历XML和HTML元素是非常简单的。我们可以使用findall()函数查找与某个XPath表达式匹配的所有元素，并使用iter()函数遍历所有元素。以下是一个遍历XML元素的示例代码：
# 获取文档的根元素 root = xml_tree.getroot() # 查找所有元素 for book in root.findall('.//book'): # 输出 元素的属性和子元素 print(book.attrib) for child in book: print(child.tag, child.text)
以下是一个遍历HTML元素的示例代码：
# 获取文档的根元素 root = html_tree.getroot() # 遍历所有元素 for a in root.iter('a'): # 输出元素的href属性和文本内容 print(a.attrib.get('href'), a.text)
XPath表达式
在Python etree中，XPath表达式是非常重要的概念，因为我们使用XPath表达式来查找和选取元素。XPath表达式可以表示某个元素的路径、属性和文本等。以下是几个XPath表达式的示例：
- //book 表示查找所有
元素。 - /bookstore/book 表示查找根元素
下的所有 元素。 - //book[@genre='fantasy'] 表示查找genre属性为fantasy的所有
元素。 - //book[@price>35] 表示查找price属性大于35的所有
元素。 - //book[author='Neal Stephenson']/title 表示查找author为Neal Stephenson的
元素的title子元素。
获取元素的属性和文本
在Python etree中，我们可以使用element.attrib获取元素的所有属性，并使用element.text获取元素的文本内容。以下是一个获取元素属性和文本的示例代码：
# 获取元素的title属性和文本内容 title_element = book.find('title') title_attrib = title_element.attrib.get('lang') title_text = title_element.text
修改元素的属性和文本
在Python etree中，我们可以使用element.set()函数来改变元素的某个属性的值，并使用element.text属性来改变元素的文本内容。以下是一个修改元素属性和文本的示例代码：
# 修改元素的title属性和文本内容 title_element.set('lang', 'en') title_element.text = 'Snow Crash'
序列化XML和HTML文档
在Python etree中，我们可以使用etree.tostring()函数将XML或HTML文档序列化为字符串，并使用etree.ElementTree()函数将字符串反序列化为树形结构的对象。以下是一个序列化XML和HTML文档的示例代码：
# 将XML树形结构序列化为字符串 xml_string = etree.tostring(xml_tree, encoding='utf-8', xml_declaration=True) # 将HTML树形结构序列化为字符串 html_string = etree.tostring(html_tree, encoding='utf-8', method='html')
以下是一个将序列化的字符串反序列化为树形结构的示例代码：
# 将XML字符串反序列化为树形结构 xml_tree = etree.ElementTree(etree.fromstring(xml_string)) # 将HTML字符串反序列化为树形结构 html_tree = etree.ElementTree(etree.fromstring(html_string))
总结
Python etree是Python语言中的一个快速解析XML和HTML的利器。Python etree提供了非常简单易用的API，使得开发者可以轻松地解析XML和HTML文档，获取其中的数据。在本文中，我们介绍了Python etree的基本用法，包括获取XML和HTML文档、解析XML和HTML文档、遍历XML和HTML元素、XPath表达式、获取元素的属性和文本、修改元素的属性和文本、序列化XML和HTML文档等。希望本文对您学习Python etree有所帮助。
