xpath怎么爬取网页全部内容

要使用XPath来爬取网页的全部内容，你需要先使用Python中的requests库来发送HTTP请求获取网页的源代码，然后使用lxml库来解析网页源代码，并使用XPath表达式来提取所需的内容。

以下是一个使用XPath爬取网页全部内容的示例代码：

import requests
from lxml import etree

# 发送HTTP请求获取网页源代码
url = 'http://example.com'
response = requests.get(url)
html = response.text

# 解析网页源代码
tree = etree.HTML(html)

# 使用XPath表达式提取网页全部内容
content = tree.xpath('//*')  # 通过"*"匹配网页的全部标签

# 打印提取的内容
for tag in content:
    print(etree.tostring(tag, encoding='utf-8').decode('utf-8'))

运行上述代码，你将能够获取网页的全部内容并逐行打印。请注意，这个示例只打印了网页中的标签内容，并没有提取标签属性等其他信息。根据网页的具体结构，你可能需要根据自己的需求编写更复杂的XPath表达式来提取所需的内容。