python3爬虫中BeautifulSoup怎么用

发布时间:2021-09-08 11:51:54 作者:小新
来源:亿速云 阅读:211

小编给大家分享一下python3爬虫中BeautifulSoup怎么用,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!

有些朋友觉得利用正则表达式提取信息太麻烦了。

有一个高效的网页解析库,它的名字叫做BeautifulSoup

它支持多种格式的解析,我们用的比较多的是lxml解析器

实例学习

html_doc = """
<html><head><title>学习python的正确姿势</title></head>
<body>
<p class="title"><b>小帅b的故事</b></p>
<p class="story">有一天,小帅b想给大家讲两个笑话
<a href="http://example.com/1" class="sister" id="link1">一个笑话长</a>,
<a href="http://example.com/2" class="sister" id="link2">一个笑话短</a> ,
他问大家,想听长的还是短的?</p>

<p class="story">...</p>
导入库,将 html 的源代码传给 BeautifulSoup
from bs4 import BeautifulSoup
soup=BeautifulSoup(html_doc,"lxml")
打印title标签内容
print(soup.title.string)
打印p标签内容,只打印了第一个

print(soup.p.string)
打印title标签的父亲标签

print(soup.title.parent.name)
打印a标签,只打印了第一个

print(soup.a)
使用soup.find方法
打印id为link2的标签

print(soup.find(id="link2"))
getText获取全部内容

print(soup.getText)
select法
除了find方法之外如果你对css比较熟悉也可以使用 select 方法

打印title标签

print(soup.select("title"))#
打印body标签

print(soup.select("body a"))
打印p标签中,id为link1的那一个
print(soup.select("p #link1"))

以上是“python3爬虫中BeautifulSoup怎么用”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注亿速云行业资讯频道!

推荐阅读:
  1. Python3网络爬虫实战-29、解析库的使用:BeautifulSoup
  2. 爬虫基础篇-BeautifulSoup解析

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

python3 beautifulsoup

上一篇:原生js如何自定义右键菜单

下一篇:python线程通信Condition的实例用法介绍

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》