怎么用网站转换Python爬虫的header

发布时间:2020-11-24 09:35:24 作者:小新
来源:亿速云 阅读:227

小编给大家分享一下怎么用网站转换Python爬虫的header,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!

1、Chrome 打开开发者选项( f12 )---> network 选项卡 ---> 刷新页面,获取请求 ---> 找到页面信息对应的请求 (通过请求的名称、后缀和 response 内容来判断)

怎么用网站转换Python爬虫的header

2、右键,copy ---> copy as cURL (bash),注意不是【copy as cURL (cmd)】

怎么用网站转换Python爬虫的header

3、打开网站,https://curl.trillworks.com/,粘贴 cURL (bash) 到左边 curl command,右边会自动出 Python 代码

怎么用网站转换Python爬虫的header

4、生成代码如下图

怎么用网站转换Python爬虫的header

5、print ( response.text ) 就可以直接打印网页源代码啦!

以上是“怎么用网站转换Python爬虫的header”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注亿速云行业资讯频道!

推荐阅读:
  1. HTML中header有什么用
  2. html5中header标签怎么用

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

python python爬虫 header

上一篇:python爬虫多线程加速爬取的方法

下一篇:使用python中beautifulsoup库的示例

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》