栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Python

如何用网站转换Python爬虫的header?

Python 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

如何用网站转换Python爬虫的header?

最早我们切土豆丝还是慢慢的一点点切出来,后来有的人觉得太麻烦了,干脆发明一个工具直接把土豆放在上面擦一下就能变成丝。那么,我们除了之前常用的方法,有没有快速便捷的操作,让Python爬虫的header中的访问网页请求变得更加容易呢?这里小编带来两个方法,本篇先给大家介绍一个。


1、Chrome 打开开发者选项( f12 )---> network 选项卡 ---> 刷新页面,获取请求 ---> 找到页面信息对应的请求 (通过请求的名称、后缀和 response 内容来判断)

 

2、右键,copy ---> copy as cURL (bash),注意不是【copy as cURL (cmd)】

 

3、打开网站,https://curl.trillworks.com/,粘贴 cURL (bash) 到左边 curl command,右边会自动出 Python 代码

 

 

4、生成代码如下图

 

5、print ( response.text ) 就可以直接打印网页源代码啦!

看了今天的网站转换Python爬虫的header,不知道小伙伴们学会了吗?接下来还有postman的方法,大家感兴趣的话可以继续看看下一篇~更多Python学习推荐:PyThon学习网教学中心。


转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/11795.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号