- 干什么:批量采集互联网中的各种数据,评论,自动点赞
- 原理:模拟浏览器向服务器发送请求(在网页端的每一次操作都可能是一次请求
- 第一步:确定浏览器
- 爬虫用到的浏览器:谷歌
下载链接:https://dl.google.com/tag/s/appguid%3D%7B8A69D345-D564-463C-AFF1-A69D9E530F96%7D%26iid%3D%7B5C8EDF7C-9404-A3AC-8E06-00E084CE8032%7D%26lang%3Dzh-CN%26browser%3D4%26usagestats%3D1%26appname%3DGoogle%2520Chrome%26needsadmin%3Dprefers%26ap%3Dx64-stable-statsdef_1%26installdataindex%3Dempty/chrome/install/ChromeStandaloneSetup64.exe
软件版本:V1.3.36.131
软件大小:82.76MB
更新时间:2022年06月05日
支持系统:Windows 11、10、8.1、8、7、Xp
系统类型:64位、32位
如何查看系统类型:找到系统属性查看即可
官网下载:https://www.google.cn/chrome/ - 如果谷歌页面加载不出来:因为默认搜索引擎是google,国内无法使用,点击管理搜索引擎请默认搜索引擎改为百度,把百度网站放到收藏夹即可
- 第二步:了解浏览器使用方式:右键,点击检查,点击网络(没有出现内容),刷新左侧页面,如下图
- 第三步:点击搜索,即可查看自己想要的内容。
- 第四步:假设左侧是网易云歌曲榜单,那么搜索后,请求网址处就是我们要寻找的数据来源URL。
1.发送请求 2.获取数据 3.分析数据 4.保存数据
1.4 代码知识 1.5 pycharm使用技巧选中下方栏,Ctrl+F出现左侧搜索栏,输入正则表达式,点击中间星号,即可出现所有正则表达式选中的内容,点击右侧向下箭头,选中下一条
同理,选中代码框, Ctrl+F也会出现搜索栏



