- 前言
- 一、urllib,urllib3是什么?
- 二、使用步骤
- 1.引入库
- 2.urllib模块
- 3.urllib3模块
- 3.requests模块
- 总结
前言
最近在看爬虫相关的知识,如何通过Python去爬去网页上的内容,涉及到Http请求
提示:以下是本篇文章正文内容,下面案例可供参考
一、urllib,urllib3是什么?urllib,urllib3是Python的内置模块,通过此模块可以进行Http请求操作
二、使用步骤 1.引入库代码如下(示例):
pip install request2.urllib模块
代码如下(示例):
import urllib.request
r1 = urllib.request.urlopen("http://www.baidu.com/")
#print(r1)
for r in r1:
print(r)
3.urllib3模块
代码如下(示例):
import urllib3
r2 = urllib3.PoolManager()
resp = r2.request("get","http://www.baidu.com/")
print(resp)
3.requests模块
代码如下(示例):
# coding:utf-8
import requests
resp = requests.get("http://www.baidu.com/")
#print(resp.status_code)
'''
for i in resp.headers.items():
print(i)
'''
#print(resp.content)
#print(resp.text)
#print(resp.encoding)
resp.encoding="utf-8"
print(resp.text)
总结
记录点点滴滴



