技巧一：请求库
请求库有：requests、selenium、urllib、aiohttp，我个人比较推荐新手小白掌握urllib和requests请求库。
urllib库
是Python内置的HTTP请求库，不需要额外安装即可使用，包含以下4个模块：
request 打开和读取 URL，最基本的HTTP请求模块，可以用来模拟发送请求
error 包含 urllib.request 抛出的异常，如果出现请求错误，我们可以捕获这些异常，然后进行重试或其他操作以保证程序不会意外终止。
parse 用于解析 URL，比如拆分、解析、合并等。
robotparser 用于解析 robots.txt 文件，主要是用来识别网站的robots.txt文件，然后判断哪些网站可以爬，哪些网站不可以爬。
if__name == main :
#百度贴吧的url
url= https://tieba.baidu.comf?
#防止ip被禁,重新指定User-Agent字段信息
headers =[
'lser-Agent : Moilla/5.0 (Windows NT 10.0;Win64: x64) AppleWebKit/537.36(KHTML like Gecko) Chrome/62.0.3202.62 Safar/537.367
#通过输入关键字查询
keyword = input(请输入关键字:”
#输入的文字(如:中文)进行urlencode编码
keyword = urllib.request.quote(keyword)
#拼接url
fullUrl- url + kw=” + keyword
#输入起始页
startPage - int(input(“输入起始页:》
#输入结束页
endPage = int(input('输入结束页:》
#开始抓取页面
spider(fullUrl,headers, startPage, endPage)
