爬虫在向服务器请求时,若是服务器没有顺利返回响应,爬虫就会一直等待
有时这种长时间等待是没有没价值的
在requests.get()里添加参数,设置一个等待时间,若是响应超过这段时间还没有返回,就返回异常报告(ConnectTimeout):
#设置超时时间是0.001秒: response=requests.get(url,timeout=0.001)AJAX、检查工具里的network和XHR 1.AJAX(Asynchronous JavaScript And XML):
一种异步更新技术,更新网页的部分内容,但是不重新加载整个网页(url不会变)。
在一些网站里,评论就是用JavaScript加载的,在一个


