xls文件以及爬虫的相关知识

xlwt：xls文件写操作
xlrd：xls文件写操作


openpyxl和xlwtxlrd对比
1.openpyxl行列号从1开始；xlwtxlrd行列号从0开始
2.两者都可以对工作表进行操作
3.两者都可以用单元格定位的形式

 获取行列数
nrows:获取最大行数
ncols：获取最大列数

xlwt、xlutils、XlsxWriter 不能读取文件

xlrd 可以读取 .xls 和 .xlsx 文件

练习

 写入数据
names = ['1','3','2','4']
for i in range(len(names)):
    # 写入学生名字
    sheet1.write(i,0,names[i])
    for j in range(1,4):
        # 工作表write(row.col.content)
        sheet1.write(i,j,random.randint(0,100))

爬虫流程

解析HTML页面

根据前端的语法或者正则表达式提取数据

保存数据

发送请求：

response = requests.get(url=URl)
print(response)

网页状态：

200：表示程序和服务器正常通讯

403：表示服务器理解客服端的请求，但是拒绝了客服端的请求

404：网页丢失 

500：服务器崩溃

编码问题：

如果网页发生乱码，只需要根据页面指定编码方式解码即可
requests默认使用ISO-8859-1的编码（ASCLII）

#其也能够使用页面服务器所指定的编码方式 # UTF-8(万国码)、gbk(国标码) 

如果页面中没有charset='编码'怎么办：response.encoding = nonev

网页下载图片以及视频

resq = requests.get(url=URL)
if resq.status_code==200:
   print(resq.content)
   h = open('1.jpg','wb')
   h.write(resq.content)
   h.close()
else:
    print(resq.status_code)