Python爬虫之解析---Re正则表达式-豆瓣实例

*学习视频资源：2021年全新python教学资源 路飞学城IT B站

# 拿到页面源代码
# 提取有效信息

import requests
import random
import re
import csv

# 存入文件 csv
f = open("data.csv", mode="w")
csvwriter = csv.writer(f)

#豆瓣电影共有10页
for i in range(0,10):
    item = i*25
    url = "https://movie.douban.com/top250?start=" + str(item)
    head = {'User-Agent':'Mozilla/5.0 (Windows; U; Windows NT 5.1; it; rv:1.8.1.11) Gecko/20071127 Firefox/2.0.0.11' }
    resp = requests.get(url=url,headers=head)
    page_content = resp.text
    # 解析数据
    #获取影片名字
    obj = re.compile(r'
.*?.*?(?P.*?)'
                     r'.*?
.*?
(?P.*?) .*?'
                     r'(?P.*?).*?'
                     r'(?P.*?)',re.S)
    # 开始匹配
    result= obj.finditer(page_content)


    for it in result:
        # print(it.group("name"))
        # print(it.group("year").strip())
        # print(it.group("score"))
        # print(it.group("num"))
        dic = it.groupdict()
        dic["year"] = dic["year"].strip()
        csvwriter.writerow(dic.values())
#关闭文件       
f.close()
print("over!")

csv结果显示：
肖申克的救赎,1994,9.7,2501495人评价

霸王别姬,1993,9.6,1859652人评价

阿甘正传,1994,9.5,1879505人评价

这个杀手不太冷,1994,9.4,2041381人评价

泰坦尼克号,1997,9.4,1841103人评价

…………………………………………

猜火车,1996,8.6,375544人评价

千年女优,2001,8.8,206691人评价

（一共250条数据）