栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > Web开发 > Html/CSS > CSS教程

CSS选择器实现字段解析

CSS教程 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

根据上面所学的CSS基础语法知识,现在来实现字段的解析。首先还是解析标题。打开网页开发者工具,找到标题所对应的源代码。



发现是在div 下面的h1节点中,于是打开scrapy shell 进行调试



但是我不想要这种标签该咋办,这时候就要使用CSS选择器中的伪类方法。如下所示。



注意的是两个冒号。使用CSS选择器真的很方便。同理我用CSS实现字段解析。代码如下

# -*- coding: utf-8 -*-  
import scrapy  
import re  
class JobboleSpider(scrapy.Spider):  
    name = 'jobbole'  
    allowed_domains = ['blog.jobbole.com']  
    start_urls = ['http://blog.jobbole.com/113549/']  
    def parse(self, response):  
 # title = response.xpath('//div[@class = "entry-header"]/h1/text()').extract()[0]  
 # create_date = response.xpath("//p[@class = 'entry-meta-hide-on-mobile']/text()").extract()[0].strip().replace("·","").strip()  
 # praise_numbers = response.xpath("//span[contains(@class,'vote-post-up')]/h10/text()").extract()[0]  
 # fav_nums = response.xpath("//span[contains(@class,'bookmark-btn')]/text()").extract()[0]  
 # match_re = re.match(".*?(d+).*",fav_nums)  
 # if match_re:  
 #     fav_nums = match_re.group(1)  
 # comment_nums = response.xpath("//a[@href='#article-comment']/span").extract()[0]  
 # match_re = re.match(".*?(d+).*", comment_nums)  
 # if match_re:  
 #     comment_nums = match_re.group(1)  
 # content = response.xpath("//div[@class='entry']").extract()[0]  
#通过CSS选择器提取字段  
 title = response.css(".entry-header h1::text").extract()[0]  
 create_date = response.css(".entry-meta-hide-on-mobile::text").extract()[0].strip().replace("·","").strip()  
 praise_numbers = response.css(".vote-post-up h10::text").extract()[0]  
 fav_nums = response.css("span.bookmark-btn::text").extract()[0]  
 match_re = re.match(".*?(d+).*", fav_nums)  
 if match_re:  
     fav_nums = match_re.group(1)  
 comment_nums = response.css("a[href='#article-comment'] span::text").extract()[0]  
 match_re = re.match(".*?(d+).*", comment_nums)  
 if match_re:  
     comment_nums = match_re.group(1)  
 content = response.css("div.entry").extract()[0]  
 tags = response.css("p.entry-meta-hide-on-mobile a::text").extract()[0]  
 pass  



总结

以上所述是小编给大家介绍的CSS选择器实现字段解析,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对考高分网网站的支持!

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/215376.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号