栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 面试经验 > 面试问答

从存储的.html页面中提取新闻文章内容

面试问答 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

从存储的.html页面中提取新闻文章内容

Python中也有此库:)

自从您提到Java以来​​,有一个适用于样板程序的Python包装器,可让您在python脚本中直接使用它:https : //github.com/misja/python-
boilerpipe

如果要使用纯python库,则有2个选项:

https://github.com/buriy/python-readability

https://github.com/grangier/python-goose

在这两者中,我更喜欢Goose,但是请注意,由于某些原因,它的最新版本有时无法提取文本(我的建议是现在使用1.0.22版)。

编辑:这是使用Goose的示例代码:

from goose import Goosefrom requests import getresponse = get('http://www.nytimes.com/2015/05/19/health/study-finds-dense-breast-tissue-isnt-always-a-high-cancer-risk.html?src=https://www.mshxw.com/skin/sinaskin/image/nopic.gif')extractor = Goose()article = extractor.extract(raw_html=response.content)text = article.cleaned_text


转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/367886.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号