栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Python

轻量级中文自然语言处理工具

Python 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

轻量级中文自然语言处理工具

功能概览

  • 中文简体词法分析 (RoBERTa + CRF finetune)
    • 分词
    • 词性标注
    • 命名体识别
  • 中文拼写检查 (Detector + Corrector SpellCheck)
  • 文本摘要 & 关键词提取 (Textrank)
  • 情感分析 (RoBERTa finetune)
  • 文本转拼音 (Trie)
  • 汉字偏旁部首 (HashMap)

Outline
  • 一. 安装
    • 安装库
    • 下载模型
  • 二. 使用文档
    • 分词:seg
    • 并行分词:seg_parallel
    • 词性标注:tag
    • 并行词性标注:tag_parallel
    • 命名体识别:ner
    • 并行命名体识别:ner_parallel
    • 关键词提取:keyword
    • 并行关键词提取:keyword_parallel
    • 关键语句提取:keyphrase
    • 并行关键语句提取:keyphrase_parallel
    • 情感识别:sentiment
    • 并行情感识别:sentiment_parallel
    • 拼音提取:pinyin
    • 并行拼音提取:pinyin_parallel
    • 部首提取:radical
    • 并行部首提取:radical_parallel
    • 文本纠错:checker
    • 并行文本纠错:checker_parallel

一. 安装

1. 安装库


安装最新版 xmnlp
pip install xmnlp

安装flake8
Flake8——Python静态代码检查工具
Flake8 是由Python官方发布的一款辅助检测Python代码是否规范的工具,相对于目前热度比较高的Pylint来说,Flake8检查规则灵活,支持集成额外插件,扩展性强。Flake8是对下面三个工具的封装:

 PyFlakes:静态检查Python代码逻辑错误的工具。

 Pep8: 静态检查PEP8编码风格的工具。

 NedBatchelder’s McCabe script:静态分析Python代码复杂度的工具。

不光对以上三个工具的封装,Flake8还提供了扩展的开发接口。

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/619245.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号