栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 面试经验 > 面试问答

如何标记由两个单词合并而没有空格的单词

面试问答 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

如何标记由两个单词合并而没有空格的单词

有一个看

DictionaryCompoundWordTokenFilter
作为在Solr的说明

该过滤器使用组成词的词典将复合词拆分或分解为单个词。每个输入令牌均不变地传递。如果还可以将其分解为子字,则每个子字也将在同一逻辑位置添加到流中。

在:“ Donaudampfschiff dummkopf”中

要过滤的令牌生成器:“ Donaudampfschiff”(1),“ dummkopf”(2),

输出:“ Donaudampfschiff”(1),“ Donau”(1),“ dampf”(1),“ schiff”(1),“
dummkopf”(2),“ dumm”(2),“ kopf”(2)

如您在示例配置中看到的,您将需要使用您想要拆分的语言的字典,在示例中,他们使用

germanwords.txt
,其中包含要分解的单词(如果找到的话)。在您的情况下,这将是
love
live

<analyzer>  <tokenizer />  <filter  dictionary="germanwords.txt"/></analyzer>

对于Lucene来说

org.apache.lucene.analysis.compound.DictionaryCompoundWordTokenFilter
。该代码可在github上找到。



转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/385403.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号