问题描述
特征词发现技术能够识别出词典中没有出现过的词汇、短语、命名实体、流行用语,是语言文献分析方面的一把利器。特征词发现脱胎于语言自动分词技术,又是对分词技术的有效提升和补充。灵玖Lingjoin(www.lingjoin.com)采用基于语义的统计语言模型,所处理的文档不受行业领域限制,能够有效地挖掘出新出现的特征词汇,所输出的词汇可以配以权重。灵玖特征词发现组件的主要特色在于:1、速度快:可以处理海量规模的网络文本数据,平均每小时处理至少60万篇文档;2、处理精准:TopN的分析结果往往能反映出当时的时事流行语和热点实体,适合于舆情热点计算;与国际上著名厂商的技术相比,灵玖的各项指标远远领先,或许是灵玖更懂中文吧;3、精准排序:特征词汇按照影响权重排序,可以输出权重值;5、开放式接口:灵玖特征词发现组件作为LJParser的一部分,采用灵活的开发接口,可以方便地融入到用户的业务系统中,可以支持各种操作系统,各类调用语言。灵玖特征词发现组件可以应用于文本挖掘、知识管理、词典编辑、舆情监测等多种应用中。
时间: 2024-11-03 19:53:49