猜您喜欢:
Jcseg是一款专业实用的轻量级Java中文分词工具,提供关键词提取和文章自动摘要等功能,并且拥有一个基于Jetty的web服务器,方便各大语言直接http调用,同时提供最新版本的lucene,solr和elasticsearch的搜索分词接口。感兴趣的小伙伴们赶快来非凡软件站下载吧!
Jcseg核心功能:
中文分词:mmseg算法 + Jcseg 独创的优化算法,七种切分模式。
关键字提取:基于textRank算法。
关键短语提取:基于textRank算法。
关键句子提取:基于textRank算法。
文章自动摘要:基于BM25+textRank算法。
自动词性标注:基于词库+(统计歧义去除计划),目前效果不是很理想,对词性标注结果要求较高的应用不建议使用。
命名实体标注:基于词库+(统计歧义去除计划),电子邮件,网址,大陆手机号码,地名,人名,货币,datetime时间,长度,面积,距离单位等。
Restful api:嵌入jetty提供了一个绝对高性能的server模块,包含全部功能的http接口,标准化json输出格式,方便各种语言客户端直接调用。
Jcseg中文分词:
七种切分模式:
简易模式:FMM算法,适合速度要求场合。
复杂模式:MMSEG四种过滤算法,具有较高的歧义去除,分词准确率达到了98.41%。
检测模式:只返回词库中已有的词条,很适合某些应用场合。
最多模式:细粒度切分,专为检索而生,除了中文处理外(不具备中文的人名,数字识别等智能功能)其他与复杂模式一致(英文,组合词等)。
分隔符模式:按照给定的字符切分词条,默认是空格,特定场合的应用。
NLP模式:继承自复杂模式,更改了数字,单位等词条的组合方式,增加电子邮件,大陆手机号码,网址,人名,地名,货币等以及无限种自定义实体的识别与返回。
n-gram模式:CJK和拉丁系字符的通用n-gram切分实现。
分词功能特性:
支持自定义词库。在lexicon文件夹下,可以随便添加/删除/更改词库和词库内容,并且对词库进行了分类。
支持词库多目录加载. 配置lexicon.path中使用';'隔开多个词库目录.
词库分为简体/繁体/简繁体混合词库: 可以专门适用于简体切分, 繁体切分, 简繁体混合切分, 并且可以利用下面提到的同义词实现,简繁体的相互检索, Jcseg同时提供了词库两个简单的词库管理工具来进行简繁体的转换和词库的合并。
中英文同义词追加/同义词匹配 + 中文词条拼音追加.词库整合了《现代汉语词典》和cc-cedict辞典中的词条,并且依据cc-cedict词典为词条标上了拼音,依据《中华同义词词典》为词条标上了同义词(尚未完成)。更改jcseg.properties配置文档可以在分词的时候加入拼音和同义词到分词结果中。
中文数字和中文分数识别,例如:"一百五十个人都来了,四十分之一的人。"中的"一百五十"和"四十分之一"。并且 Jcseg会自动将其转换为阿拉伯数字加入到分词结果中。如:150, 1/40。
支持中英混合词和英中混合词的识别(维护词库可以识别任何一种组合)。例如:B超, x射线, 卡拉ok, 奇都KTV, 哆啦a梦。
支持英文的类中文切分,同样使用mmseg算法来消除歧义,例如:“openarkcompiler”会被切分成:“open ark compiler”,该功能也可以被关闭。
更好的拉丁支持,电子邮件,域名,小数,分数,百分数,字母和标点组合词(例如C++, c#)的识别。
自定义切分保留标点. 例如: 保留&, 就可以识别k&r这种复杂词条。
复杂英文切分结果的二次切分: 可以保留原组合,同时可以避免复杂切分带来的检索命中率下降的情况,例如QQ2013会被切分成: qq2013/ qq/ 2013, chenxin619315@gmail.com会被切分成: chenxin619315@gmail.com/ chenxin/ 619315/ gmail/ com。
支持阿拉伯数字/小数/中文数字基本单字单位的识别,例如2012年,1.75米,38.6℃,五折,并且 Jcseg会将其转换为“5折”加入分词结果中。
智能圆角半角, 英文大小写转换。
特殊字母识别:例如:Ⅰ,Ⅱ;特殊数字识别:例如:①,⑩。
配对标点内容提取:例如:最好的Java书《java编程思想》,‘畅想杯黑客技术大赛’,被《,‘,“,『标点标记的内容。(1.6.8版开始支持)。
智能中文人名/外文翻译人名识别。中文人名识别正确率达94%以上。(中文人名可以维护lex-lname.lex,lex-dname-1.lex,lex-dname-2.lex来提高准确率),(引入规则和词性后会达到98%以上的识别正确率)。
自动中英文停止词过滤功能(需要在jcseg.properties中开启该选项,lex-stopwords.lex为停止词词库)。
词库更新自动加载功能, 开启一个守护线程定时的检测词库的更新并且加载(注意需要有对应词库目录下的的lex-autoload.todo文件的写入权限)。
自动词性标注(目前基于词库)。
自动实体的识别,默认支持:电子邮件,网址,大陆手机号码,地名,人名,货币等;词库中可以自定义各种实体并且再切分中返回。
以上就是非凡小编为大家带来的Jcseg(Java中文分词器)下载,想要了解更多实用工具类软件就请多多关注非凡软件站吧~
关键词优化 本关键词优化专题相对于其它关键词优化相关专题来说,所提供的关键词优化软件主要针对新更新的关键词优化工具;以确保软件的可用性及实用性。
必上榜关键词排名优化软件v1.10 必上榜关键词排名优化软件,是您百度关键词营销推广品牌、搜索查...详情>>
博雅淘宝自动收藏培养关键词工具v1.12 博雅淘宝自动收藏培养关键词工具可以通过指定关键词及宝贝ID查...详情>>
长尾关键词挖掘战神关键词工具v10.11 《战神关键词工具》是战神软件7来专注于SEO关键词领域软件开...详情>>
极米h3s投影仪以其出色的性能和丰富的功能深受用户喜爱,其中侧投功能更是为观影带来了极大的便利和多样的体验。下面就来详细介绍一下极米h3s怎么侧投。侧投设置前的准备在进行侧投之前,需要确保投影仪已经安装并调试好,放置在合适的位置。同时,要确保投影墙面平整,这样
ourplay打不开怎么办-ourplay打不开的解决方法在使用ourplay的过程中,有时可能会遇到打不开的情况,这确实会让人感到困扰。别担心,下面为您介绍一些有效的解决方法。检查网络连接首先,网络问题是导致ourplay打不开的常见原因之一。请确保您的设备
随着互联网技术的发展,数据存储和共享的需求日益增加,百度网盘作为国内领先的云存储服务提供商,其便捷的分享功能深受用户喜爱。然而,近年来关于百度网盘分享链接及密码的安全问题也逐渐浮出水面。本文将从多个维度探讨这一话题,旨在提高用户的网络安全意识。分享链接与密码的
安卓手机格式化是一种常见的操作,它能帮助我们清理手机中的垃圾文件、恢复手机性能,甚至在出售或重置手机时保护个人隐私。下面将为您详细介绍安卓手机格式化的方法。备份重要数据在进行格式化之前,务必备份手机中的重要数据,如联系人、短信、照片、视频等。您可以通过云服务(
微信小程序的翻译功能为用户带来了极大便利,尤其在浏览外文内容时。下面为您详细介绍其设置方法。首先,确保您的微信版本是最新的。打开微信,找到您想要使用翻译功能的小程序。进入小程序后,选中需要翻译的文本。长按选中的文本,此时会弹出一个菜单。在菜单中,您会看到“翻译
在当今充满活力的游戏社区中,小黑盒app为玩家们提供了一个展示自我、分享游戏体验的优质平台。那么,如何在小黑盒app上进行投稿呢?下面就为大家详细介绍小黑盒app的投稿方法。首先,打开小黑盒app,确保你已成功登录自己的账号。登录后,在首页下方的菜单栏中,找到
本站所有资源(含游戏)均是软件作者、开发商投稿,任何涉及商业盈利目的均不得使用,否则产生的一切后果将由您自己承担!本站将不对任何资源负法律责任,所有资源请在下载后24小时内删除。
如侵犯了您的版权、商标等,请立刻联系我们并具体说明情况后,本站将尽快处理删除,联系
(版权说明注意事项)。若有关在线投稿、无法下载等问题,请与本站客服人员联系
!
用户可自行按线路选择相应的下载点,可以直接点击下载/另存为,若直接点击下载速度太慢,请尝试使用高速下载器。为确保下载的文件能正常使用,请使用WinRAR最新版本解压本站软件。
建议大家谨慎对待所下载的文件,大家在安装的时候务必留意每一步!关于360安全卫士或QQ电脑管家的有关提示,请自行注意选择操作。