APP下载
报价宝  ›  科技  › 

java分词工具hanlp介绍

报价宝 来源:baojiabao.com 发布时间:2019-07-08 09:49:00 09月11日更新
报价宝综合消息java分词工具hanlp介绍

前几天(6月28日),在第23届中国国际软件博览会上,hanlp这款自然语言处理工具荣获了“2019年第二十三届中国国际软件博览会优秀产品”。

HanLP是由一系列模型预算法组成的工具包,结合深度神经网络的分散式自然语言处理,具有功能完善、效能高效、架构清晰、语料时新、可自定义等特点,提供词法分析、句法分析、文字分析和情感分析等功能,是GitHub最受欢迎、使用者量最大(超过13000个star)、社群活跃度最高的自然语言处理技术。

HanLP完全开源,包括词典。不依赖其他jar,底层采用了一系列高速的资料结构,如双阵列Trie树、DAWG、AhoCorasickDoubleArrayTrie等,这些基础件都是开源的。官方模型训练自2014人民日报语料库,您也可以使用内建的工具训练自己的模型。

通过工具类HanLP您可以一句话呼叫所有功能,文件详细,开箱即用。底层算法经过精心优化,极速分词模式下可达2,000万字/秒,内存仅需120MB。在IO方面,词典载入速度极快,只需500 ms即可快速启动。HanLP经过多次重构,目前已经更新到了1.7版本,新增并完善了中文分词、命名实体识别、资讯抽取、文字分类、文字聚类、画法分析等功能,使用效率和适用性得到了大幅提升。

文章标签: 报价宝 降噪耳机价格 耳机价格 红米手机价格 华为手机价格 小米手机价格 电视机价格 笔记本电脑价格 笔记本价格 汽车价格 报价宝 数码相机价格 笔记本电脑价格 华为手机价格 降噪耳机价格