分享好友 最新资讯首页 最新资讯分类 切换频道
主流中文分词技术方案(Jieba, SnowNLP, PkuSeg, THULAC, HanLP)对比
2024-12-30 00:35

熊猫关键词工具旗下的中文分词工具(https://www.5guanjianci.com/tools/fenci/)上线以来获得了不少用户的认可。

主流中文分词技术方案(Jieba, SnowNLP, PkuSeg, THULAC, HanLP)对比

会有很多朋友想知道当前主流的分词技术方案有哪些,本文将带您了解主流技术(Jieba, SnowNLP, PkuSeg, THULAC, HanLP)

各维度的对比。


Github:https://github.com/fxsjy/jieba

结巴分词是国内最广泛使用的分词技术,该项目可以完全满足中文分词的需要。

结巴分词有如下功能特点:


Github:https://github.com/isnowfy/snownlp

该项目功能齐全,有如下功能特点:


Github:https://github.com/lancopku/pkuseg-python

pkuseg 是基于论文[Luo et. al, 2019]的工具包。其简单易用,支持细分领域分词,有效提升了分词准确度。


Github:https://github.com/thunlp/THULAC-Python

THULAC(THU Lexical Analyzer for Chinese)由清华大学自然语言处理与社会人文计算实验室研制推出的一套中文词法分析工具包,具有中文分词和词性标注功能。

THULAC具有如下几个特点:


Github:https://github.com/hankcs/pyhanlp

功能特点:

最新文章
AI移动端优化
原文地址:https://zhuanlan.zhihu.com/p/65436463数学是科学的基础,一般涉及算法的项目拆分到底层也都是基本的科
2023年全球及中国PFC电源行业头部企业市场占有率及排名调研报告
内容摘要2022年全球PFC电源市场规模约 亿元,2018-2022年年复合增长率CAGR约为 %,预计未来将持续保持平稳增长的态势,到2029年
2024街机游戏合集手机版推荐 最流行的街机游戏排行榜
对于90后来说街机游戏也承载着他们的童年,以至于现在每当看到此类型作品,都会想到当年的风靡大街小巷的街机厅。今天为大家带来
AI润色改写:写作利器还是魔咒?
在漫长的写作历程中,我总渴望能获得某种奇特的力量去提升文字质量,增加内容的生动性和吸引力。近日,我幸运
Google Chrome Free Download
Google Chrome Free Download will let you download and install the latest version of Google Chrome into your PC. Latest v
APS高级生产计划排程软件的架构和设计 aps高级计划与排程
APS系统是通过综合考虑产能、工装、设备、人力、班次、工作日历、模具、、委外资源、加工批次等约束,主要解决“在有限产能条件
Excel公式大全,高手进阶必备!
第一部分:常用函数和公式查找重复内容公式:=IF(COUNTIF(A:A,A2)1,重复,)。用出生年月来计算年龄公式:=TRUNC((DAYS360(H6,2009
115浏览器
  115浏览器 27.0.3.7  1.修复若干已知问题,产品性能更稳定。  115浏览器 27.0.2.7  1.下载文件增加完整性自动校验,用
2025电子信息哪些学校考研比较容易
随着2025年研究生入学考试的临近,许多同学开始关注2025电子信息考研学校推荐的问题。选择一所合适的学校不仅能提升自己的学习环
bt种子蚂蚁磁力
bt种子蚂蚁磁力安卓手机版下载是一款非常好用的磁力搜索软件,用户可以在软件之中进行各种资源搜索,用户可以在这里找到自己需要