博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
中文分词效果对比
阅读量:6346 次
发布时间:2019-06-22

本文共 1923 字,大约阅读时间需要 6 分钟。

hot3.png

使用40个句子,在、和之间看看区别有多大。

 

效果:

 

杨尚川 是 apdplat 应用 级 产品 开发 平台 的 作者 他 说 的 确实 在理 提高 人民 生活 水平 他俩 儿 谈恋爱 是从 头年 元月 开始 的 王府 饭店 的 设施 和 服务 是 一流 的 和服 务 于 三 日后 裁制 完毕 , 并 呈送 将军 府 中 研究 生命 的 起源 他 明天 起身 去 北京 在 这些 企业 中 国有 企业 有 十个 他 站 起身 来 他们 是 来 查 金泰 撞人 那件 事 的 行 侠 仗义 的 查 金泰 远近 闻名 长春 市长 春节 致辞 他 从 马上 摔下 来 了 , 你 马上 下来 一 下 乒乓球拍 卖完 了 咬死 猎人 的 狗 地面 积 了 厚厚 的 雪 这 几块 地 面积 还 真 不小 大学生活 象 白纸 结 合成 分子式 有 意见 分歧 发展 中国 家兔 的 计划 明天 他 将来 北京 税收制度 将来 会 更 完善 依靠 群众 才能 做好 工作 现在 是 施展 才能 的 好 机会 把手 举 起来 茶杯 的 把手 断 了 以 新的 姿态 出 现在 世界 东方 使 节约粮食 进一步 形成 风气 反映 了 一 个人 的 精神 面貌 美国 加州 大学 的 科学 家 发现 我 好不 挺好 木 有 下雨天 留客 天天 留 我 不留 叔叔 亲 了 我 妈妈 也 亲 了 我 白马非马 学生会 写文章 张掖 市民 陈军 张掖市 明 乐 县

 

效果 :

 

杨尚川 是 apdplat 应用 级 产品 开发 平台 的 作者 他 说 的确 实在 理 提高 人民 生活 水平 他 俩 儿 谈恋爱 是 从头 年 元月 开始 的 王府 饭店 的 设施 和 服务 是 一流 的 和 服务 于 三 日后 裁 制 完毕 并 呈送 将军府 中 研究 生命 的 起源 他 明天 起身 去 北京 在 这些 企业 中国 有 企业 有 十 个 他 站 起身 来 他们 是 来 查 金泰 撞人 那 件 事 的 行 侠 仗义 的 查 金泰 远近 闻名 长春 市长 春节 致辞 他 从 马上 摔下 来了 你 马上 下来 一下 乒乓球 拍卖 完 了 咬 死 猎人 的 狗 地 面积 了 厚厚 的 雪 这 几块 地 面积 还 真 不 小 大学生 活象 白纸 结合 成 分子式 有 意见 分歧 发展 中国 家兔 的 计划 明天 他 将来 北京 税收 制度 将来 会 更 完善 依靠 群众 才能 做好 工作 现在 是 施展 才能 的 好 机会 把手 举起 来 茶杯 的 把手 断了 以 新 的 姿态 出现 在 世界 东方 使 节约 粮食 进一步 形成 风气反映 了 一个人 的 精神 面貌 美国 加州 大学 的 科学家 发现 我 好 不 挺 好 木有 下 雨天 留客 天天 留 我 不留 叔叔 亲了 我 妈妈 也 亲了 我 白马 非 马 学生会 写文章 张掖 市民 陈军 张掖市 明 乐 县

 

效果:

 

杨尚川 是 apdplat 应用 级 产品开发 平台 的 作者 他 说 的 确实 在理 提高 人民 生活 水平 他俩 儿 谈恋爱 是从 头年 元月 开始 的 王府 饭店 的 设施 和 服务 是 一流 的 和 服务 于 三日 后 裁制 完毕 , 并 呈送 将军 府 中 研究 生命 的 起源 他 明天 起身 去 北京 在 这些 企业 中 国有企业 有 十个 他 站 起身 来 他们 是 来 查 金泰 撞 人 那件事 的 行侠仗义 的 查 金泰 远近闻名 长春 市长 春节 致辞 他 从 马上 摔下来 了 , 你 马上 下来 一下 乒乓球拍 卖完 了 咬 死 猎人 的 狗 地面 积 了 厚厚的 雪 这 几块 地 面积 还 真 不小 大学 生活 象 白纸 结合 成 分子式 有 意见分歧 发展中国家 兔 的 计划 明天 他 将来 北京 税收制度 将来 会 更 完善 依靠群众 才能 做好 工作 现在 是 施展才能 的 好 机会 把手 举 起来 茶杯 的 把手 断 了 以 新 的 姿态 出现 在 世界 东方 使 节约粮食 进一步 形成 风气 反映 了 一个 人 的 精神面貌 美国加州大学 的 科学家 发现 我 好 不 挺 好 木 有 下雨天 留客 天天 留 我 不留 叔叔 亲 了 我 妈妈 也 亲 了 我 白马非马 学生会 写文章 张掖 市民 陈军 张掖市 明 乐 县

 

 

 看如下详细对比图(搜狗分词和word分词):

 

 

 

看如下详细对比图(ansj分词和word分词):

 
 

参考资料:

1、

2、

3、

转载于:https://my.oschina.net/apdplat/blog/228614

你可能感兴趣的文章
第十八章:MVVM(八)
查看>>
点击表头切换升降序排序方式
查看>>
第26天,Django之include本质
查看>>
Java中静态变量和实例变量的区别
查看>>
秋名山老司机(详解)——bugku
查看>>
RED | Robot Framework集成开发环境
查看>>
育碧同 Mozilla 联手开发 AI 代码助手
查看>>
【实用】面对枯燥的源码,如何才能看得下去?
查看>>
智库说 | 徐远:数字时代的城市潜力
查看>>
《JSP极简教程》jsp c:forEach用法
查看>>
WebSocket详解(六):刨根问底WebSocket与Socket的关系
查看>>
用 Go 写一个轻量级的 ssh 批量操作工具
查看>>
网站设计之合理架构CSS 架构CSS
查看>>
OTP 22.0 RC3 发布,Erlang 编写的应用服务器
查看>>
D语言/DLang 2.085.1 发布,修复性迭代
查看>>
感觉JVM的默认异常处理不够好,既然不好那我们就自己来处理异常呗!那么如何自己处理异常呢?...
查看>>
Java 基础 之 算数运算符
查看>>
Windows下配置安装Git(二)
查看>>
一个最简单的基于Android SearchView的搜索框
查看>>
铁路开通WiFi“钱景”不明
查看>>