文本中文分词

使用内置常用中文词表,按最大正向匹配算法把连续中文切分为词语,英文与数字作为整体保留,标点与空白作为分隔符。页面下方提供可编辑的自定义词表,可追加或覆盖词条。轻量离线分词,词库有限、非完整 NLP 分词,全部在浏览器本地完成。

文本输入 等待输入

轻量离线分词,词库有限、非完整 NLP 分词;未收录的词会按单字切分。

自定义词表

自定义词条会与内置词表合并使用;点击「载入内置词表」可把内置词表放入文本框进行覆盖编辑。

分词结果
词数—
不同词数—
输入文本后点击「开始分词」,词语之间以空格分隔显示。

轻量离线分词,词库有限、非完整 NLP 分词,结果仅供演示与参考。

分词规则
  • 中文片段按最大正向匹配切分:从当前字符起,尝试匹配词表中尽可能长的词条。
  • 若当前位置无法匹配任何多字词,则该字单独成为一个词。
  • 连续英文与数字(A-Z a-z 0-9)作为整体保留,不拆分。
  • 标点符号与空白字符作为分隔符,不进入分词结果。
  • 内置词表为常见中文词汇的有限集合,覆盖范围远小于专业分词器。
  • 自定义词条与内置词表合并生效;勾选「仅使用自定义词表」后忽略内置词表。