全部工程
本地中文处理工作台 · Windows 版已发布

Liss Text Lab · 文字处理实验室

分词、词频、校对与文件检索,在本机探索文字结构和语义线索。

查看最新版本Windows · 最新正式版
查看源码
技术方向
中文处理 / 本地工具
设计主张
建议说明依据,文本始终在本机处理。
关键能力
  • 分词与词频联动
  • 词向量语义探索
  • 带编码的文件检索

原文、切分视图、词频表与分布条形图组成分词工作区。

把文字处理放回一个工作台

从自写的改错字、分词工具与 FindText 延伸出的本地文字实验室。分词观察结构,校对给出可确认的建议,文件检索把线索定位到具体路径和行号。

技术构成

C# / .NET 10 / WinForms
原生控件与 GDI+ 词频图,配合可取消的后台任务。
Jieba / JiebaNet
第三方中文分词实现,应用侧组织词频、位置与批处理。
word2vec / 余弦相似度
导入自备模型,探索近邻与双侧上下文。
KMP / 多编码流式检索
跨读取块保留匹配状态,以有限上下文定位文件与行号。

设计与实现

分词 · 从一句话看到词的分布

位置与统计相互印证

精确、搜索、全模式配合原文位置、词频表与条形图;自定义词可在当前会话生效。

单篇和批量共用流程

文本在本机处理,批量输出保留相对目录;原文与结果分开,支持取消并保留已完成文件。

导入本机 word2vec 后查看语义近邻,词向量参考与固定用语规则分开呈现。 放大查看
导入本机 word2vec 后查看语义近邻,词向量参考与固定用语规则分开呈现。

校对 · 建议有依据,由人确认

规则与语义分开表达

固定用语规则说明修改理由;词向量提供相似度参考,语义差异不会直接被当成错字。

按需使用自己的模型

读取文本或二进制 word2vec;归一化、逐词扫描与固定大小优先队列控制近邻检索的空间开销。

画面与演示说明

中文分词由第三方 Jieba 实现提供。规则校对与词向量参考分开呈现,语义相似度不等于纠错准确率;无 BOM 文本可手动指定编码。

校对默认是 15 条固定用语规则,不是通用纠错模型。预训练词向量不随程序提供;语义功能需导入自己有权使用的模型。

快速开始

离线打开

完整解压 Windows x64 ZIP,运行 Liss.TextLab.exe,无需安装 .NET,文本和模型均在本机处理。

选择工作区

粘贴或打开文本查看分词与词频;在校对页逐项确认建议,在检索页选择目录和关键词。批量输出与原文目录分开。

按需探索语义

导入自己有权使用的 word2vec .bin 或文本 .vec / .txt,查看语义近邻和双侧上下文;默认不附带 word2vec 词向量模型。

全部工程