Pycorrector Files

v1.1.4 发布说明

优化

• 专名纠错（ProperCorrector）性能优化：将逐片段全量扫描专名词典改为按词长 + 位置的多级倒排索引（char / pinyin / stroke），在 4 万规模专名词典下纠错速度提升约 1~2 个数量级。
• 移除冗余 Trie 结构，改用集合成员判断。
• 修复 OOV 笔画空字符串（''）导致的索引假阳性。

修复

• 自定义混淆集匹配由正则替换为 Aho-Corasick 自动机。
• 修复默认配置下自定义混淆集为空时的崩溃（AttributeError: Not an Aho-Corasick automaton yet）。
• 修正预训练语言模型文件名 people2014corpus_chars.klm。

示例

• 新增 batch 纠错示例 examples/kenlm/load_custom_language_model.py。