Univo 开源 Python 去重库，5 行代码离线运行

作者 jweaz 在 Hacker News 发布开源 Python 库 Univo，用模糊匹配、本地嵌入和字段级规则查找重复记录。安装后 5 行代码即可运行，无需训练和 API key，作者称记录不会离开本机。 默认情况下，find 最多返回 1,000 条评分不低于 0.8 的匹配结果，文本按拼写比较；不指定模型时使用 15 MB 的多语言默认模型，该模型下载一次并校验后可离线使用。作者称 10 万条名称去重耗时 4.5 秒。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。