Chonky：一个完全基于神经网络的文本分块工具

Chonky：一个完全基于神经网络的文本分块工具。它能将文本智能分割成有意义的语义块，帮助你更高效地处理和理解长文本。

亮点：

使用Transformer模型，精准分块；支持RAG系统，拓展应用范围；一行代码即可完成安装，简单易用。

参考文献：[1] https://github.com/mirth/chonky[2] https://huggingface.co/mirth/chonky_distilbert_base_uncased_1

超好看的资讯你懂得 >>> 点击进入

[超站]友情链接：

四季很好，只要有你，文娱排行榜：https://www.yaopaiming.com/
关注数据与安全，洞悉企业级服务市场：https://www.ijiandao.com/