展示 HN:Rust 驱动的 RAG 文档分块器 – 速度提升 40 倍,内存复杂度 O(1)
Show HN: Rust-powered document chunker for RAG – 40x faster, O(1) memory

原始链接: https://github.com/Krira-Labs/krira-chunker

此页面加载时间过长。 对此我们深感抱歉。请尝试刷新,如果问题仍然存在,请联系我们。 联系支持 — GitHub 状态 — @githubstatus

Hacker News 新闻 | 过去 | 评论 | 提问 | 展示 | 招聘 | 提交 登录 展示 HN:Rust 驱动的文档分块器,用于 RAG – 速度提升 40 倍,内存复杂度 O(1) (github.com/krira-labs) 7 分,由 kriralabs 发布 33 分钟前 | 隐藏 | 过去 | 收藏 | 讨论 我构建了一个用于 RAG 流水线的文档分块库,核心使用 Rust,并提供 Python 绑定。 问题:LangChain 的分块器是纯 Python 实现,在规模化时会成为瓶颈——处理大型文档集时速度慢且占用大量内存。 Krira Chunker 的不同之处: - Rust 原生处理 – 速度比 LangChain 的实现快 40 倍 - O(1) 空间复杂度 – 内存占用量保持不变,与文档大小无关 - 即插即用的 Python API – 可与任何现有的 RAG 流水线配合使用 - 生产就绪 – 已发布 17 个版本,安装次数超过 315 次 pip install krira-augment 希望从任何构建 RAG 系统的人那里获得坦诚的反馈——你们在使用分块时遇到了哪些问题,而这个库尚未解决? 帮助 指南 | 常见问题 | 列表 | API | 安全 | 法律 | 申请 YC | 联系 搜索:
相关文章

原文

This page is taking too long to load.

Sorry about that. Please try refreshing and contact us if the problem persists.

联系我们 contact @ memedata.com