本地文档 RAG 思路 Chipper 项目
Chipper: https://github.com/TilmanGriesel/chipper
其实很早就关注了这个项目,但是一直没有尝试。这个项目基于 Elasticsearch 来实现文档搜索和 RAG。LLM 的提供支持 ollama 和 huggingface。提供脚本一键 docker 部署很方便。
我看重的功能是:它可以提供一个 ollama 的代理。也就是使用这个项目的 ollama 代理之后,就可以直接调用项目的文档 RAG 了,而这个项目管理文档 RAG 很方便。这样就可以把它当作是一个文档搜索引擎了。Chipper 项目相当于一个 pipeline?
现在就可以把用 read PDF page by page 整理过的笔记系统的学习,逐步替代NotebookLM。完善 碎片知识学习 - with AI和结构化知识工作流 - with AI
整个技术栈很值得参考,还是由于知识不足,所以一直没有构建好本地文档的知识问答体系。 #22 #26
在 obsidian 里很早就可以很方便的用插件来实现了,但是还是自己折腾更有意思。
又重构了 gitmemos 的很多东西。。。