最近被老板按着头做知识库做的心烦，白天向量数据库晚上切块的，效果还越调越烂，日子过得贼难受
这不得不促使我思考一个问题，人类管理书籍和档案已经几千年了，也没听说过有向量数据库这玩意啊，那不也活得好好的
然后我也研究了一些比如最近大火的 Karpathy LLM Wiki 之类的，但感觉都差点意思，不太适合企业级（至少是中小企业起步吧）知识库的做法。
想来想去，我决定拿出毕生所学，捣鼓了一个（自我感觉）非常适合研究者/法律工作者/金融工作者这个方向的知识库
它的底层逻辑就是 图书馆学 x 推荐系统 x Agent
整个系统以不同角色为边界，划分了 3 个角色：图书馆员，调查员，用户
用户负责上传文件，图书馆员负责对文件打标签，写 summary 。调查员负责写笔记、阅读 summary ，浏览不同的文件提取知识，并最终汇总成调查报告发给用户，同时记下这次问答的笔记。图书馆员再利用这个笔记将不同的文件进行聚合，挖掘不同文件之间的内在关联，这样一个知识图谱就形成了
而且整个系统是一个自反馈系统，随着问的问题越来越多，它就能够挖掘出你在跟它对话中隐藏的知识关联性，提高聚合和查询的质量
最终的目标是诞生一个自组织、自适应、自感知的知识库系统
目前已经有几个种子用户，他们一致认为该项目能够解决工作中的很多问题
Github: https://github.com/shenmintao/marginalia
希望大家多多体验，提点反馈意见
Select Language