By 小墨
2026年5月28日
96
296
2026年,知识库重新回归
当业界还在争论RAG(检索增强生成)是否是知识库的最优解时,一位传奇人物的最新实践再次搅动了这个领域。就在一个多月前,OpenAI创始团队成员、刚刚加入Anthropic的AI大牛Karpathy发布了他日常使用的知识库形态。与传统基于向量召回的知识库不同,这套方案让LLM全面接手知识库的管理工作,将知识"编译"成结构化的wiki摘要,从而实现更高效的知识调用与复用。
概述
这套方案的核心是一个精心设计的三层目录结构: • raw目录:存储原始文档,作为知识的"源文件" • wiki目录:存储经过LLM处理的各个wiki页面,包括摘要、实体、概念等,这是知识的"编译产物" • schema目录:存储各种规则、提示词、约束,确保流程的可复用性 基于这个架构,系统提供了三种核心操作:Ingest(摄入)、Query(查询)、Linter(健康检查)。其中最关键的是摄入操作——LLM会将原始知识"编译"成wiki摘要,而不是像传统RAG那样每次都读取原始知识。这使得LLM Wiki成为了知识的"编译器",而非简单的"解释器"。
LLM Wiki的三重架构
Karpathy的开源方式同样别具一格——没有完整的项目仓库,而是直接在GitHub上开源了一个"llm-wiki.md"文件。这种极简主义引发了大量社区复现,但绝大部分都局限于文本数据。 受此启发,有团队开始探索更激进的应用:将代码直接塞进知识库。面对MySQL(6.36GB)、PostgreSQL(958MB)这样的庞然大物,他们创新性地采用Submodule管理原始代码,通过两阶段生成方案处理wiki页面:先由LLM扫描仓库元信息了解整体架构,再针对每个模块阅读具体代码生成wiki内容。这种解析方式让LLM能够自主决定模块划分,确保每个模块的代码规模适中。
如果说基于向量召回的知识库是知识的"解释器",那么基于LLM的知识库就是知识的"编译器"。
“Karpathy”突破边界:将代码仓库纳入知识库
在代码仓库的解析过程中,如何对齐概念和模块名称是一个关键挑战。团队设计了三条规则:阅读已有概念、总结3-5个新概念、限制新概念数量。这一机制鼓励LLM匹配并更新已有概念,而非新建,确保wiki结构不会过于发散。 更巧妙的是,他们在解析代码仓库之前,提前将其他仓库的wiki目录注入上下文,要求LLM在划分模块时必须参考已有的模块标题。这样,划分模块的过程就从"填空题"变成了"选择题",大幅提升了模块对齐的准确性。
概念对齐与模块划分
在某次横向对比MySQL、PostgreSQL和NeuG三个数据库事务管理能力的测试中,使用wiki的实验组与使用原始代码的对照组表现出相近的回答质量——都能精准提取MVCC、并发控制、隔离级别、WAL等关键模块。差异在于对照组加入了更多代码细节,而实验组更倾向于介绍整体架构设计。 然而在资源消耗上,两者差距悬殊:使用wiki后,通过极少的token就可以解答问题,整体提升率在6倍左右。由于token生成速度相对固定,token消耗与执行时间大致成正比,整体执行时间同样存在4倍以上的差异。这不仅节省了成本,更节省了宝贵的时间。
如有侵权,请联系删除。
Related Articles
-
Mon Jun 08 2026【计算机】海外巨头融资提速,AI应用静待续催化——计算机行业6月投资策略展望
本报告从投资策略视角出发,分析了截至2026年6月计算机行业的资金流向与应用进展,强调海外巨头在本轮融资中的加速布局以及对下游应用生态的潜在影响。
-
Mon Jun 08 20262026年1-5月全球AI制药融资全景
本文系统盘点了2026年1至5月期间全球AI制药领域的重要融资事件与市场动向,解析资本如何围绕算法、数据与试验能力重构药物发现生态。
-
Sun Jun 07 2026脑机接口、AR眼镜、智能体……,浙商如何抢抓AI风口
第23届浙商(投融资)合作周在杭州举行,聚焦智能体时代的裂变,讨论从具身智能到脑机接口与AR终端的技术与商业路径。
-
Sun Jun 07 2026“AI x开源鸿蒙” 智启新五年:Agent OS从概念走向系统,从系统走向生态,从生态走向真正的产业价值
在上海交通大学的开源鸿蒙城市技术论坛上,项目群技术指导委员会强调智能体时代需要新的操作系统范式,以系统层能力支撑概率性AI的确定性需求。
-
Sun Jun 07 2026脑机接口 、AR 眼镜、智能体……,浙商如何抢抓 AI 风口
第23届浙商(投融资)合作周在杭州召开,以'智能体时代的裂变'为主题,汇聚行业代表与投资人,共同探讨AI在传统产业中的应用与投融资机会。
-
Sat Jun 06 2026踏上AI +绿色发展新征程,中国铁建'铁骥'大模型重磅上线!
中国铁建发布'铁骥'大模型,作为面向全集团的自研智能底座,目标覆盖工程项目从勘察到运维的全流程,支持绿色建设与数字化管理。
-
Sat Jun 06 2026288核,Intel 18A制程,英特尔至强6+加速Agentic AI落地
英特尔在北京发布会上推出新一代至强6/6处理器,面向Agentic AI时代的数据中心需求,强调CPU在整体算力架构中的回归与重要性。
-
Sat Jun 06 2026中国电信研发云CodeFree荣获"2026中国AI智能体领航者"称号
中国电信研发云CodeFree在2026年评选中获得'通用智能体'方向称号,入选《2026中国智能体产业图谱》,其方案面向央国企研发痛点构建国产化芯片到研发工具链的全链路自主可控体系。
-
Sat Jun 06 2026大厂Agent天团已就位!AI智能体时代年度盛会进展公布,同期自进化智能体研讨会嘉宾揭晓
AgenticAICon 2026 将于杭州举办,作为聚焦AI智能体技术与应用的年度盛会,会议旨在连接学术、产业与投资三端,推动智能体技术的可落地发展。
-
Sat Jun 06 2026中国电信研发云CodeFree荣获“2026中国AI智能体领航者”称号
2026年6月,中国电信研发云CodeFree凭借其在通用智能体方向的技术突破与应用实践,被授予“2026中国AI智能体领航者”称号,并入选《2026中国智能体产业图谱》。
-
Fri Jun 05 2026达实召开生态伙伴大会,“AI+平台”实现快速迭代
达实智能在生态伙伴大会上展示AI Agent 2.0的演进速度与应用广度,强调通过AIoT平台和场景化模型快速复制落地,实现从单点到大规模场景覆盖的跨越。
-
Fri Jun 05 2026让AI深入产线!第三期『场景恳谈会』AI+制造业专场干货实录
第三期'场景恳谈会'聚焦 AI 在制造业的实际应用,来自企业与研究机构的案例展示说明 AI 智能体正从试点进入规模化部署阶段。
-
Fri Jun 05 2026智启新程,生态同行:2026高通汽车技术与合作峰会展现AI汽车新图景
2026高通汽车技术与合作峰会在无锡举行,聚焦AI智能体在汽车场景的落地与生态合作,展示了面向车载多模态交互、舱驾一体化和智能体验的解决方案。
-
Fri Jun 05 2026智启新程,生态同行:2026高通汽车技术与合作峰会展现AI汽车新图景
在无锡举行的高通汽车技术与合作峰会上,高通展示了面向汽车的AI能力,强调汽车正演进为重要的移动智能体载体,并提出了舱驾一体的交互愿景。
-
Fri Jun 05 2026Agentic AI风口已至!聚焦Agent最火的九个方向,年度AI智能体大会7月开幕
2026中国AI智能体大会将于7月2-3日在杭州举办,主题为“范式跃迁 重塑世界”,大会聚焦智能体技术的前沿方向与产业应用,邀请了大量来自企业与学界的专家。
-
Fri Jun 05 2026智启新程,生态同行:2026高通汽车技术与合作峰会展现AI汽车新图景
在2026高通汽车技术与合作峰会上,高通中国区领导指出2026年将成为“智能体之年”,并展示了其面向智能体的车载计算、感知与软件平台,强调汽车将成为智能体AI最重要的移动载体。
-
Fri Jun 05 2026汤道生对谈姚顺雨,回答关于腾讯AI的一切
在腾讯云 AI 产业应用大会上,腾讯高层就公司在 AI 下半场的战略与产品做出详细阐述,重点介绍面向企业的效率智能体与办公套件,旨在将智能体能力直接嵌入企业工作流中以提升生产力。
-
Fri Jun 05 2026华为云发布Agentic AI系列新品 打造智能时代“硅基黑土地”
在INSPIRE创想者大会上,华为云正式提出Agentic Infra新范式,并同步发布一系列面向企业级应用的Agentic AI产品,目标是为智能体时代提供从算力到平台的完整基础设施。
