你有没有被 AI 这样坑过——你问它「咱们内部 V3 接口怎么调」它用最自信的语气给你编出一个根本不存在的参数还贴心地附上一段「示例代码」。你信了上线翻车了。回去质问它它依然信誓旦旦。这真不是它坏是它「嘴硬」——大模型只记得训练截止那天的事之后的一切一概不知却打死不肯承认「我不会」。这个毛病专业上叫幻觉Hallucination。而对付它的解法今天一次讲透RAG。一句话看懂 RAGRAGRetrieval-Augmented Generation检索增强生成 别让模型凭空编让它先翻书、再开口先查资料查到再答抄了还要标出处。 本文地图① 三阶段图书馆、学霸和小抄② 术语黑话词典面试/评审装 X 必备③ 检索三兄弟老实人、文艺青年和组合拳④ 进阶算法变体各路「外挂」⑤ 怎么知道它干得好不好⑥ 给落地者的忠告一、三阶段图书馆、学霸和小抄整个 RAG 就三步你可以把它想象成一座图书馆① 索引Indexing管理员把一本本书拆成一页页、甚至一小段贴好标签按「主题相似度」摆上书架。这就是Chunking切分 Embedding向量化 向量库。② 检索Retrieval你抛来一个问题管理员瞬间翻出最相关的几页递给你Top-K条「小抄」。③ 生成Generation学霸拿着小抄结合你的问题组织语言还顺手把「哪一页」标成引用。二、术语黑话词典面试/评审装 X 必备Chunking文档切分把长文档切成小段。切太碎——学霸看不懂上下文切太大——一段塞八百个主题检索等于没检。这是门「切肉」的艺术切多了怕疼切少了怕噎。Embedding向量化把一句话变成一串数字让语义相近的词在向量空间里当邻居。于是「猫」和「喵星人」住隔壁「猫」和「路由器」被发配到两个星系。Vector DB向量数据库专门存向量的「高级 Excel」。你丢个向量进去它几毫秒告诉你「谁和你最像」。Milvus、FAISS、Chroma、Qdrant名字一个比一个科幻。余弦相似度衡量两个向量多「投缘」的尺子——不看长度只看夹角夹角越小越有缘。ANN / HNSW近似最近邻向量太多时穷举比对会慢到怀疑人生。HNSW 用「图 跳表」的思路牺牲 0.1% 精度换 99% 速度典型的「差不多先生」哲学。Top-K一次给学霸塞几条小抄。K 太大上下文塞爆还混入噪音K 太小漏掉答案。调 K 是 RAG 工程里最日常的「玄学」。BM25 / TF-IDF老派关键词匹配本质是强化版CtrlF。不懂联想但精确可靠专治「专有名词、型号、编号」这类向量容易眼瞎的场景。Rerank重排序初筛可能把「关系户」排前面。于是请个更贵的评委cross-encoder把 Top 几十条再看一遍把真命天子踢到最前。Context Window上下文窗口学霸一次能看多少字。塞太多小抄会「内存溢出」其实是窗口装不下。三、检索三兄弟老实人、文艺青年和组合拳稀疏检索BM25——老实人只会认字面关键词对上了就给你不懂言外之意——你搜「汽车」它绝不给你「座驾」。稠密检索Embedding——文艺青年懂语义懂近义但偶尔「想太多」——你搜精确型号「BCM-331」它给你一筐语义相近、型号全错的东西。混合检索Hybrid RRF——让老实人和文艺青年组队一个管字面一个管内涵最后由RRF倒数排名融合当裁判合并排名。这是生产环境的「基本盘」。最后再来一道Rerank终审齐活。四、进阶算法变体各路「外挂」Self-RAG模型的自我怀疑人格自问「要不要搜搜得准不准要不要换个角度」全程自纠错。CRAG给检索装个质检员质检不合格直接打回回退 Web 搜索重来。HyDE先让模型瞎编一个假设答案再拿这个「假的」去搜真的——「先射箭再画靶」专治短查询信息量不足。RAG-Fusion / Multi-Query一个问题拆成好几个问法并行搜再融合——广撒网多捞鱼。GraphRAG把知识建成关系网知识图谱专治「隔着三层关系的八卦」A 和 B 合作、B 的老板是 C那 A 和 C这种向量天然抓瞎。RAPTOR文档做成分层摘要树「大事看梗概、小事看细节」。Agentic RAG给 RAG 装上大脑和手脚能拆解、多步检索、调工具自己规划自己干——当下最卷的方向。五、怎么知道它干得好不好评估分「检索」和「生成」两半先看检索端有没有把有用的小抄翻出来RecallKTop-K 里捞到了多少比例的相关文档想「全捞到」。MRR平均倒数排名第一条相关文档排在第几位越靠前越好。Hit Rate命中率Top-K 里有没有至少一条相关只看「有/无」。nDCG排序质量看整体排序质量位置 相关性一起算。生成端则是 RAGAS 框架里的RAG TriadFaithfulness 忠实度答案有没有忠于检索到的原文防「夹带私货」。Answer Relevance 相关性答案切不切题。Context Relevance切题度检索到的上下文是不是真相关。一句话总结检索看「抄没抄到点子上」生成看「编没编瞎话」。六、给落地者的忠告少走弯路版① 别一上来就 GraphRAG / Agentic。先用「混合检索 RRF Rerank」把 90% 场景跑通剩下再上重武器。② 切分和 Embedding 是地基。地基歪了后面检索再花哨也白搭。③ 评估指标前置。没有 RAG Triad 兜底调参就是「玄学 × 玄学」越调越糊涂。④ 能精确匹配的用关键词能懂语义的用向量两个都上最稳。学AI大模型的正确顺序千万不要搞错了2026年AI风口已来各行各业的AI渗透肉眼可见超多公司要么转型做AI相关产品要么高薪挖AI技术人才机遇直接摆在眼前有往AI方向发展或者本身有后端编程基础的朋友直接冲AI大模型应用开发转岗超合适就算暂时不打算转岗了解大模型、RAG、Prompt、Agent这些热门概念能上手做简单项目也绝对是求职加分王给大家整理了超全最新的AI大模型应用开发学习清单和资料手把手帮你快速入门学习路线:✅大模型基础认知—大模型核心原理、发展历程、主流模型GPT、文心一言等特点解析✅核心技术模块—RAG检索增强生成、Prompt工程实战、Agent智能体开发逻辑✅开发基础能力—Python进阶、API接口调用、大模型开发框架LangChain等实操✅应用场景开发—智能问答系统、企业知识库、AIGC内容生成工具、行业定制化大模型应用✅项目落地流程—需求拆解、技术选型、模型调优、测试上线、运维迭代✅面试求职冲刺—岗位JD解析、简历AI项目包装、高频面试题汇总、模拟面经以上6大模块看似清晰好上手实则每个部分都有扎实的核心内容需要吃透我把大模型的学习全流程已经整理好了抓住AI时代风口轻松解锁职业新可能希望大家都能把握机遇实现薪资/职业跃迁这份完整版的大模型 AI 学习资料已经上传CSDN朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
你有没有被 AI 这样坑过——你问它「咱们内部 V3 接口怎么调」它用最自信的语气给你编出一个根本不存在的参数还贴心地附上一段「示例代码」。你信了上线翻车了。回去质问它它依然信誓旦旦。这真不是它坏是它「嘴硬」——大模型只记得训练截止那天的事之后的一切一概不知却打死不肯承认「我不会」。这个毛病专业上叫幻觉Hallucination。而对付它的解法今天一次讲透RAG。一句话看懂 RAGRAGRetrieval-Augmented Generation检索增强生成 别让模型凭空编让它先翻书、再开口先查资料查到再答抄了还要标出处。 本文地图① 三阶段图书馆、学霸和小抄② 术语黑话词典面试/评审装 X 必备③ 检索三兄弟老实人、文艺青年和组合拳④ 进阶算法变体各路「外挂」⑤ 怎么知道它干得好不好⑥ 给落地者的忠告一、三阶段图书馆、学霸和小抄整个 RAG 就三步你可以把它想象成一座图书馆① 索引Indexing管理员把一本本书拆成一页页、甚至一小段贴好标签按「主题相似度」摆上书架。这就是Chunking切分 Embedding向量化 向量库。② 检索Retrieval你抛来一个问题管理员瞬间翻出最相关的几页递给你Top-K条「小抄」。③ 生成Generation学霸拿着小抄结合你的问题组织语言还顺手把「哪一页」标成引用。二、术语黑话词典面试/评审装 X 必备Chunking文档切分把长文档切成小段。切太碎——学霸看不懂上下文切太大——一段塞八百个主题检索等于没检。这是门「切肉」的艺术切多了怕疼切少了怕噎。Embedding向量化把一句话变成一串数字让语义相近的词在向量空间里当邻居。于是「猫」和「喵星人」住隔壁「猫」和「路由器」被发配到两个星系。Vector DB向量数据库专门存向量的「高级 Excel」。你丢个向量进去它几毫秒告诉你「谁和你最像」。Milvus、FAISS、Chroma、Qdrant名字一个比一个科幻。余弦相似度衡量两个向量多「投缘」的尺子——不看长度只看夹角夹角越小越有缘。ANN / HNSW近似最近邻向量太多时穷举比对会慢到怀疑人生。HNSW 用「图 跳表」的思路牺牲 0.1% 精度换 99% 速度典型的「差不多先生」哲学。Top-K一次给学霸塞几条小抄。K 太大上下文塞爆还混入噪音K 太小漏掉答案。调 K 是 RAG 工程里最日常的「玄学」。BM25 / TF-IDF老派关键词匹配本质是强化版CtrlF。不懂联想但精确可靠专治「专有名词、型号、编号」这类向量容易眼瞎的场景。Rerank重排序初筛可能把「关系户」排前面。于是请个更贵的评委cross-encoder把 Top 几十条再看一遍把真命天子踢到最前。Context Window上下文窗口学霸一次能看多少字。塞太多小抄会「内存溢出」其实是窗口装不下。三、检索三兄弟老实人、文艺青年和组合拳稀疏检索BM25——老实人只会认字面关键词对上了就给你不懂言外之意——你搜「汽车」它绝不给你「座驾」。稠密检索Embedding——文艺青年懂语义懂近义但偶尔「想太多」——你搜精确型号「BCM-331」它给你一筐语义相近、型号全错的东西。混合检索Hybrid RRF——让老实人和文艺青年组队一个管字面一个管内涵最后由RRF倒数排名融合当裁判合并排名。这是生产环境的「基本盘」。最后再来一道Rerank终审齐活。四、进阶算法变体各路「外挂」Self-RAG模型的自我怀疑人格自问「要不要搜搜得准不准要不要换个角度」全程自纠错。CRAG给检索装个质检员质检不合格直接打回回退 Web 搜索重来。HyDE先让模型瞎编一个假设答案再拿这个「假的」去搜真的——「先射箭再画靶」专治短查询信息量不足。RAG-Fusion / Multi-Query一个问题拆成好几个问法并行搜再融合——广撒网多捞鱼。GraphRAG把知识建成关系网知识图谱专治「隔着三层关系的八卦」A 和 B 合作、B 的老板是 C那 A 和 C这种向量天然抓瞎。RAPTOR文档做成分层摘要树「大事看梗概、小事看细节」。Agentic RAG给 RAG 装上大脑和手脚能拆解、多步检索、调工具自己规划自己干——当下最卷的方向。五、怎么知道它干得好不好评估分「检索」和「生成」两半先看检索端有没有把有用的小抄翻出来RecallKTop-K 里捞到了多少比例的相关文档想「全捞到」。MRR平均倒数排名第一条相关文档排在第几位越靠前越好。Hit Rate命中率Top-K 里有没有至少一条相关只看「有/无」。nDCG排序质量看整体排序质量位置 相关性一起算。生成端则是 RAGAS 框架里的RAG TriadFaithfulness 忠实度答案有没有忠于检索到的原文防「夹带私货」。Answer Relevance 相关性答案切不切题。Context Relevance切题度检索到的上下文是不是真相关。一句话总结检索看「抄没抄到点子上」生成看「编没编瞎话」。六、给落地者的忠告少走弯路版① 别一上来就 GraphRAG / Agentic。先用「混合检索 RRF Rerank」把 90% 场景跑通剩下再上重武器。② 切分和 Embedding 是地基。地基歪了后面检索再花哨也白搭。③ 评估指标前置。没有 RAG Triad 兜底调参就是「玄学 × 玄学」越调越糊涂。④ 能精确匹配的用关键词能懂语义的用向量两个都上最稳。学AI大模型的正确顺序千万不要搞错了2026年AI风口已来各行各业的AI渗透肉眼可见超多公司要么转型做AI相关产品要么高薪挖AI技术人才机遇直接摆在眼前有往AI方向发展或者本身有后端编程基础的朋友直接冲AI大模型应用开发转岗超合适就算暂时不打算转岗了解大模型、RAG、Prompt、Agent这些热门概念能上手做简单项目也绝对是求职加分王给大家整理了超全最新的AI大模型应用开发学习清单和资料手把手帮你快速入门学习路线:✅大模型基础认知—大模型核心原理、发展历程、主流模型GPT、文心一言等特点解析✅核心技术模块—RAG检索增强生成、Prompt工程实战、Agent智能体开发逻辑✅开发基础能力—Python进阶、API接口调用、大模型开发框架LangChain等实操✅应用场景开发—智能问答系统、企业知识库、AIGC内容生成工具、行业定制化大模型应用✅项目落地流程—需求拆解、技术选型、模型调优、测试上线、运维迭代✅面试求职冲刺—岗位JD解析、简历AI项目包装、高频面试题汇总、模拟面经以上6大模块看似清晰好上手实则每个部分都有扎实的核心内容需要吃透我把大模型的学习全流程已经整理好了抓住AI时代风口轻松解锁职业新可能希望大家都能把握机遇实现薪资/职业跃迁这份完整版的大模型 AI 学习资料已经上传CSDN朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
![[AIGC]VSCode GitHub 靠什么赚钱，记录一些技术出圈感悟：从 Copilot 到 TaoToken 的 API 通道观察](http://pic.xiahunao.cn/yaotu/[AIGC]VSCode GitHub 靠什么赚钱，记录一些技术出圈感悟：从 Copilot 到 TaoToken 的 API 通道观察)
