检索增强生成 (RAG)
AI / MCP定义
RAG 是一种将信息检索与文本生成相结合的 AI 架构。它先从外部来源检索相关文档，再将其作为上下文供语言模型生成准确且有依据的回答。
与 CrawlForge 的关联
RAG 系统需要高质量的源内容才能良好运作。垃圾进则垃圾出——如果检索到的文档是夹杂导航菜单和广告的杂乱 HTML，生成的答案就会受影响。干净的内容提取是任何 RAG 流水线的关键组成部分。
CrawlForge 的 extract_content 和 extract_text 等工具会返回剥离样板内容的干净结构化内容。这使它们成为构建需要摄入网页内容的 RAG 流水线的理想选择。将它们与 deep_research 搭配，即可实现内置冲突检测的多源检索。