长文本杀不死RAG：SQL+向量驱动大模型和大数据新范式，MyScale AI数据库正式开源

AIGC动态欢迎阅读

原标题：长文本杀不死RAG：SQL+向量驱动大模型和大数据新范式，MyScale AI数据库正式开源
关键字：向量,数据库,数据,模型,系统
文章来源：机器之心
内容字数：7830字

内容摘要：

机器之心发布
机器之心编辑部大模型和 AI 数据库双剑合璧，成为大模型降本增效，大数据真正智能的制胜法宝。大模型（LLM）的浪潮已经涌动一年多了，尤其是以 GPT-4、Gemini-1.5、Claude-3 等为代表的模型你方唱罢我登场，成为当之无愧的风口。在 LLM 这条赛道上，有的研究专注于增加模型参数，有的疯狂卷多模态…… 这当中，LLM 处理上下文长度的能力成为了评估模型的一个重要指标，更强的上下文意味着模型拥有更强的检索性能。例如有些模型一口气可以处理高达 100 万 token 的能力让不少研究者开始思考，RAG （Retrieval-Augmented Generation，检索增强生成）方法还有存在的必要吗？
有人认为 RAG 要被长上下文模型了，但这种观点遭到了很多研究者和架构师的反驳。他们认为一方面数据结构复杂、定期变化，并且很多数据具有重要的时间维度，这些数据对于 LLM 来说可能太复杂。另一方面，企业、行业的海量异构数据，都放到上下文窗口中也不现实。而大模型和 AI 数据库结合，给生成式 AI 系统注入专业、精准和实时的信息，大幅降低了幻觉，并提高了系统的实

原文链接：长文本杀不死RAG：SQL+向量驱动大模型和大数据新范式，MyScale AI数据库正式开源