Meta 超级智能实验室推出新技术,使大模型 RAG 推理速度提升 30 倍
近日,Meta 公司宣布成立了全新的超级智能实验室(Meta Superintelligence Labs,MSL),并发表了首篇重要Me论文,研究成果显著提升了大语言模型在检索增强生成(RAG)任务中的推理速度,提升幅度达到了30倍以上。 这篇论文名为《REFRAG:Rtaethinking RAG based Decoding》,主要探讨如何让大型语言模型在执行 RAG 任务时,快速提炼出重要信息,以减少计算量 超并缩短反应时间,而同时保持准确性不变。Meta 超级智能实验室的成立标志着公司在人工智能领域的进一步发力,尤其是在当前激烈的竞争环境下,扎级智克伯格急需推动 AI 技术的发展。 Meta 超级智能实验室于今年6月正式成立,总部位于加利福尼亚州的门洛帕克,旨在研发超级智能技术。根据能实报道,扎克伯格在4月份对 Meta 最新发布的 Llama4模型表现不满,甚至要求员工加班加点来改进。这促使他成立了这个新实验室,并引入验室了大量顶尖人才,包括 Scale AI 的创始人 Alexandr Wang。 在实验室内部,团队被分为四个小组,分别负责大语言模型的研发、人工推出智能基础研究、产品技术落地以及基础设施的保障。REFRAG 框架的提出,正是实验室在优化大语言模型性能方面的第一步。 REFRAG 框新技架的核心理念是,通过一个轻量级模型将冗长的上下文内容压缩成摘要,减少解码器处理的输入信息。这种方法不仅加快了处理速度,还降低了计术,算量,提高了模型的效率。此外,研究团队还采用了 “持续预训练” 的方法,通过重建任务训练模型,以便在压缩信息的同时,尽量保留重要的细节。 经使大过全面测试,REFRAG 在多种任务中表现出色,尤其在时间延迟和吞吐量方面大幅提升。实验结果显示,REFRAG 在压缩比为16倍的情况下,模型能够在速度上超越之前的最先进模型 CEPE,并且在准确性上几乎没有损失。 这一创新成果为 Meta 在人工智能领域的发展注入了新的动力,同时 R也展示了其在提升大模型推理效率方面的前瞻性思考。 论文:https://arxiv.org/abs/2509.01092 划重点: MetAGa 成立超级智能实验室,旨在推动 AI 技术的发展。 新论文《REFRAG》实现 RAG 推理速度提升30倍,减少计算量。 REFRAG 框架通过信 推息压缩,提升大语言模型的效率与准确性。
- 最近发表
- 随机阅读
-
- 标签: 培源股份 汽车零部件 IPO 北交所
- 标签: 上汽大众
- 云计算开发:Python练习实例-计算字符串中子串出现的次数
- 2025云栖大会剧透来了!今年有这些AI新看点
- 标签: 昆仑芯 百度 科创板 AI芯片
- AI认知革命:从Ilya的“超级智能对齐”到智能体“不完备定理”
- 标签: 高通 Modular AIXPU AI软件
- 标签: 俞敏洪 新东方文旅 东方甄选 知识文旅
- 标签: 英伟达 Nemotron 3 MoE架构 强化学习
- 标签: 衢江公安 周某 非法控制计算机信息系统 文件上传漏洞
- 云安全日报210712:思科企业级呼叫和协作平台发现信息泄露漏洞,需要尽快升级
- 德国对谷歌展开两项反垄断调查 涉及用户数据收集
- 机密文件:谷歌计划在所有平台分销游戏 包括Mac
- 腾讯启动AI应用繁荣计划,超300家企业抢滩智能体新赛道
- 标签: OPPO FindX9Ultra 手机影像 软件缺陷
- 云安全日报210819:思科小型企业路由器发现执行任意代码漏洞,需要尽快升级
- 标签: 腾讯 喜马拉雅 市场监管总局 在线音频
- 报告:谷歌和苹果通过预装App控制美国用户使用习惯
- 一张图,详解大数据技术架构
- 韩国起亚和现代汽车称没有与苹果就电动汽车合作展开讨论
- 搜索
-
- 友情链接