猫眼电影记者 特里姆 报道首次登录送91元红包

大模型最广泛的应用如 ChatGPT、Deepseek、千问、豆包、Gemini 等通常会连接互联网进行检索增强生成（RAG）来产生用户问题的答案。随着多模态大模型（MLLMs）的崛起，大模型的主流技术之一 RAG 迅速向多模态发展，形成多模态检索增强生成（MM-RAG）这个新兴领域。ChatGPT、千问、豆包、Gemini 都开始允许用户提供文字、图片等多种模态的输入。

然而，目前对于 MM-RAG 的应用和研究都还处于非常初级的阶段，现有的 MM-RAG 研究以及综述论文主要聚焦于文本和图像等少数模态组合；音频、视频、代码、表格、知识图谱、3D 对象等多种模态的组合均可用于检索增强生成，却仅有很少的探索和研究。这使得研究者和开发者难以全面把握 MM-RAG 的技术脉络和广阔的应用空间。

来自华中科技大学、复旦大学、中国电信、美国伊利诺伊大学芝加哥分校的研究者们共同发布了一篇全面覆盖几乎所有模态作为输入和输出组合的MM-RAG综述来全面且系统化地阐述这个广阔的研究和应用空间。

论文标题：A Comprehensive Survey on Multimodal RAG: All Combinations of Modalities as Input and OutputTechRxiv: https://doi.org/10.36227/techrxiv.176341513.38473003/v2GitHub 项目主页: https://github.com/INTREBID/Awesome-MM-RAG

该论文的最大亮点在于其前所未有的广度：

它首次覆盖了几乎所有可能使用的模态组合作为输入和输出，包括文本、图像、音频、视频、代码、表格、知识图谱、3D 对象等。

通过这种全面的梳理，作者们首先揭示了 MM-RAG 领域中庞大的潜在输入 - 输出模态组合空间，并指出了其中尚未被充分探索的空白（如表 1 所示）。在作者提出的 54 种潜在组合中，目前只有 18 种组合存在已有研究（表 1 中绿色对勾的格子），许多极具应用价值的组合 —— 例如 “文本 + 视频作为输入，生成视频作为输出”—— 仍是一片亟待开拓的蓝海。

表 1：基于输入 - 输出模态组合的 MM-RAG 分类法

在此基础上，作者们构建了一个基于输入 - 输出模态组合的全新 MM-RAG 分类法，不仅系统性地组织了现有研究，还清晰展示了不同 MM-RAG 系统的核心技术组件（如表 2 所示），为后续研究提供了统一框架和方法参考。

表 2不同输入输出模态下多模态 RAG 的核心技术组件、任务和应用

四大关键阶段剖析 MM-RAG 工作流

基于这个新的分类法，该综述深入分析了MM-RAG系统的工作流程，并将其划分为四个关键阶段（如图 1 所示）：

图 1 MM-RAG 的工作流

a)预检索 (Pre-retrieval)： 数据组织和查询的准备工作。

b)检索 (Retrieval)： 高效准确地从海量多模态知识库中找到相关信息。

c)增强 (Augmentation)： 将检索到的多模态信息有效地融入到大模型中。

d)生成 (Generation)： 根据输入和增强信息生成高质量的多模态输出。

论文详细总结了每个阶段的常用方法，并讨论了对于不同模态针对性的优化策略，为构建高性能的MM-RAG系统提供了实用的技术指导。

一站式指南：

训练、评估与应用前瞻

除了技术流程，该综述还提供了构建 MM-RAG 系统的一站式指南：

训练策略： 讨论了 MM-RAG 系统的训练方法，以最大化其检索和生成能力。评估方法： 总结了现有的MM-RAG 评估指标和 Benchmark，帮助研究者评估系统性能。应用与未来： 探讨了 MM-RAG 在多个领域的潜在应用，并指出了未来的重要研究方向。

作为首个覆盖所有常见输入 - 输出模态组合、并系统化解析了 MM-RAG 的工作流、组件、训练、评估等核心技术的综述，该论文不仅为研究者提供了索引式的知识入口，也为产业应用提供了全面的技术参考。论文作者还提供了持续更新的资源库，方便读者追踪最新进展。

  时事1：钻石娱乐登录网址

  12月25日,甘肃有苹果，不再深闺藏,面对行业转型，北京人寿提出了颇具前瞻性的“保险+康养”双轮驱动战略，并推出了“首善人家”服务品牌，试图构建“医、康、养、保”生态体系。公司通过轻资产合作模式，快速挂牌了多家康养机构，并推出旅居卡等产品，取得了一定的保费带动效果。这一战略瞄准了老龄化社会的巨大需求，方向正确。,鸭博体育网站。

  12月25日,香港大埔火灾调查新进展：已初步确定起火位置,哈《实业报》总编辑科尔茹姆巴耶夫表示，中亚-中国峰会令人期待的将是中哈之间的互免签证制度。签证便利化必定对两国之间的商业往来产生积极影响。排队和长时间等待签证的情况将逐渐消失，密切的人员交流将推动经贸合作发展。另外，取消签证将对旅游业的发展带来有利影响，包括医疗旅游。传统的中医在哈萨克斯坦民众中可能会变得非常流行。,热血无赖打麻将,可以赢钱的斗地主app,盛大新游戏。

  时事2：贝克街真人密室逃脱(海悦国际店)怎么样

  12月25日,660亿人次跨区域流动！2025年这些“亿级交通项目”你参与了几个？,在该观点中，还提出了对“超级周期”的宏观判断。其认为，人生发财往往依赖康波周期：2006年前后，中国经济高速增长推动铜价上涨四至五倍；2021年前后，新能源汽车产业爆发带动锂价上涨约20倍。基于此，其提出疑问——由储能与算力共同驱动的有色金属超级周期，是否在2025年仍处于起点阶段，而真正的主升浪或将出现在2026年。,澳门威斯尼人在线看片,大满贯平台官网,沙巴体育滚球结算时间。

  12月25日,第三届中国侨智发展大会开幕 首批“侨智驿站”获授牌,此后，靳东多次利用职务便利，在项目承揽、项目实施、国有资源经营权承包等事项中为商人老板谋取利益并收受好处。2012年下半年，时任若尔盖县委副书记、县政府县长的靳东收下了项目承建商李某某用黑色旅行包送上的“水果”——100万元现金，这是他单笔受贿金额最大的一次。他把这个旅行包放在卧室的床下，陆续用于炒股、购车和个人日常开支。,世界杯买球是合法的嘛,澳门电子游艺推荐,抢庄牛牛娱乐棋牌。

  时事3：pt游戏下载

  12月25日,专访东盟贸促会会长：3.0时代，中国与东盟合作如何开新局？,特朗普 4 月演讲中两项专项关税承诺至今仍未兑现，分别针对制药企业与芯片制造商。,嘉鑫国际,银河国际城开户,世界杯买球首页怎么看。

  12月25日,王毅：台湾地位已被“七重锁定”,根据2022年公布的第二批“双一流”建设高校名单，全国共新增7所高校，其中3所均来自广东，可谓“最大赢家”。广东全省入围“双一流”建设名单的高校数量也从5所增加到8所，排名从全国并列第7位跃升至并列第4位。,澳门皇冠crown官方app,ayx爱游戏官网注册,世界杯买球app澳门直播。

  时事4：每个棋牌室都能玩德州吗

  12月25日,意大利：米兰冬奥会火炬本土传递在罗马启动,哈萨克斯坦《时代报》不久前发表的文章《哈萨克斯坦与朋友一起前进》写道，哈外交部计划5月与中国签署一份政府间互免签证协定，这不仅将为哈萨克斯坦公民在各个领域的生活开辟更加广阔的前景，而且将进一步加强两国在“一带一路”倡议框架内的合作。,天博app官网入口App,亚星官网登录,奥博体育官网入口下载。

  12月25日,危险货物运输车辆安全技术条件新国标明年7月1日施行 “智能+结构”双升级 提升主动预防能力,财政部、中国人民银行定于2025年12月26日上午9：50至10：20，通过中国人民银行中央国库现金管理商业银行定期存款业务系统进行2025年中央国库现金管理商业银行定期存款（十四期）招投标。本期操作量600亿元，期限14天，起息日为2025年12月26日，到期日为2026年1月9日（遇节假日顺延），以利率招标、多重价位中标方式面向中央国库现金管理商业银行定期存款业务参与银行进行招投标。,可以手机赌博的游戏,最好玩的抢庄牛牛,盛世专业购彩平台。