遏制 AI 幻觉:苹果 DeepMMSearch-R1 论文揭秘“图像裁剪”搜索术

视野AI 1 月 15 日消息,科技媒体 Appleinsider 今天(1 月 15 日)发布博文,报道称苹果发表重磅研究论文,详细介绍名为 DeepMMSearch-R1 的 AI 模型,重点优化 AI 在复杂视觉场景下的搜索逻辑,用“裁剪”治愈 AI 幻觉。

针对现有 AI 模型在处理复杂视觉信息时常出现的“答非所问”或“漏看”问题,苹果推出了 DeepMMSearch-R1 模型。传统模型在面对“图中左上角那只鸟的最高时速是多少”这类复合问题时,往往因无法聚焦局部细节而给出错误的平均数据。

DeepMMSearch-R1 引入了独特的“视觉定位工具(Grounding Tool)”,能够主动裁剪图片以剔除干扰信息,先精准识别微小目标,再进行针对性的网络搜索验证,从而确保答案的事实准确性。

为确保模型仅在必要时才启用裁剪功能以节省算力,研究人员采用了“监督微调(SFT)+ 在线强化学习(RL)”的组合训练法。SFT 负责教会模型“不乱剪”,而 RL 则提升了工具调用的效率。

测试数据显示,该模型在处理需精准图文对应的问题上,表现显著优于目前的 RAG(检索增强生成)工作流及基于提示词的搜索智能体,成功解决了 AI 在常识性事实检索中的“偷懒”现象。

视野AI附上参考地址

  • DeepMMSearch-R1: Empowering Multimodal LLMs in Multimodal Web Search

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,视野AI所有文章均包含本声明。

相关推荐:

东西问丨从祆神到关帝:一座山西古楼藏着怎样的文明互鉴密码?

  太原6月24日电题:从祆神到关帝:一座山西古楼藏着怎样的文明互鉴密码?   ——专访山西大学美术学院教授王志俊   记者杨杰英   山西介休祆神楼,是中国境内唯一保存至今的祆教建筑遗存。其屋檐下的牛头、骆驼、胡人琉璃像与汉式楼阁框架共存,呈现出独特的外来文化融合景观。这座建筑为何能保留异域痕迹,...

《广告引证内容执法指南》出台,进一步遏制“大字吸睛、小字免责”等违法广告

感谢视野AI网友简介官、麻辣清补凉、西窗的线索投递! 视野AI6月12日消息,市场监管总局聚焦商业广告引证内容,出台《广告引证内容执法指南》(以下简称《指南》),旨在进一步完善广告监管制度体系,规范市场监管部门广告引证内容监管工作,帮助广告活动主体提升广告引证内容合规能力。明确适用范围。《指南》明确...

多起案例曝光!涉“高薪”骗取兼职人员信息用于电诈

  中新经纬6月11日电“公安部网安局”11日消息,公民个人信息安全关乎每个人的合法权益与生活安宁,非法获取、泄露、贩卖公民个人信息不仅会扰乱社会秩序,更直接踩踏法律红线。公安网安部门始终保持对侵犯公民个人信息违法犯罪的严厉打击态度,以浙江宁波公安网安部门打击的6个侵犯公民个人信息违法犯罪案为例,为...

大模型如何真正告别幻觉?元认知或是破局的关键

大模型所表现出的“幻觉”——即以高度确信的语气输出明显违背事实的内容——始终是ai领域难以绕开的关键挑战,尤其在医疗、司法等容错率极低的垂直场景中,此类错误可能带来严重后果。 过去,行业主要依赖两种策略应对幻觉:其一,持续扩充训练语料,寄望于让模型覆盖更广的知识边界;其二,部署保守型响应机制,要求模...

历经 22 年,图像编辑软件 Paint.NET 终于拿到 paint.net 域名

感谢视野AI网友华南吴彦祖的线索投递! 视野AI5月31日消息,据外媒PCGamer今天报道,Paint.NET是互联网上最优秀的免费软件之一,这款类似Photoshop的图像编辑程序拥有许多收费订阅软件才有的功能,但完全免费,同时也比GIMP等类似产品更容易上手。奇怪的是,从2004年推出以来,P...

豆包频上热搜背后:AI的价值、幻觉与常识

为什么总是豆包上热搜 最近,“家长听豆包给婴儿每顿只喂60ml奶”的消息又把豆包送上了热搜。按照公开报道的说法,广西南宁一对新手爸妈因为缺乏育儿经验,根据豆包输出的建议,每顿只给满月婴儿喂60毫升奶,孩子因此经常哭闹。后续去医院复查黄疸时,医生得知日常奶量后很惊讶,立即纠正了这一做法。 不过,这件事...

再见“联网幻觉”!Cloudflare将推AI专属搜索引擎

在人工智能迅猛演进的今天,大模型面临的数据时效性短板持续引发关注。受限于训练数据的时间边界,ai常输出陈旧乃至失准的信息。为从根本上应对这一挑战,全球知名网络基础设施服务商cloudflare近日面向特定开发者群体上线了一项突破性网络检索能力,专为ai智能体设计,支持其直接访问最新公开网页内容。 ☞...

即梦AI生成的横屏视频能不能自动裁剪成竖屏比例而不丢失关键内容?

即梦AI无法全自动无损裁剪横屏视频适配竖屏平台,需通过四种路径实现:一、画布扩展+智能填充;二、图生视频阶段嵌入竖屏构图指令;三、网页端AI重构图功能定向优化;四、剪映内测版联动智能适配。 ☞☞☞AI智能聊天,问答助手,AI智能搜索,多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜ 如果您在即梦AI...

揭秘QoderWake背后的技术:为什么它的数字人动作如此流畅?

QoderWake数字人动作流畅性源于多层协同机制:Harness-First架构解耦意图与执行,五维经验复用高保真动作单元,事件总线实现多模态毫秒级同步,CLI预烘焙四路径.glb格式保障Web端低负载渲染。 ☞☞☞AI智能聊天,问答助手,AI智能搜索,多模态理解力帮你轻松跨越从0到1的创作门槛☜...