升级:版神经,网络引擎

2025-07-22 03:33:50      来源:浙江卫视

IT之家7月8日消息,据小米技术消息,计算机视觉国际大会ICCV2025论文录用结果公布,小米两篇论文凭借创新性研究成果成功入选:视频理解大模型核心技术Q-Frame,推出行业首个动态帧选择与分辨率自适应框架,实现即插即用;持续学习框架AnalyticSubspaceRouting(Any-SSR),成功解决大语言模型在持续学习领域的核心难题「灾难性遗忘」问题。

据介绍,计算机视觉国际大会ICCV与国际计算机视觉与模式识别会议CVPR、欧洲计算机视觉国际会议ECCV并称为计算机领域世界三大顶级学术会议,每两年举办一次。其中,ICCV2025年投稿量达11239篇,录用率为24%。上述两篇论文代表了小米AI团队在基座大模型领域的最新探索成果,其中视频理解大模型核心技术Q-Frame由小米AI团队全面自研,大模型持续学习框架Any-SSR由小米AI团队联合华南理工大学攻关。

全自研视频理解大模型核心技术Q-Frame

在视频理解大模型(Video-LLMs)的研究中,小米AI团队针对传统“均匀帧采样”处理方式存在时间碎片化信息丢失、盲目采样及算力浪费等问题痛点,推出全自研的Q-Frame核心技术,该成果以论文《Q-Frame:Query-awareFrameSelectionandMulti-ResolutionAdaptationforVideo-LLMs》入选ICCV2025。

Q-Frame作为视频理解大模型核心技术,是行业首个动态帧选择与分辨率自适应框架,也是首个无需训练,市面上各类视频理解大模型基座均可即插即用的算法框架。Q-Frame拥有三大行业首次创新,能够精准理解视频内容与用户问题,通过精准捕捉跟用户问题最相关的视频关键内容,将有效信息量提升5倍:

跨模态查询检索(Cross-modalQueryRetrieval,CQR)

查询感知帧选择(Query-awareFrameSelection,QFS)

多分辨率自适应(Multi-ResolutionAdaptation,MRA)

在MLVU评测集上,Q-Frame使Qwen2-VL的理解准确率从55.5%提升至65.4%;在LongVideoBench上,让GPT-4o的准确率从53.3%提升到58.6%。此外,其多分辨率自适应特性可根据内容重要性和查询需求动态调整帧分辨率,避免算力浪费。

通过采用动态查询感知帧选择和多分辨率自适应,Q-Frame还有效解决了「均匀帧采样」策略下时间碎片化的信息丢失、问题无感知的盲目采样和分辨率一刀切的算力浪费三大难题。与传统均匀选帧、统一处理方式不同,在有限计算资源下,Q-Frame可使模型更高效准确理解视频。

此外,Q-Frame具有即插即用(plug-and-play)的特点,可与市场上现有的各类视频理解大模型兼容,无论是开源模型还是闭源模型,无需对模型进行额外的训练或微调。以VILA-V1.5和Qwen2-VL等开源模型为例,在集成Q-Frame后,这些模型在视频理解任务上的性能均得到了显著提升。同样,对于闭源的GPT-4o模型,Q-Frame也展现出了良好的兼容性,进一步证明了其广泛的适用性。

Q-Frame在小米「人车家全生态」战略中有着多元的应用场景,目前正在持续探索和落地:小米YU7发布时提到的哨兵模式中,能够分清楚普通的风吹草动和可能带来剐蹭、碰撞的危险行为;智能家居中,能够在监控画面中找到最关键的画面,帮助用户解答问题;在小爱视频问答场景中,可以直接定位到视频中能够解答问题的片段开始播放等。

大模型持续学习框架Any-SSR

在大语言模型(LLMs)持续学习(ContinualLearning,CL)领域,往往会因新任务的学习而导致对旧任务知识的遗忘,即灾难性遗忘问题。小米AI团队联合华南理工大学针对这一难题开展研究,其成果《AnalyticSubspaceRouting:HowRecursiveLeastSquaresWorksinContinualLearningofLargeLanguageModel》成功入选ICCV2025。

Any-SSR框架作为行业首个将递归最小二乘法(RecursiveLeastSquares,RLS)引入大语言模型持续学习的技术框架,通过分析路由机制,动态地把不同任务分配到独立子空间学习,避免任务间知识干扰,创新性解决了大语言模型持续学习中灾难性遗忘问题。同时,利用低秩适应(Low-RankAdaptation,LoRA)与分析路由相结合的方式,实现了新旧知识的无缝整合与动态学习。

在一系列技术创新的基础上,Any-SSR方法实现了“近乎完美”的知识保留(即不遗忘),同时能无缝地学习新知识。在实验中,Any-SSR在TRACE基准测试上的表现显著优于其他方法,包括多任务学习(MTL)等,不仅在整体性能(OP)上取得了优异成绩,还实现了零反向知识转移(BWT)。

IT之家从小米技术获悉,过去五年,小米集团研发投入约1020亿元,在2025年的300亿研发投入中,大约有四分之一将被用于AI相关方向。未来五年(2026-2030年),小米还将在核心技术赛道再投入2000亿元。

  去年,民航局、国家发改委联合发文《关于推进国际航空枢纽建设的指导意见》,画出国际航空枢纽的蓝图,提出“3+7+N”国际航空枢纽功能体系。

责编:前宇达编辑

蔡依林新歌首秀

  随着参与网球运动的人逐渐增多,中国网球的基础设施也在不断完善。纪宁告诉《环球时报》记者:“我们在做一个项目,在北京朝阳区规划一个‘大满贯网球文化公园’,将汇集所有大满贯要素。人们既能在此观看全球顶级赛事,也能在场地上训练和比赛。”纪宁说,这仅是一个案例,但从中可以窥见中国网球运动基础设施越来越完善,也越来越专业化。作为体育产业的参与者与观察者,纪宁表示,不仅北京,全国各地网球运动设施也发展得越来越好。

经常侧卧的人正在悄悄长皱纹

  参与运营北京奥林匹克森林公园西畔的国家网球中心两片红土网球场地的维宁体育创始人、CEO纪宁8日告诉《环球时报》记者:“本就稀缺的网球场馆在郑钦文夺冠后变得更加炙手可热,现在根本都约不上。”

郭晓婷聊斋的本子全部吻上来

  美团数据也显示,7月以来,“网球”搜索量同比去年增长超60%。网球体验课、网球培训季度课包在平台热销,美团上网球运动相关团购订单量同比激增172%。

一年电费万炫富网红被禁言

  据官网介绍,四川绵阳是我国重要国防军工和科研生产基地,邓稼先、于敏等9位“两弹一星”元勋和成千上万的科技精英在这里“干惊天动地事、做隐姓埋名人”。

小米悠悠

  对抗旱工作作出安排部署。印发《关于做好当前抗旱工作的紧急通知》《关于切实做好抗旱播种保苗工作的紧急通知》等文件,就抗旱播种、田间管理、旱情监测、水源调度等提出要求。严格落实以气象预报为先导的应急响应联动机制,组织相关部门滚动开展旱情会商,分析研判旱情发展趋势。及时启动省级抗旱应急四级响应,14个省辖市先后启动本地区抗旱应急响应机制,全省进入抗旱应急状态。

上百名中国公民从以撤离至埃及境内

  张先生认为,网球明星的出现与整个网球运动以及网球经济的发展是相互促进的,并形成正向反馈。他说,明星越多,示范效应就越强,就会更加刺激网球运动的发展,网球经济热度也会越高。而打网球的人多了,就会涌现出更多的网球明星。/p>

奔跑吧

  去年,民航局、国家发改委联合发文《关于推进国际航空枢纽建设的指导意见》,画出国际航空枢纽的蓝图,提出“3+7+N”国际航空枢纽功能体系。/p>

岁女生打三份工的月总收入

  体量不及西安的兰州,也拿出大手笔。T3航站楼面积40万平方米,综合交通中心27万平方米,是甘肃民航发展史上规模最大的工程。