数码之家

 找回密码
 立即注册

QQ登录

只需一步,快速开始

微信登录

微信扫一扫,快速登录

搜索
查看: 61|回复: 0

[业界] 小米AI团队提出Any-SSR持续学习框架 让大模型“只记不忘”

[复制链接]
发表于 5 天前 | 显示全部楼层 |阅读模式

爱科技、爱创意、爱折腾、爱极致,我们都是技术控

您需要 登录 才可以下载或查看,没有账号?立即注册 微信登录

x

凤凰网科技讯 7月8日,小米技术正式公布,其两篇AI技术论文成功获得全球顶级学术会议认可。值得关注的是,这两篇论文实现了多个“行业首次”创新,成功解决大语言模型在持续学习领域的核心难题——「灾难性遗忘」问题。
据了解,其中一篇论文聚焦视频理解大模型研究,推出全自研的Q-Frame核心技术,创新性地推出了行业首个动态帧选择与分辨率自适应框架,也是首个无需训练,市面上各类视频理解大模型基座均可即插即用的算法框架。拥有三大行业首次创新:跨模态查询检索(Cross-modal Query Retrieval, CQR)、查询感知帧选择(Query-aware Frame Selection, QFS)、多分辨率自适应(Multi-Resolution Adaptation, MRA),通过精准捕捉跟用户问题最相关的视频关键内容,将有效信息量提升5倍。
另一篇论文则提出了持续学习框架Analytic Subspace Routing (Any-SSR),成功解决了大语言模型在持续学习领域的核心难题——“灾难性遗忘”问题。“灾难性遗忘”一直是困扰行业发展的关键瓶颈,严重影响了大语言模型在持续学习过程中的性能稳定性与知识积累能力。Any-SSR框架开创性地通过分析路由机制,动态地把不同任务分配到独立子空间学习,避免任务间知识干扰,同时,利用低秩适应(Low-Rank Adaptation, LoRA)与分析路由相结合的方式,实现了新旧知识的无缝整合与动态学习。
小米表示,小米集团在2025年的300亿研发投入中,大约有四分之一将被用于AI相关方向。未来五年(2026-2030年),小米还将在核心技术赛道再投入2000亿元。





您需要登录后才可以回帖 登录 | 立即注册 微信登录

本版积分规则

APP|手机版|小黑屋|关于我们|联系我们|法律条款|技术知识分享平台

闽公网安备35020502000485号

闽ICP备2021002735号-2

GMT+8, 2025-7-14 07:59 , Processed in 0.109200 second(s), 6 queries , Redis On.

Powered by Discuz!

© 2006-2025 MyDigit.Net

快速回复 返回顶部 返回列表