数码之家

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
查看: 624|回复: 2

[产品] 华硕整了个AI U盘!40TOPS算力塞进去,本地跑大模型不用云

[复制链接]
发表于 2026-4-3 19:11:47 | 显示全部楼层 |阅读模式
哎,各位经常折腾电脑的、搞软件开发的,还有单纯好奇未来科技会往哪儿发展的伙计们,赶紧凑过来看看这个!我今儿个上午刷科技新闻的时候,眼皮底下“唰”地蹦出来一条,看完标题我当时就“嗯?”了一声,心说这玩意儿要真像说的那么神,那以后咱们玩AI的姿势,可能就得彻底变一变了。

啥新闻这么玄乎啊?就是那个咱们装电脑、选笔记本都绕不开的牌子——华硕(ASUS),它不声不响地,在今天,也就是2026年4月3日,突然发布了一个叫“UGen300”的小东西。官方给它起了个名,叫“USB AI加速器”。光听这名儿你可能还没感觉,我跟你形容一下它长啥样:这东西大概105毫米长,50毫米宽,18毫米厚,就跟一个稍微胖点儿的高速U盘或者迷你移动硬盘差不多,你完全可以揣兜里带走。

那它到底是个啥呢?简单粗暴地说,华硕想出来的点子就是:做个U盘,但里面不存电影,存的是“AI算力”。根据他们官方新闻稿里的说法,这UGen300是他们家搞出来的头一个用USB接口的AI设备(原文写的是“the first AI USB device from ASUS”)。意思就是,你不需要懂什么复杂配置,只要你的电脑、笔记本,甚至可能是某些安卓设备,有个USB-C口,你把它往上一插,嘿,你这台设备就瞬间获得了一个专门处理AI任务的“外置大脑”。

他们同时还准备了一个M.2接口的版本,适合那些喜欢自己组装迷你主机、或者想在设备内部做升级的朋友。但今天咱们主要唠这个USB版的,因为它这个“即插即用”的概念实在太接地气了,打破了挺多人的想象。

你可能会问,这么个小玩意儿,凭啥敢说自己是“AI加速器”呢?关键就在它肚子里藏着的核心。它用的不是英特尔或者AMD的通用CPU,而是一颗专门为AI计算生的处理器,叫 “Hailo-10H”。这颗芯片能提供高达40 TOPS的专用AI算力。TOPS这个词儿你可能不熟,你就把它理解成专门用来干“AI理解”这种活的“力气单位”,比如让它理解你说的一段话、根据描述生成一张图、或者分析一段视频里有什么。这个“40”的力气,按照华硕的说法,已经足够在本地跑起来一些大型语言模型(就是常说的LLM)和视觉语言模型(VLM)了。

光有“大脑”不够,还得有“记忆”来临时存放要处理的数据。所以这U盘里头,自己还焊了8GB的LPDDR4内存,专门伺候那颗AI芯片,不占用你电脑本身的内存。它通过一个USB-C口和你的设备连接,而且最绝的是,一般干活的时候,整个玩意儿的功耗才2.5瓦,非常省电。他们号称这设计是“即插即用”,能跨平台支持Windows、Linux和安卓系统,而且主流的AI开发框架,像TensorFlow, PyTorch, ONNX,它都支持,开箱就能用,不用折腾。

这个点子可不是我瞎吹,生产那颗Hailo-10H芯片的公司,叫Hailo,他们的首席营收官,一个叫马克斯·格洛弗(Max Glover)的老兄,在新闻稿里可得意了。他原话是这么说的:“通过把Hailo-10H集成到一个无处不在的USB设备里,华硕这是把AI和生成式AI的完整能力带给了每一个人。” 他还说,很期待看到开发者社区怎么用这个即插即用的加速器去突破设备端AI的边界,并且认为这就是Hailo公司心目中AI该有的未来:容易获取、价格实惠、而且设计出来就是让谁都能上手构建东西的。

好了,愿景吹得再响,咱也得落回地上看看它到底能干啥,解决了啥实际痛点。新闻稿里把它夸了好几个方面,我给它归纳成三条,咱们一条条看:

第一条,他们主打一个“无与伦比的边缘生成式AI性能”。​ 这个“边缘”指的就是在你的设备本地,而不是遥远的云服务器上。这颗内置的40 TOPS算力的芯片,专门优化来处理像让大模型回答问题、理解图片内容这类“生成式AI”的活儿。它的工作方式,是给你设备本身的CPU,或者笔记本里可能带的那点微弱NPU(神经网络处理器)“打下手”,把最重、最吃资源的AI计算任务揽过来自己干。这么一来,你电脑本身的资源就解放了,不会一跑AI就卡成幻灯片。最大的好处就是:你可以在完全不上网的情况下,在本地跑AI推理。​ 你的数据、你的问题,全在你自己的机器上处理完,不用发给任何人。

跟咱们现在习惯的联网用AI相比,华硕列出了几个直白的优点:用这U盘,你不用交任何月租费(没有云服务订阅费),感觉不到任何网络延迟(因为压根不走网络),而且隐私性和可靠性极高——你的数据自始至终都没离开过你的设备。它能跑一些对算力有要求的应用,比如让AI帮你写段文字、总结一个长视频的核心内容、设置个事件触发、或者把语音指令转成具体操作等等。

第二条,那8GB的独立内存是个关键设计。​ 这内存是它自带的,不跟你电脑抢。这样做是为了让AI计算,特别是跑一些参数稍微多点的模型时,能更稳定、更流畅。这意味着,哪怕你手头是一台五六年前的老笔记本电脑,里面根本没有为AI优化过的任何硬件,你把这个U盘一插,它也能让这台“老家伙”比较像样地跑起一些本地AI工具了。它负责把所有“重体力活”搞定,让你的老电脑既能干AI的活,同时你还能聊个微信、开个网页,系统不至于被拖垮。

第三条,也就是最吸引普通用户的一点:极致的即插即用便利性。​ 一个USB 3.1 Gen 2 Type-C接口,就是现在手机、电脑上最常见的那种口,插上就用。他们的理想是把它做成一个“真正不管什么平台都能用的边缘AI加速器”,不管是消费电子还是工业设备,是Windows、Linux还是安卓,理论上插上就能识别。再加上对TensorFlow那些开发框架的原生支持,对于开发者来说,迁移和测试成本就低了很多。

那华硕觉得这玩意儿最适合谁用呢?新闻稿里明确点了三类人:开发者、教育工作者、以及做嵌入式解决方案的供应商。​ 说白了,就是那些需要一种灵活的、便携的、而且不算太贵的AI算力来源的人。比如,一个程序员想测试自己的AI模型在不同电脑上的效果,又不想依赖网速和云服务器;一个大学老师想让学生们都能亲手体验一下设备端AI应用,一人发一个“算力U盘”可能比升级一屋子电脑更便宜;或者一个小团队在研发智能摄像头、机器人,需要快速集成一个现成的AI处理模块,这个U盘形态的东西就非常容易整合。

为了让大家用起来更方便,华硕还说会给它搭配一个精简的软件生态。马上要推出的一个叫“UGen Utility”的工具软件,里面会预装超过100个训练好的AI模型,让用户能快速验证想法,几乎是零门槛上手。用户还能加入Hailo的开发者社区,里面有教程、参考设计,还能跟其他开发者交流,加速开发进程。

所以,咱们回过头来品品。华硕这个UGen300,本质上是在尝试把“专用AI算力”从一个需要装在机器内部、或者依赖远程服务器的“固定设施”,变成一个可以随身携带、即插即用的“标准化商品”。它瞄准的不是取代那些动辄几百TOPS算力的顶级显卡,而是在给海量的、本身AI能力不强甚至为零的设备(老旧电脑、轻薄本、工控机、特定的物联网设备等等),提供一个即时的、专门的、并且注重隐私和低延迟的AI算力外挂。

当然啦,想法很美好,实际用起来到底咋样,现在谁也不知道。比如,它这40 TOPS的算力在实际运行像Llama 3B或者7B这类模型时,生成速度到底能有多快?它的USB 3.1 Gen 2接口的带宽,会不会在传输大量数据时成为瓶颈?还有最关键的一点,这“算力U盘”到底卖多少钱?如果价格高高在上,那“可负担”和“带给每一个人”就成了一句空话。这些疑问,都得等实物上市,经过广大用户和评测机构实际折腾之后,才能有答案。

但无论如何,华硕这个方向指得确实挺有意思。它似乎在试探一条新的路径:让AI算力变得像移动电源一样,成为一种可以随时获取、按需插拔的“能量”,而不是必须内置于设备内部的“固定器官”。​ 如果这条路未来能走通,价格也能打下来,那或许真的能大大降低普通人体验和开发设备端AI的门槛。到那时候,可能真就应了那句老话:“AI不够,U盘来凑”。这个未来会不会来,咱们不妨一起蹲个后续看看。





本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
发表于 2026-4-3 20:34:52 | 显示全部楼层
游客请登录后查看回复内容
回复 支持 反对

使用道具 举报

发表于 2026-4-5 09:50:00 | 显示全部楼层
游客请登录后查看回复内容
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

APP|手机版|小黑屋|关于我们|联系我们|法律条款|数码之家-技术知识分享平台

闽公网安备35020502000485号

闽ICP备2021002735号-2

GMT+8, 2026-7-12 04:07 , Processed in 0.202801 second(s), 9 queries , Gzip On, Redis On.

Powered by Discuz!

© MyDigit.Net Since 2006

快速回复 返回顶部 返回列表