智快网
快讯 行业 产业 汽车 科技 AI+ 热点

Meta前核心成员领衔!清北精英团队打造实时交互多模态新范式

2026-08-07来源:快讯编辑:瑞雪

在生成式AI狂飙突进的浪潮中,一家名为Noiz的初创团队正以颠覆性技术重新定义人机交互边界。当行业仍在追逐更高清的生成效果时,他们已将目光投向更复杂的命题——如何让AI从内容生成器进化为能感知环境、理解意图、实时响应的智能体。这个成立于2025年底的团队,用新一代实时可交互多模态模型,在成本与性能之间撕开一道突破口。

传统多模态模型的困境在于"生成易、交互难"。当前主流模型能根据提示词生成视频、图片或音频,却无法持续理解环境变化。用户每次操作都需重新触发生成流程,导致交互延迟高、连贯性差。更严峻的是,实时交互需要模型持续感知推理,推理成本较单次生成高出十倍以上,这成为技术落地的最大障碍。Noiz团队选择直面这个"不可能三角",在保证低延迟的同时,将推理成本压缩至行业平均水平的百分之一。

突破源于三个反常识的技术路径。团队摒弃将内容视为文本映射的传统框架,转而构建动态状态系统——每个交互场景都是持续更新的状态集合,用户操作会实时改变空间关系、运动轨迹等关键参数。在信息处理层面,他们跳过语言中转环节,直接围绕事件建立表征:通过分析"谁在移动""作用于什么对象"等核心关系,实现动作理解与反馈生成的同步进行。这种设计使模型能在毫秒级时间内完成场景推演,较传统方法提速两个数量级。

在工程架构上,Noiz选择"分层创新"策略。底层接入不同音视频生成模型作为基础能力,上层自主研发交互引擎负责状态维护、生成调度和低延迟推理。这种模块化设计既避免与科技巨头正面竞争,又能充分享受行业进步红利——当Seedance、可灵等模型提升画质或降低成本时,Noiz系统可无缝升级。团队自建的空间音视频采集管线与物理仿真系统,更将训练数据成本降低90%,为模型训练提供海量低成本素材。

技术突破迅速转化为商业价值。其产品noiz.ai上线半年即吸引两百万创作者,收入连续三个月保持80%环比增长。在开发者市场,语音技能包长期占据TTS类榜首,更与两家估值超十亿的3D生成平台达成合作,实现空间声场与几何场景的动态匹配。这种"创作者生态+企业服务"的双轮驱动模式,使系统每天处理数亿次交互请求,沉淀下的高质量行为数据又持续反哺模型优化。

团队背景揭示着技术野心的根源。创始人陈伟嘉(Vega)曾在meta主导ASR模型落地,后带领团队开发出GitHub 37k Stars的开源音频项目Mockingbird;联合创始人陈前作为连续创业者,擅长将技术转化为规模化产品;首席科学家Zeyue Tian作为港科大音频博士,其开源音乐模型ChatMusician曾获杨立昆转发。这个横跨学术界与产业界的团队,累计发表顶会论文超20篇,拥有多个万星开源项目,成员来自Google、Dolby、清华、北大等顶尖机构。

当行业仍在争论"生成质量更重要还是速度更重要"时,Noiz已开启新的竞赛维度。在他们的技术路线图中,AI将不再是被动的工具,而是能理解事件脉络、预测行为后果、主动参与世界构建的智能体。这种转变不仅影响游戏、影视等娱乐领域,更可能重塑教育、医疗等需要实时交互的严肃场景。当模型能以人类级别的响应速度理解环境变化,人机协作的边界将被彻底改写。

京东开源160亿参数模型:实时视频编辑新突破,流式赛道断层领先
京东开源的 JoyAI-Video-Edit,是这个赛道里第一个同时做到「流式架构 + 实时速度 + 可用质量」的模型。 JoyAI-Video-Edit不仅是「流式」视频编辑模型,还能实现「实时」视频编辑…

2026-08-07

vivo V80 Lite 5G或8月中旬登场 疑为vivo S2换名机型硬件配置相同
令人关注的是,V2576与即将在印度发布的vivo S2(8月6日发布)共享同一型号,这强烈暗示V80 Lite 5G很可能只是vivoS2面向其他市场的更名版本。 有业内人士分析指出,vivo V80 L…

2026-08-07

OpenAI更新ChatGPT:10亿用户免费体验新模型,对话更聚焦事实更可靠
Plus和Pro用户即日起将获得更新后的GPT-5.6Sol,其回答将更加聚焦,事实可靠性也有所提升;用户还可以通过新增的滑块,自主决定ChatGPT在每次回答中投入多少思考。 对于Plus和Pro用户,…

2026-08-07

Anthropic自研芯片新动向:组建团队为Claude定制 以提升运行效率
Anthropic发言人表示,公司正在建立内部硅芯片团队,为Claude设计定制芯片,并将采用硬件与模型协同设计的方式,以提升Claude运行速度和效率,更好满足客户大规模部署需求。 招聘信息写道:“这是一…

2026-08-07

2026上半年全球高端手机市场:苹果夺冠,三星份额升,国产品牌增速亮眼
据Counterpoint分析,苹果在2026上半年实现了9%的同比增长,主要受益于iPhone 17系列的强劲表现,尤其是标准版机型。苹果在高端市场的份额从2022上半年的74%降至2026上半年的65%…

2026-08-07

小米18标准版配置亮点多:双2亿像素+骁龙8 Elite Gen6+7200mAh大电池
受内存成本上涨影响,小米18系列将打破往年全系同台惯例,9月底将率先发布Pro和Pro Max机型,标准版则延后至2027年初(春节前)单独上市。在影像方面,该机或成为首款搭载双2亿像素方案的标准版新机,预计…

2026-08-07

穹彻智能携手阿里云,打造云端数据产线助力具身智能加速进化
近期,穹彻智能联合阿里云打造了一套云端自动化数据处理产线,希望将机器人数据处理从依赖人工、单机运行的模式,升级为能够规模化运转的工业化流程,为模型迭代提供持续的数据支撑。对于具身智能企业来说,数据处理正在成为…

2026-08-07

2026年7月安卓次旗舰性能榜揭晓:荣耀OPPO领跑,小米等机型紧随其后
具体来说,在2026年7月份安兔兔安卓次旗舰手机性能排行榜中,荣耀600 Pro和OPPOReno16分列第一名和第二名。其中,荣耀600系列支持4K Live无损修图,修完之后还能直接支持小红书平台4K…

2026-08-07

字节全员会聚焦AI战略:坚持自研不惧短期落后,锚定长期AGI目标
此前,字节跳动创始人张一鸣在内部会议上强调,字节跳动不会使用模型蒸馏技术来加速AI模型的研发,哪怕这一决定意味着Seed模型在短期内会在性能表现和评测榜单上暂时落后于DeepSeek、Kimi(月之暗面)和…

2026-08-07