数据世界
产业资讯 宏观经济 企业动态 人物动态 科技数码 数据洞察 AI前沿 行业峰会 热点资讯

Meta前核心成员领衔!清北精英团队打造实时交互多模态新范式

2026-08-07来源:快讯编辑:瑞雪

在生成式AI狂飙突进的浪潮中,一家名为Noiz的初创团队正以颠覆性技术重新定义人机交互边界。当行业仍在追逐更高清的生成效果时,他们已将目光投向更复杂的命题——如何让AI从内容生成器进化为能感知环境、理解意图、实时响应的智能体。这个成立于2025年底的团队,用新一代实时可交互多模态模型,在成本与性能之间撕开一道突破口。

传统多模态模型的困境在于"生成易、交互难"。当前主流模型能根据提示词生成视频、图片或音频,却无法持续理解环境变化。用户每次操作都需重新触发生成流程,导致交互延迟高、连贯性差。更严峻的是,实时交互需要模型持续感知推理,推理成本较单次生成高出十倍以上,这成为技术落地的最大障碍。Noiz团队选择直面这个"不可能三角",在保证低延迟的同时,将推理成本压缩至行业平均水平的百分之一。

突破源于三个反常识的技术路径。团队摒弃将内容视为文本映射的传统框架,转而构建动态状态系统——每个交互场景都是持续更新的状态集合,用户操作会实时改变空间关系、运动轨迹等关键参数。在信息处理层面,他们跳过语言中转环节,直接围绕事件建立表征:通过分析"谁在移动""作用于什么对象"等核心关系,实现动作理解与反馈生成的同步进行。这种设计使模型能在毫秒级时间内完成场景推演,较传统方法提速两个数量级。

在工程架构上,Noiz选择"分层创新"策略。底层接入不同音视频生成模型作为基础能力,上层自主研发交互引擎负责状态维护、生成调度和低延迟推理。这种模块化设计既避免与科技巨头正面竞争,又能充分享受行业进步红利——当Seedance、可灵等模型提升画质或降低成本时,Noiz系统可无缝升级。团队自建的空间音视频采集管线与物理仿真系统,更将训练数据成本降低90%,为模型训练提供海量低成本素材。

技术突破迅速转化为商业价值。其产品noiz.ai上线半年即吸引两百万创作者,收入连续三个月保持80%环比增长。在开发者市场,语音技能包长期占据TTS类榜首,更与两家估值超十亿的3D生成平台达成合作,实现空间声场与几何场景的动态匹配。这种"创作者生态+企业服务"的双轮驱动模式,使系统每天处理数亿次交互请求,沉淀下的高质量行为数据又持续反哺模型优化。

团队背景揭示着技术野心的根源。创始人陈伟嘉(Vega)曾在meta主导ASR模型落地,后带领团队开发出GitHub 37k Stars的开源音频项目Mockingbird;联合创始人陈前作为连续创业者,擅长将技术转化为规模化产品;首席科学家Zeyue Tian作为港科大音频博士,其开源音乐模型ChatMusician曾获杨立昆转发。这个横跨学术界与产业界的团队,累计发表顶会论文超20篇,拥有多个万星开源项目,成员来自Google、Dolby、清华、北大等顶尖机构。

当行业仍在争论"生成质量更重要还是速度更重要"时,Noiz已开启新的竞赛维度。在他们的技术路线图中,AI将不再是被动的工具,而是能理解事件脉络、预测行为后果、主动参与世界构建的智能体。这种转变不仅影响游戏、影视等娱乐领域,更可能重塑教育、医疗等需要实时交互的严肃场景。当模型能以人类级别的响应速度理解环境变化,人机协作的边界将被彻底改写。

国产超算“灵晟”携手清程极智 纯CPU打造高效大模型Token生产新范式
本次合作中,清程团队针对灵晟硬件特性完成算子重构、计算通信协同优化、多层次混合并行部署与MTP技术叠加加速,并非零散的技术叠加,而是精准适配国产超算架构的成套工程化落地,成功将灵晟超算的硬件算力潜力,高效转…

2026-08-07

特斯拉Robotaxi扩张遇阻,马斯克如何破局实现商业化突围?
马斯克曾多次强调,特斯拉未来将从一家汽车公司转变为人工智能公司,Robotaxi也被认为是连接自动驾驶技术和商业化收入的重要路径。他表示,虽然特斯拉已经积累了大量FSD数据,但Cybercab仍需要针对自身车…

2026-08-07

招商局集团与中国物流集团共谋合作:深化多领域协作 助力物流体系建设
他希望双方在交通物流、综合金融、物业服务等领域,进一步加大合作力度,共同支撑现代物流体系建设,为畅通经济循环、提升产业链供应链安全韧性,提供坚实保障。 招商局集团作为股东方,为中国物流集团高质量发展提供了有力…

2026-08-07

百度搜索推广流量大变局:纯搜索时代远去,混合流量池如何破局?
你提高出价,可能只是在和更多广告主争夺那一点点"真搜索"流量,而平台为了维持流量规模,会把你的广告更多地展示给合作流量,效果会出现暴涨暴跌。 即使账户的搜索词都挺精准,但用户可能根本没有主动搜索过这个词,只…

2026-08-07

特斯拉Robotaxi扩张遇阻,马斯克如何破局商业化难题?
马斯克曾多次强调,特斯拉未来将从一家汽车公司转变为人工智能公司,Robotaxi也被认为是连接自动驾驶技术和商业化收入的重要路径。他表示,虽然特斯拉已经积累了大量FSD数据,但Cybercab仍需要针对自身车…

2026-08-07

*ST建艺董事长变动:石访辞职 庄萱萍暂代 珠海正方提名刘常青为董事候选人
同日,公司第五届董事会第二十九次会议审议通过《关于补选公司第五届董事会非独立董事的议案》,经控股股东珠海正方集团有限公司提名,董事会提名委员会审查,同意刘常青先生为第五届董事会非独立董事候选人。该议案尚需提…

2026-08-07

FDE岗位热潮下:从业者亲述真实收入与行业挑战真相
他们既要写代码、搭系统,也要跟老板和员工沟通,把企业一句“想用AI”的模糊需求变成真正能跑起来的产品和工作流。我最早在网上看到一位博主分享FDE,我觉得自己挺适合做FDE,沟通能力不弱,对AI也有自己的理解,…

2026-08-07

字节跳动年中全员会:梁汝波谈AI布局,盼团队延迟满足感筑牢技术根基
7月30日,字节跳动宣布启动面向AI业务的组织调整,飞书团队被一分为二:飞书产品团队与豆包产品团队将整合,成立新的豆包产品团队;飞书GTM(市场、销售、客户服务)团队与火山引擎团队整合,成立新的ToB GT…

2026-08-07

iPhone 18 Pro系列下月登场:十二项升级亮点抢先看 2nm芯片领衔
虽然外观方面,iPhone 18 Pro系列与iPhone 17 Pro系列整体保持一致,但实际上的升级并不小,至少有12项主要升级。N2芯片:预计将搭载苹果下一代N2芯片,以支持Wi-Fi 7、蓝牙6.…

2026-08-07

ThinkBook Aeroblade宣传图流出 极薄设计或成联想ThinkBook系列新标杆
名称方面,该媒体指出在宣传图片中出现了“Aeroblade”这个关键词,而在联想现有产品线中,此前并未出现 Aeroblade相关名称,预估会是内部代码或者全新产品系列。 外观方面,Aeroblade 延…

2026-08-07