智快网
快讯 行业 产业 汽车 科技 AI+ 热点

京东开源160亿参数模型:实时视频编辑新突破,流式赛道断层领先

2026-08-07来源:快讯编辑:瑞雪

AI视频领域正迎来一场技术革新,京东近日开源的JoyAI-Video-Edit模型成为焦点。这款模型首次实现了"流式架构+实时速度+可用质量"的突破,在视频编辑赛道开辟了新路径。与传统离线模型不同,它能够直接处理实时视频流,支持直播、视频通话等动态场景的即时编辑。

该模型在720P分辨率下达到每秒30帧的推理速度,系统端到端稳定运行在24FPS,支持无限时长的连续编辑。用户通过自然语言指令即可实现实时视觉特效,例如将人物变老、切换场景风格或替换物体形态。在电商直播场景中,主播可动态更换服装配色、调整背景布置,系统能根据不同观众需求生成个性化画面版本。

技术实现层面,研发团队构建了包含MLLM条件编码器、因果视频VAE和160亿参数多模态扩散Transformer的架构体系。通过SA-DMD训练方法将单帧处理步骤从十余次压缩至两次,在Nvidia B200 GPU上实现226毫秒的端到端延迟。区别于其他流式模型通过缩小参数规模提升速度的做法,该模型在保持160亿参数规模的同时,将分辨率提升至720P,处理速度较同类产品提升1.4至2倍。

针对长视频编辑常见的画面漂移问题,团队提出"有界KV状态推理"机制。该技术通过限制模型记忆容量,仅保留最近处理片段和首帧作为参考,使计算资源消耗与视频时长解耦。配合专门设计的长视频训练策略,模型在连续处理数小时视频时仍能保持画面稳定性,解决了自回归模型误差累积导致的画面崩坏难题。

在OpenVE-Bench通用基准测试中,该模型以3.60分领先所有流式编辑模型,在局部删除等子任务中超越商业离线模型。LongV2VBench长视频专项测试显示,其总分较第二名提升1.59分,处理速度达到30.19FPS。人类评估盲测中,面对四个流式竞品模型,该模型获得最高90%的偏好率,与顶级离线模型Bernini-R的对比中也取得微弱优势。

这项技术正在重塑内容生产流程。传统视频制作中反复渲染的等待环节被消除,创作者可实时调整参数并立即看到效果。在电商领域,单次拍摄即可生成多版本商品展示视频,系统根据用户画像动态切换画面元素。更深远的影响在于,该模型在摄像头与显示屏幕之间构建了可编程语义层,使视频编辑能够理解画面内容并保持跨帧一致性。

京东的技术布局已延伸至具身智能领域。针对机器人训练数据稀缺的痛点,该模型可快速将人类操作视频转换为机械臂训练素材,完整保留物体空间关系和动作轨迹。这与京东正在构建的JoyAI模型矩阵形成协同效应,涵盖视觉交互、语音对话、机器人操控等多个维度,为其物流仓储、直播电商等业务场景提供技术支撑。

vivo V80 Lite 5G或8月中旬登场 疑为vivo S2换名机型硬件配置相同
令人关注的是,V2576与即将在印度发布的vivo S2(8月6日发布)共享同一型号,这强烈暗示V80 Lite 5G很可能只是vivoS2面向其他市场的更名版本。 有业内人士分析指出,vivo V80 L…

2026-08-07

OpenAI更新ChatGPT:10亿用户免费体验新模型,对话更聚焦事实更可靠
Plus和Pro用户即日起将获得更新后的GPT-5.6Sol,其回答将更加聚焦,事实可靠性也有所提升;用户还可以通过新增的滑块,自主决定ChatGPT在每次回答中投入多少思考。 对于Plus和Pro用户,…

2026-08-07

Anthropic自研芯片新动向:组建团队为Claude定制 以提升运行效率
Anthropic发言人表示,公司正在建立内部硅芯片团队,为Claude设计定制芯片,并将采用硬件与模型协同设计的方式,以提升Claude运行速度和效率,更好满足客户大规模部署需求。 招聘信息写道:“这是一…

2026-08-07

2026上半年全球高端手机市场:苹果夺冠,三星份额升,国产品牌增速亮眼
据Counterpoint分析,苹果在2026上半年实现了9%的同比增长,主要受益于iPhone 17系列的强劲表现,尤其是标准版机型。苹果在高端市场的份额从2022上半年的74%降至2026上半年的65%…

2026-08-07

小米18标准版配置亮点多:双2亿像素+骁龙8 Elite Gen6+7200mAh大电池
受内存成本上涨影响,小米18系列将打破往年全系同台惯例,9月底将率先发布Pro和Pro Max机型,标准版则延后至2027年初(春节前)单独上市。在影像方面,该机或成为首款搭载双2亿像素方案的标准版新机,预计…

2026-08-07

穹彻智能携手阿里云,打造云端数据产线助力具身智能加速进化
近期,穹彻智能联合阿里云打造了一套云端自动化数据处理产线,希望将机器人数据处理从依赖人工、单机运行的模式,升级为能够规模化运转的工业化流程,为模型迭代提供持续的数据支撑。对于具身智能企业来说,数据处理正在成为…

2026-08-07

2026年7月安卓次旗舰性能榜揭晓:荣耀OPPO领跑,小米等机型紧随其后
具体来说,在2026年7月份安兔兔安卓次旗舰手机性能排行榜中,荣耀600 Pro和OPPOReno16分列第一名和第二名。其中,荣耀600系列支持4K Live无损修图,修完之后还能直接支持小红书平台4K…

2026-08-07

字节全员会聚焦AI战略:坚持自研不惧短期落后,锚定长期AGI目标
此前,字节跳动创始人张一鸣在内部会议上强调,字节跳动不会使用模型蒸馏技术来加速AI模型的研发,哪怕这一决定意味着Seed模型在短期内会在性能表现和评测榜单上暂时落后于DeepSeek、Kimi(月之暗面)和…

2026-08-07

AI Agent手机新阶段:国标L3启幕,未来体验升级尚需时日
大模型负责理解语言、识别图像和规划任务,是手机的核心能力来源;但模型再强,如果只能困在聊天框里回答问题,依然不足以让整台手机成为 L3。换句话来讲,L3 级别的 AI Agent 的手机仍是一名助手:它能拆…

2026-08-07