财经
当前位置:首页 > TMT > 正文

实现视频“边播边改”,京东开源JoyAI-Video-Edit模型,性能全球领先

直播间里,服饰主播试完白色上衣,观众又想马上看到蓝色款是什么效果,可蓝色款不在身边怎么办?视频聊天时,和朋友畅想穿越到古代当侠客,怎么能让美好的想象瞬间变为精美视频呈现给大家?

8月5日,京东宣布开源自研的实时流式视频编辑模型JoyAI-Video-Edit,彻底破解上述难题。用户可以一边观看视频,一边修改人物与场景,让视频创作从“先有素材再修改”变为可实时互动编辑。在流式实时视频编辑方向,JoyAI-Video-Edit对比当前业内代表性模型,各项指标全面领先,达到世界一流水平。

实现视频“边播边改”,京东开源JoyAI-Video-Edit模型,性能全球领先

视频处理速度快,还可生成任意时长

视频实时编辑首先要解决速度问题。视频由一帧帧连续画面组成,如果模型处理速度跟不上播放速度,就会出现卡顿与延迟。JoyAI-Video-Edit基于全自研JoyAI-Video模型,在720P分辨率下实现每秒30帧的模型推理速度,能够在保持较高画面清晰度的同时,跟上常见影视视频的播放节奏。

视频长度也是流式编辑的一道门槛。此前的流式编辑模型只能处理几秒或分钟级片段,而JoyAI-Video-Edit支持任意时长的稳定流式编辑,可以随着视频持续播放、持续处理。用户不必等待整段视频生成完成,就能在播放过程中实时修改场景、替换物体、调整人物形象或改变画面风格,实现“边观看边创作”。

实现视频“边播边改”,京东开源JoyAI-Video-Edit模型,性能全球领先

例如,创作者可以让视频中的人物连续更换服装,在直播中把普通街道变成动画世界,也可以在家装设计中尝试不同的家具、墙面和灯光效果……视频创作由一次性生成变成了可以持续调整的过程。

实测性能全面领先同类模型

为了评估模型能力,研究团队将JoyAI-Video-Edit与SANA Streaming、LiveEdit、Xmax-X2.0等国际上有代表性流式视频编辑模型进行对比。结果显示,在覆盖典型视频编辑场景的评测数据中,JoyAI-Video-Edit整体效果全面领先。

在业界权威的OpenVE-Bench通用评测中,模型超越了目前所有的流式编辑方法,在全局风格、局部替换、局部删除和字幕编辑等任务中优势尤其突出,大幅领先行业同类模型。这意味着,JoyAI-Video-Edit在保持实时流式处理优势的同时,也能准确理解编辑意图、稳定完成多类常用编辑任务,兼顾编辑速度与画面效果。

实现视频“边播边改”,京东开源JoyAI-Video-Edit模型,性能全球领先

京东物理世界模型矩阵进一步完善

JoyAI-Video-Edit的实时流式编辑能力,可为零售营销、家装设计、影视制作等大量真实场景带来新的技术支持:服装与商品展示视频可以快速更换人物穿搭、商品和背景;家装视频可以实时切换家具与装修风格;影视创作者也可以更快尝试人物造型、场景和视觉效果,减少重复拍摄与整段返工

不止视频创作,JoyAI-Video-Edit还为具身智能数据大规模合成提供了新的技术路径。机器人训练需要大量物体抓取、搬运与操作视频,但真机数据采集成本较高,危险或少见场景也难以反复采集。依托对场景、物体与画面内容的可控编辑能力,JoyAI-Video-Edit可将人手操作视频转化为机械手或机械臂操作素材,并在保留物体位置、空间关系与动作轨迹的基础上,替换场景、物体与机器人形态,让一段视频扩展出更多训练样本。

当前,京东正在加速建设全球最大物理世界运营中心,并已经形成面向物理世界的JoyAI模型矩阵:JoyAI-Image-Edit让AI理解与编辑空间,JoyAI-Echo面向长音视频生成,JoyAI-VL-Interaction让AI持续观察并实时回应,JoyAI-Talker提供实时语音交互能力,JoyAI-RA面向机器人操控,形成覆盖语音、图像、视频、实时交互与具身智能的基础模型体系。JoyAI-Video-Edit进一步提升了实时视频编辑能力,并为具身智能大规模数据合成积累底层技术。

JoyAI-Video-Edit模型的开源,标志着京东物理世界模型矩阵进一步完善。京东将持续向开发者与行业开放模型能力,让AI加速在物理世界发挥真正价值。

(责任编辑:zx0280)

推荐阅读

一纸调查令,快递公司30亿债券"泡汤"

一纸调查令,快递公司30亿债券"泡汤"

立案调查的突袭,直接截停了申通快递(002468)筹划中的30亿元可转债融资计划。

网易财经 2026-08-05 11:49:25
维权针对具体侵权内容,并非“竹知了”玩具,鸿蒙智行发布“竹知了”相关情况说明

维权针对具体侵权内容,并非“竹知了”玩具,鸿蒙智行发布“竹知了”相关情况说明

8月4日晚,@鸿蒙智行发言人 发布关于近期“竹知了”相关网络信息的情况说明。

蓝鲸新闻 2026-08-05 11:46:37
科技反弹、AI应用狂飙:“新易中天”接棒爆红

科技反弹、AI应用狂飙:“新易中天”接棒爆红

8月4日,A股市场AI应用板块延续爆发势头,由易点天下、中文在线、天龙集团组成的“新易中天”组合再次迎来集体大涨。

和讯 2026-08-05 11:46:14
多发安全事故、安全生产管理缺位,国家邮政局对申通快递立案调查

多发安全事故、安全生产管理缺位,国家邮政局对申通快递立案调查

8月4日,国家邮政局官网显示,今年以来,使用“申通快递”商标、字号、快递运单经营快递业务的企业多发生产安全事故,场所内多次被检查发现生产安全事故隐患。

蓝鲸新闻 2026-08-05 11:25:15
太极股份总裁仲恺因个人原因辞职

太极股份总裁仲恺因个人原因辞职

太极股份7月31日晚发布公告。

鳌头财经 2026-08-05 11:02:57
9万人“内测”三年,美团把自家AI工作台开放给了商家

9万人“内测”三年,美团把自家AI工作台开放给了商家

下午两点,一家餐饮店老板的手机震了好几次。

光子星球 2026-08-05 10:59:45
两则公告,换来9个涨停板

两则公告,换来9个涨停板

因为沾上“半导体”,走出了一轮令人瞠目的独立行情。

投中网 2026-08-05 10:56:23
世纪华通:实控人套现35亿还债,腾讯躲背后

世纪华通:实控人套现35亿还债,腾讯躲背后

对于15.64万户世纪华通的中小股东来说,他们押注的或许不是王佶,不是腾讯,甚至不是《传奇》或《无尽冬日》——他们押注的,是中国游戏出海这个故事,还能讲多久。

陆玖商业评论 2026-08-04 17:08:15
蚂蚁阿福辟谣负责人调整:假消息

蚂蚁阿福辟谣负责人调整:假消息

8月4日,蚂蚁阿福官博发文辟谣。

蓝鲸新闻 2026-08-04 14:50:59
自主进入“战国7强”:零跑上汽突破月销10万,一梯队需20万+

自主进入“战国7强”:零跑上汽突破月销10万,一梯队需20万+

随着零跑7月销量首次突破10万辆,它已从新势力阵营正式迈入主流阵营,不再是边缘玩家。

明镜pro 2026-08-04 11:06:01
这一届中国企业家,彻底变了

这一届中国企业家,彻底变了

2026年的夏天,注定要被写入中国商业史。

华商韬略 2026-08-04 10:43:39
苹果(AAPL.US)换帅在即,新CEO钦点退休副手回归,管理层即将迎来大洗牌

苹果(AAPL.US)换帅在即,新CEO钦点退休副手回归,管理层即将迎来大洗牌

据报道,苹果(AAPL.US)即将上任的新任首席执行官约翰·特努斯(John Ternus)正着手组建自己的核心管理团队,他已将一位曾在硬件工程部门共事多年的心腹大将重新招致麾下。

市值风云 2026-08-04 10:39:25
高溢价接绩差股 欣天科技易主引多重考问

高溢价接绩差股 欣天科技易主引多重考问

曾带领旗下AI营销企业东信营销科技有限公司(以下简称“东信营销科技”)两度冲刺港股上市均未果,拥有六年华为工作经验的刘杨如今将目光投向A股市场,拟直接入主欣天科技。

北京商报 2026-08-04 10:25:40
多股涨停引爆行情!商业航天迎来量产拐点,板块配置价值凸显

多股涨停引爆行情!商业航天迎来量产拐点,板块配置价值凸显

8月3日,商业航天板块震荡走强。截至收盘,长缆科技(002879.SZ)、神剑股份(002361.SZ)、通宇通讯(002792.SZ)等多股涨停。

览富财经 2026-08-04 10:23:49
风口落地!“十五五”砸出4万亿算力蓝海,这一赛道彻底起飞

风口落地!“十五五”砸出4万亿算力蓝海,这一赛道彻底起飞

万亿级政策投资蓝图落地,正式确立算力基础设施未来五年的核心发展地位。

览富财经 2026-08-04 10:23:26
独家|蚂蚁灵波将开启独立融资

独家|蚂蚁灵波将开启独立融资

“蚂蚁集团在整个AI上的投入都非常大,算力预算都面临被挤压。”

蓝鲸新闻 2026-08-04 10:21:31
太空算力,概念炒作还是万亿蓝海?

太空算力,概念炒作还是万亿蓝海?

当地面算力遭遇瓶颈,将计算节点部署至近地轨道,正在成为产业界破局的新路径,也推着太空算力走向新热潮。

和讯 2026-08-04 09:49:32
上周加仓,今天砍仓!半导体这一跌,是“假摔”还是“真跌”?

上周加仓,今天砍仓!半导体这一跌,是“假摔”还是“真跌”?

8月3日收盘,A股未能延续上周五的反弹。上证指数收报3809.66点,跌0.59%;创业板指跌1.24%;科创50重挫5.08%。

和讯 2026-08-04 09:47:26

联系方式

中华网新媒体 财经频道
互动/投稿邮箱:
finance@zhixun.china.com
网上不良信息举报电话:010-56177181
财经频道联系电话:(010)56176102