能边播边改的JoyAI-Video-Edit,会给视频创作带来怎样的改变?

财云财经阅读:67702026-08-06 13:26:00评论:0
摘要: 京东开源的JoyAI-Video-Edit可让用户边看视频边修改内容,实测有延时但功能丰富,在电商直播等场景实用门槛在于提示词质量,与主流厂商“文生视频”路径不同。

JoyAI-Video-Edit的神奇功能

丰富的外观替换

用户打开摄像头,在文本框写入指令,就能实现多种外观替换。比如将绿色T恤秒变粉色,还能同步调整发型、帽子、眼镜等配饰。实测中,记者的绿色T恤能快速被换成粉色,还能戴上特定的帽子和墨镜,不过动作有轻微延时。

多样的材质与风格调控

它支持精细调控服装材质质感,像棉质纹理、皮革反光等。还可把写实视频转换成不同艺术风格,如动画、插画、电影等。也能完成实景与虚拟背景置换,实现人物形象转换,甚至支持参考图驱动换装。

适配场景与实用门槛

满足电商直播等需求

该模型可覆盖多项高频视频编辑功能,能适配直播电商、短视频带货、家装设计等电商业务场景。京东探索研究院相关负责人表示,在720P分辨率下能实现每秒30帧的推理速度,跟上常见影视视频播放节奏。

提示词质量是关键

模型的“实用门槛”在于提示词质量。同一段视频,简单笼统的提示词可能让模型给出不符合预期的结果,如只写“换一身衣服”,模型可能擅自补充配饰、变换发型等。而明确精细的提示词能让模型更精准地执行编辑。

能边播边改的JoyAI-Video-Edit,会给视频创作带来怎样的改变?

与主流厂商路径对比

主流厂商的“文生视频”

自2024年OpenAISora引爆AI视频生成赛道以来,国内主流厂商在文生视频、图生视频领域能力快速迭代。如阿里通义万相、快手可灵AI、字节即梦AI等,多是上传素材一键生成新视频。

京东的“边播边改”之路

JoyAI-Video-Edit选择押注“先有视频,再边播边改”。这不仅能适配电商直播等场景,还为具身智能数据大规模合成提供了新路径,可将人手操作视频转化为机械手或机械臂操作素材,扩展训练样本。

京东开源的JoyAI-Video-Edit为视频创作带来了新可能,其丰富功能虽有延时问题,但在电商场景有实用价值。与主流厂商路径不同,它的“边播边改”模式及对具身智能数据的作用值得关注,未来有望在更多领域发挥作用,推动视频创作发展。

能边播边改的JoyAI-Video-Edit,会给视频创作带来怎样的改变?

相关问答

JoyAI-Video-Edit能实现哪些视频编辑功能?

支持实时替换衣物颜色、款式、面料,调整配饰,调控材质质感,转换艺术风格,置换场景,还支持参考图驱动换装等。

使用JoyAI-Video-Edit时对提示词有什么要求?

提示词需精细描述,笼统的提示词可能导致模型给出不符合预期的结果,明确具体要求才能锁定编辑范围。

JoyAI-Video-Edit在速度方面表现如何?

基于全自研JoyAI-Video模型,在720P分辨率下实现每秒30帧的模型推理速度,能跟上常见影视视频播放节奏。

主流厂商与京东在视频创作上的路径有何不同?

主流厂商多是“先有素材再生成”,如文生视频、图生视频;京东押注“先有视频,再边播边改”,通过JoyAI-Video-Edit实现。

JoyAI-Video-Edit对具身智能数据合成有什么作用?

可将人手操作视频转化为机械手或机械臂操作素材,在保留物体相关信息基础上,替换场景、物体与机器人形态,扩展训练样本。

JoyAI-Video-Edit的交互界面有哪些预设场景按钮?

有实时换装、参考图换装、风格演绎、外貌改造、质感变身、场景切换、主角变身这七个预设场景按钮。

声明

转载声明:欢迎分享本文,转载请保留出处!

本文网址:https://www.caiair.cn/post/jingdong-joyaivideoedit-910916.html

上一篇:

下一篇:

排行榜