京东开源JoyAI-Image-Edit:让AI从“修图”升级为“编辑三维空间”
4月9日,京东探索研究院宣布正式开源自研的JoyAI-Image-Edit图像模型。官方称这是业内首个将“空间智能”深度融入核心架构的开源模型,让AI从传统的平面修图跃升至三维空间重塑,推理代码全部开放,开发者可直接用于应用开发。
传统图像编辑模型往往局限于二维平面操作,而JoyAI-Image-Edit的核心突破在于让AI真正“看懂”空间关系。该模型从空间位置关系、多视角一致性、相机感知到场景推理等维度全面建模,实现了相机坐标视角变换、物体空间位移旋转、几何结构精准控制等多项空间编辑技术。据京东实验验证,在物体移动精度、空间一致性等核心指标上,该模型已达到世界一流水准。
JoyAI-Image-Edit具备三大辨识度极高的空间编辑能力。首先是视角变换——用户可通过自然语言指定相机的偏航角、俯仰角及缩放程度,模型在保持场景几何一致性的前提下生成新视角图像。其次是空间漫游——支持连续的视角移动,生成在空间中逻辑连贯的多视角图像序列,类似于在三维场景中“走动”。第三是物体空间关系操控——在保持场景整体结构稳定的前提下,对特定物体进行位移、缩放等空间变换,同时确保遮挡与光影关系自然合理。
在实现空间级突破的同时,该模型全面兼容15类通用编辑能力,深度覆盖内容创作的高频需求,无论是物体的替换、删除、添加,还是整体风格迁移、细节精修等操作,均实现了高性能覆盖。
JoyAI-Image-Edit可广泛应用于电商内容生产、创意设计制作、智能图像处理、3D模型重建、具身智能视觉感知等多元领域。尤其是在具身智能领域,该模型的推出为相关技术研发提供了关键的底层空间感知能力。