LeviTor – 南大联合蚂蚁等机构开源的3D目标轨迹控制视频合成技术
LeviTor是南京大学、蚂蚁集团、浙江大学等机构推出的图像...
DynVFX是创新的视频增强技术,能根据简单的文本指令将动态内容无缝集成到真实视频中。通过结合预训练的文本到视频扩散模型和视觉语言模型(VLM),实现了在不依赖复杂用户输入的情况下,自然地将新动态元素与原始视频场景融合。用户只需提供简短的文本指令,例如“添加一只在水中游泳的海豚”,DynVFX可自动解析指令,基于VLM生成详细的场景描述,通过锚点扩展注意力机制精准定位新内容的位置,同时通过迭代细化确保新内容与原始视频的像素级对齐和自然融合。