FashionChameleon: Towards Real-Time and Interactive Human-Garment Video Customization
FashionChameleon:实时交互式人衣视频定制
🧭 交互式服装视频生成
Xiamen University · Alibaba Group
利用上下文学习和KV缓存调度实现单GPU 23.8FPS的实时流式服装切换视频生成
📌 工作参考价值(4 点)
- 实时换装交互:KV cache重调度(服装KV刷新、历史KV撤回、参考KV解缠)支持生成中途切换服装,可应用于电商直播换装、虚拟试衣间,无需重新生成整个视频。
- 单服装数据训练:通过故意制造参考图与服装图不匹配的Context Learning,仅需单服装视频即可学习运动一致性,降低多服装数据采集成本,适用于商品视频生成的快速冷启动。
- 长视频外推一致性:流式蒸馏中使用梯度重加权分布匹配,可借鉴于生成式推荐长序列行为建模,提升自回归生成稳定性。
- 实时性工程参考:单GPU 23.8FPS,比现有方法快30-180倍,为在线部署交互式生成提供了可行性设计思路,如商品流中动态换装展示。