UnityVideo— 快手可灵联合港科大开源的视频生成框架

unityvideo 是由香港科技大学携手快手可灵团队、清华大学等机构联合研发的先进多模态、多任务视频生成框架。该框架通过深度融合多种视觉模态（如语义分割、人体骨架、深度图、光流等）以及创新训练范式，显著增强视频生成模型对现实物理规律的理解与建模能力。借助动态噪声注入机制与模态自适应学习策略，unityvideo 实现了 rgb 视频与各类辅助模态之间的双向协同学习，在加快模型收敛速度的同时，大幅提升了其在未见场景下的零样本泛化性能。

标签： git github 编码 快手 ai switch pdf 短视频 虚拟环境