模型采用 stable diffusion 这一当下的主流框架作为整个模型基础框架,整个框架主要由两个阶段组成:在称为 Frames Encoding 这一初始阶段,ReferenceNet 用于从 reference image 和 motion frames 中提取特征。