上周目标

  1. 确定课题研究目标和研究人员。
  2. 广泛调研课题相关的工作,基本确定技术路径。

上周具体任务

Task1: 确定课题任务和目标

Task2: 调研Unet架构下人物视频生成相关的工作,研究条件控制方式

Task3: 调研Diffusion-Transformer视频生成backbone


本周目标

  1. 深入研究代表工作的代码,掌握各个优秀工作的核心科技
  2. 调研数据集

本周具体任务

  1. 熟悉并跑通VDT代码(重点关注时空mask策略)
  2. Latte代码(重点关注多种Transformer Block)
  3. AnimateAnyone代码(重点关注RefNet、Clip)
  4. DiT代码
  5. 调研数据集(从对比工作开源数据集开始,调研开源数据集、总结视频数据预处理流程)

下周目标