上周目标
- 确定课题研究目标和研究人员。
- 广泛调研课题相关的工作,基本确定技术路径。
上周具体任务
Task1: 确定课题任务和目标
Task2: 调研Unet架构下人物视频生成相关的工作,研究条件控制方式
Task3: 调研Diffusion-Transformer视频生成backbone
本周目标
- 深入研究代表工作的代码,掌握各个优秀工作的核心科技
- 调研数据集
本周具体任务
- 熟悉并跑通VDT代码(重点关注时空mask策略)
- Latte代码(重点关注多种Transformer Block)
- AnimateAnyone代码(重点关注RefNet、Clip)
- DiT代码
- 调研数据集(从对比工作开源数据集开始,调研开源数据集、总结视频数据预处理流程)
下周目标