单元三 · 图像声音与视频的智能生成

第15课 视频的智能生成

任务场景
任务场景:视频的智能生成

一、学习目标

  • 了解视频智能生成的主要思路。
  • 认识视频与图像、声音生成的关联。
  • 能说明生成视频需要关注的一致性与伦理问题。

二、情境导入

视频生成比单张图像生成难在哪里?

如何让画面在时间上连贯,并与声音匹配?

三、核心讲解

本课学习路径:

1视频生成的主要过程
2一致性与责任

1.视频生成的主要过程

视频可看作时间上的图像序列,常结合图像生成、运动建模,并可叠加声音轨道。

视频生成:在时间维度上生成连贯画面(并可配合声音),使内容随提示展开。
  • 可由关键帧扩展,或直接按文本条件生成片段
  • 需要处理物体运动、场景切换与时空一致性
  • 可与图像、声音生成技术组合使用

想一想:如果每帧都很好看但人物长相一直变,问题出在哪里?

2.一致性与责任

生成视频可能不连贯、出现伪影,也可能被用于误导;发布前应核查并遵守规范。

时空一致性:同一对象在相邻帧中的外观与运动应合理连续,避免明显跳变与矛盾。
  • 检查:主体是否稳定、动作是否合理、字幕/声音是否匹配
  • 对涉及真实人物或事件的内容更要谨慎标注与审核
  • 在本课相关组件中体验生成并记录问题案例

想一想:学校活动宣传若使用生成视频,应如何避免误导观众?

弄清以上要点后,再进入下方动手体验,用实际操作验证。

四、动手体验 · MixAI 组件

请在下列组件中完成操作,至少体验一个并记录现象。

组件 model_diffusion_image_generation — 视频可看作时间上的图像序列:先生成关键帧,再思考相邻帧如何保持主体一致

组件 model_text_to_speech — 为同一主题生成配音,体会画面序列还需与声音轨道匹配

五、课堂总结

  • 视频生成需在时间维度保持连贯,并可结合图像与声音技术。
  • 关注时空一致性与传播责任,是使用生成视频的基本要求。

六、拓展提升

  • 用同一提示生成短视频,列出 3 条一致性检查清单并实操打分。

测评

对照本课学习目标作答(客观题练习);选出后点「检查」。答错会显示简短说明。

  1. 视频生成相对单张图像,更突出的挑战是:

  2. 发布生成视频时,较合适的做法是:

  3. 判断:视频生成可以与图像生成、声音生成等技术结合。

本节小结

回顾本课要点,完成动手体验与测评。记住:视频的智能生成。