课程大纲

语音合成与语音克隆简介

  • 文本到语音(TTS)与神经语音合成概述。
  • 语音克隆与语音生成:用例与边界。
  • 关键模型:Tacotron、WaveNet、FastSpeech、VITS。

使用商业平台

  • 使用ElevenLabs和Resemble AI。
  • 语音创建、克隆与编辑。
  • API访问与文本到语音工作流程。

使用开源工具构建

  • 安装与配置Coqui TTS。
  • 训练自定义声音并管理数据集。
  • 生成具有精细控制的语音(音调、速度、情感)。

数据准备与语音数据集管理

  • 收集与清理语音样本。
  • 分段、标注与对齐转录文本。
  • 伦理来源与语音授权。

应用集成

  • 将TTS嵌入网站与应用程序中。
  • 创建IVR系统与交互式机器人。
  • 为视频与游戏生成合成对话。

评估质量与真实性

  • MOS(平均意见分数)与可懂度测试。
  • 控制表现力与韵律。
  • 比较延迟、保真度与真实性。

伦理、法律与治理考虑

  • 深度伪造风险与负责任的使用。
  • 授权、署名与版权影响。
  • 法规与组织政策。

总结与下一步

要求

  • 了解机器学习基础知识。
  • 熟悉音频文件格式和编辑工具。
  • 具备基本的Python编程技能。

受众

  • 对语音合成感兴趣的AI开发者和工程师。
  • 探索语音生成的内容创作者和媒体技术专家。
  • 构建个性化或动态音频系统的研发团队。
 14 小时

即将举行的公开课程

课程分类