Agent Skills
返回列表
音频驱动数字人

音频驱动数字人

设计多媒体 更新于 2026.08.29

将以下提示词粘贴到你的 AI 对话框中:

请根据 https://skillhub.cn/install/skillhub.md,安装 @org-qvypbtd6/shuziren1

技能介绍

它解决什么问题

当旁白音频已经就位——不管是实录,还是 voice clone 的产物——剩下的任务就不再是「从文案生成声音」,而是让数字人照着这段音频说话:口型对齐、停顿一致、语速同步,最后交出一个能直接用的 .mp4。这个技能只负责这一步。它不接管文案转语音,也不做一步到位的文生数字人,声音克隆本身同样不在范围内。

核心能力与关键步骤

技能背后是鲸剪桌面端的一次 CLI 调用(commandId: dh.audioDrive)。stdout 是单行 JSON,stderr 里的进度仅供排错,不能转述给用户。标准流程:

  1. 确认命令已开放:{CLI} cli enable --id dh.audioDrive
  2. 校验登录态与会员:{CLI} auth whoami
  3. 执行任务,--audio 为必填;形象三选一:--characterId / --characterName,或直接给 --refVideo
  4. 解析 stdout:ok === true 时读取 data.outputPath,否则按退出码走异常恢复

其余参数按需追加:--outputDir / --output 指定 .mp4 落盘位置,--videoIndex 默认 0,--enhanceFace 默认开启。推荐流水线是 voice clone → dh audio-drive,即先拿到音频,再由本技能驱动形象。

适用边界与注意点

  • 前提是已有音频;只有文案没有音频时,应改用文案秒变数字人。
  • macOS 驱动音频长度不超过 120s,走云端,且与文生数字人共用每日配额;Windows 为本地驱动。
  • 该能力标注 VIP,需确认 data.isVip === true;配额耗尽(QUOTA_EXCEEDED)时停止重试,改提示次日或客户端查看。
  • 退出码速查:0 成功、1 执行失败、2 用法错误、3 命令未开放、4 token 缺失或过期、5 需要 VIP、6 VIP 校验失败。
  • Token 不要在对话中粘贴,JSON 内部字段也不要向用户复述,只反馈成功与否、输出路径与失败原因。

使用场景

  • 旁白配音已经录好,需要把这段音频套到数字人形象上,生成口型对齐的讲解视频。
  • 声音克隆完成后的下一步:用克隆音频驱动数字人出镜,免去重新录音。
  • 手头有形象参考视频时,直接传入 refVideo,让数字人按参考形象生成口播素材。
  • macOS 环境下旁白音频不超过 120 秒,想用这段短音频驱动角色库形象产出口播成片。

适合人员

  • 知识付费课程讲师:每节课先录好旁白,再用同一段音频驱动数字人出镜,批量产出讲解视频。
  • 企业培训内容制作者:培训旁白定稿后不想真人出镜,希望数字人按固定形象替代录制口播部分。
  • 短视频口播账号运营:手头已有配音和形象参考,需要把音频快速转成口型同步的可发布素材。