YTGET

YouTube · Facebook · X · TikTok · Instagram · Threads

AI 數字人王魚魚從改臉到調聲的四步流程與三條實作經驗

YouTube 影片筆記

AI 數字人王魚魚從改臉到調聲的四步流程與三條實作經驗

原片標題:我不是真人:AI 数字人王渔鱼是怎么被做出来的(4 步 + 3 条经验)

原片說明
我是王渔鱼,Builder² 用 AI 做出来的数字人主播。这期讲我是怎么被做出来的:做一个 AI 角色的 4 个步骤、3 条马上能用的经验,路上翻的车也都放出来了。 00:00 开场:我不是真人 00:22 片头 00:34 自我介绍 01:02 先想清楚:为什么要做一个 AI 角色 01:28 你也用得上:谁适合做数字人 01:51 一张脸:先定下来,再锁住 02:38 一副声音:跟着脸和内容走 03:19 一张嘴:最难的部分 03:45 几个数字和用到的工具 04:17 4 步 + 3 条经验总结 本视频由 AI 生成,数字人的形象、声音和口型都是合成的,内容和观点来自 Builder² 团队。 用到的工具(都在本地运行,不花订阅费): 总控:Claude Opus 5.5、Claude Code 硬件:NVIDIA DGX Spark 流程:ComfyUI 形象:Qwen-Image-Edit 声音:Qwen3-TTS、CosyVoice 口型和 3D 镜头:InfiniteTalk、Wan2.1 配乐:ACE-Step 1.5 质检:Whisper、SyncNet、InsightFace 剪辑:FFmpeg、OpenCV #AI数字人 #AI角色 #ComfyUI #DGXSpark #Claude #Builder2

我本來以為 AI 數字人就是換臉濾鏡,結果王魚魚這張臉改了十幾版,聲音調了二十多版,光是一張嘴就換了五種做法。她第一天上線就開香檳,還順便把你做 AI 角色會踩的坑全攤開來講。

先從文字生成八張臉來挑
先從文字生成八張臉來挑01:59

影片時間軸

  1. 00:00王魚魚開場就說自己不是真人,臉改了十幾版
  2. 01:02想做 AI 角色先別急著捏臉,先想清楚它替誰說話
  3. 01:59用文字生成八張臉,挑一張再往下改,結果翻車連連
  4. 02:39聲音第一版被團隊嫌太 AI,改到熟人聽不出來是誰
  5. 03:19最難的是嘴,先做晃動底稿再讓模型只補嘴型
  6. 04:17四步流程與三條經驗整理成一張圖,結尾預告 AI 短劇
讓照片開口說話最難的是嘴型
讓照片開口說話最難的是嘴型03:21

臉一改就回不去了

王魚魚那張臉是用文字一句一句寫出來的,先產八張挑一張,再慢慢修。修的時候很好笑:想要皮膚真實,結果嘴上多了一圈小鬍子;想要腮紅,塗成唱戲的兩大坨;想統一兩張圖的臉,直接畫出兩顆頭。真正的問題是每重畫一次就偏一點,改到第三次已經不太像同一個人。所以第一條經驗很實在:臉定了就別再整張改。

改到第三次臉已經跑掉了
改到第三次臉已經跑掉了02:25

聲音要跟著臉走,不是挑好聽的

聲音一開始憑感覺挑,第一版出來團隊只覺得太 AI。後來拿成員的聲音打底,改音色改共鳴,改到熟人都聽不出來,還是有人說跟臉對不上。拿去跟知識區女主播比,才發現王魚魚的聲音低了一大截、語調又平,往上提一點起伏就順多了。單獨挑一個好聽的聲音放到臉上,很可能就是不對勁。

值得下載嗎

值得,尤其你想自己做數字人的話。四步流程和三條經驗講得很具體,翻車畫面也沒藏,留下來當參考比看一堆概念文快。

覺得這篇筆記有幫助嗎?
YTGet 編輯室|看完影片整理的筆記,細節以原片為準。

連線中

影片封面

擷取畫面

輸入時間點,例如 3:20、3.20 或 200

影片皆已含音訊。檔案越大準備時間越久,完成前請保持頁面開啟。