YTGET

YouTube · Facebook · X · TikTok · Instagram · Threads

動畫補到 60 幀反而更糊,實測 RIFE 補幀與 AI 只當中割的差別

YouTube 影片筆記

動畫補到 60 幀反而更糊,實測 RIFE 補幀與 AI 只當中割的差別

原片標題:AI 把动画补到 60 帧,为什么反而更难看?|Mia 码上 AI

原片說明
两千八百多万播放的「4K 60 帧」《你的名字》,三叶伸手那一段我一格一格数了:一帧都没补。真拿 AI 去补,她的手直接化掉 🙃 🌐 33 张画里哪 7 张是 AI 补的?自己一格一格翻着找:https://miaainow.com/zh/lab/ai-anime-spot-the-frames/ ⏱️ 想看哪段点哪段 0:00 同一段动画,AI 补到 60 帧 0:40 少画是故意的:一拍二、一拍三 2:06 AI 补帧是怎么「猜中间」的 3:13 最火的「4K 60 帧」,到底补了没有 3:43 亲手补一次:RIFE 4.26 6:36 让 AI 当中割,会怎样 8:37 你家电视也在偷偷补帧 9:07 记住三件事 🍿 相关视频 AI 画图,其实是从一屏雪花里画出来的 https://youtu.be/UAk9VoeimZw AI 做的视频,为什么一股 AI 味 https://youtu.be/LXnc2FWBqUo 一句话让 Claude 做动漫 MV https://youtu.be/AMQDywItV-A ✨ 也许你会喜欢 Fable 对 Opus 象棋对决 https://youtu.be/LKmZv1SlcCw 让 AI 说它不该说的话:越狱 https://youtu.be/t7j-pWy2NA8 📷 素材来源 《你的名字。》预告(東宝MOVIEチャンネル):https://www.youtube.com/watch?v=k4xGqY5IDBE ©2016「君の名は。」製作委員会 《你的名字》60 帧版:Ash Edits「THIS IS 4K ANIME | YOUR NAME 2160P 60FPS」:https://www.youtube.com/watch?v=nTbA7qrEsP0 《蜘蛛侠:平行宇宙》预告(Sony Pictures Entertainment):https://www.youtube.com/watch?v=g4Hbz2jLxvQ 这三段各只用几秒,画面上是我做的 24 格 / 60 格对照和逐格分析;《你的名字》的 AI 补帧版是我自己跑的,不是原片的样子。 其余动画画面:《Hero》,Blender Studio(2018,导演 Daniel Martinez Lara),CC BY 4.0:https://studio.blender.org/films/hero/ 抽画、补帧、替换和慢放是我做的,不是原片的样子。 补帧模型:RIFE(Practical-RIFE 4.26):https://github.com/hzwer/Practical-RIFE 片中提到的视频:Noodle「Smoother animation ≠ Better animation」:https://www.youtube.com/watch?v=_KRb_qV9P4g 《蜘蛛侠:平行宇宙》制作团队谈一拍二:WIRED「How Animators Created the Spider-Verse」:https://www.youtube.com/watch?v=l-wUKu_V2Lk 动画补帧论文:Deep Animation Video Interpolation in the Wild(CVPR 2021):https://arxiv.org/abs/2104.02495 📜 授权原文 CC BY 4.0:https://creativecommons.org/licenses/by/4.0/ #你的名字 #动画 #60帧 💚 关注 Mia,码上搞懂 AI

動畫補到 60 幀結果手直接化掉,這也太諷刺了吧。我一開始還以為幀數越高越順,結果碼上直接把 AI 補幀的畫面停格給你看,那隻手根本糊成一團。他從一拍二、一拍三講起,再自己跑 RIFE 補一次,最後還示範怎麼讓 AI 只當中割。看完你下次滑到那種「4K 60 幀」的動畫,大概會忍不住逐格找破綻。

AI 補幀後手指直接化掉
AI 補幀後手指直接化掉00:14

影片時間軸

  1. 00:00左邊 24 格原畫對比右邊 AI 補到 60 格,停格看手指已經化掉
  2. 00:40解釋一拍二、一拍三,日本電視動畫為省成本以一拍三為主流
  3. 01:33停、跳、閃三種刻意少畫的手法,沒畫的格子也是設計好的
  4. 02:06說明 AI 補幀靠光流猜中間格,RIFE 預設東西連續、長相不變
  5. 03:17逐格數《你的名字》那支 2800 萬播放影片,其實一幀都沒補
  6. 03:46用 Hero 短片跑 RIFE 4.26,出現動三格停兩格、停頓被補成慢動作
  7. 06:40改成抽掉一半人畫的格讓 AI 補,小幅度轉頭幾乎一致,眨眼挑眉補不出來
  8. 08:37電視動態補償偷偷補幀,克魯斯拍片請大家關掉,廠商後來加電影製作人模式
原版停半秒的蓄力被補成慢動作
原版停半秒的蓄力被補成慢動作04:49

AI 補幀預設的三件事,動畫一件都不成立

碼上把 RIFE 的邏輯講得很白:它假設前後兩張之間東西是連續走過去的、同一個東西長得一樣、每一格都是真的拍下來的瞬間。真實影片成立,動畫卻一條都不符,線條加大塊平塗、沒有紋理,AI 很難判斷東西往哪動,動作又誇張不走直線。所以問題不是補得不夠好,是它在回答錯的問題:它問中間這格東西該在哪,動畫要問的是這格要不要畫、停多久。

同一個 AI 換個位置就從挨罵變幫手

這段我覺得才是整支的重點。碼上不讓 AI 自己做主,而是把人畫的格抽掉一半,讓 AI 只補那些動作小、沒有表情變化的中割,停幾格全照原版。結果小幅度轉頭幾乎一模一樣,但閉眼、挑眉這種兩頭都沒有的表情重點,AI 只會給前後兩張的平均臉。他照動畫師分工再跑一次,七張 AI 畫的混進去,節奏一格沒變、畫面也沒糊。

七張 AI 中割混進原版,分得出來嗎
七張 AI 中割混進原版,分得出來嗎07:41

值得下載嗎:值得,尤其是你常看動畫或對補幀有興趣的話。它把「幀數高不等於好看」講得有憑有據,還附上可以自己逐格找的網站,留著當工具片很划算。

覺得這篇筆記有幫助嗎?
YTGet 編輯室|看完影片整理的筆記,細節以原片為準。

連線中

影片封面

擷取畫面

輸入時間點,例如 3:20、3.20 或 200

影片皆已含音訊。檔案越大準備時間越久,完成前請保持頁面開啟。