顯示廣告
隱藏 ✕
※ 本文為 MindOcean 轉寄自 ptt.cc 更新時間: 2024-06-14 10:07:13
看板 AI_Art
作者 jackliao1990 (j)
標題 [新聞] Sora大片真相:人工特效參與,被指誤導大
時間 Wed May  1 21:56:57 2024


Sora大片真相:人工特效參與,被指誤導大眾
https://www.qbitai.com/2024/04/138328.html
Sora大片真相:人工特效参与,被指误导大众 | 量子位
"这不是AI生成的视频,而是使用了一些AI技术的视频。" ...

 
魚羊

啊? Sora火爆短片《氣球人》,也「造假」了? ? ?

背後藝術家團隊的最新揭秘,可謂一石激起千層浪:

原來, 視訊畫面並非完全由AI生成,其中有大量視覺效果需要人類後期實現 。

像:

https://www.qbitai.com/wp-content/uploads/replace/ce596c9de49429e0a84241b2adc33966.png

這下網友不幹了,合著大傢伙兒跟OpenAI玩真心,OpenAI背後卻耍起心眼子來了:

    他們含糊其辭,就是希望觀眾認為短片完全是AI生成的,這是不是有點不誠實了啊。

    這不是人工智慧生成的視頻,而是使用了一些AI技術的視頻。


還有網友直接開噴:誤導行銷! 這是誤導性行銷!

究竟是怎麼個事兒,咱們還是具體捋一捋。
揭秘Sora大片工作流程

儘管OpenAI一開始就介紹了,《氣球人》這樣的短片出自藝術家團隊之手,他們只是把
Sora開放給了藝術家使用,但官方並未提及短片具體是如何製作而成的。

現在,《氣球人》背後的藝術家團隊Shy Kids自己來了個大揭秘,內容包括:

    影片片段一致性如何實現
    他們如何處理Sora生成的影片素材
    Sora生成影片的限制及後製

影片一致性

《氣球人》中主角形象的一致性可謂驚艷眾人。

但其實吧,根據Shy Kids團隊中負責後製的老哥Patrick Cederberg(簡稱老帕)透露,
想要實現這種前後一致並不是寫寫提示詞就能成的。

Sora並沒有提供工具,來幫助實現不同鏡頭之間的主體一致性。 也就是說,就算提示詞
都是一樣的,兩次運行的結果也會有所不同。

他們的做法是,盡可能詳細地對主角形象進行描述。

    解釋角色的服裝以及氣球的類型是我們解決一致性問題的方法,目前Sora還沒有整合
適當的功能來實現此類控制。

即便如此,團隊在用Sora生成影片素材時還是遇到了不少這樣那樣的問題。

例如,提示詞裡明明寫了氣球是黃色的,但Sora生成的片段裡氣球可能變成紅色。
視訊素材處理

一致性之外,老帕提到,在時間軸方面,Sora允許使用者修改關鍵影格。 但這種時間控
制並不精準,無法保證一定能達到預想的效果。

另外,想要實現這個鏡頭:

https://www.qbitai.com/wp-content/uploads/replace/93608b16f20522e8344f845d3e2d9955.gif
[圖]

即把鏡頭焦點從牛仔褲一路上移到氣球頭,也得人類自己後期裁切平移畫面,因為Sora本
身不會渲染這樣的鏡頭:它總是傾向於把焦點集中在氣球頭上。

老帕也談到,他們在寫提示詞時也遇到了一些問題:

    OpenAI在讓藝術家試用Sora前,並沒有考慮到真正的電影製作人是如何思考的。

簡單來說,就是Sora對攝影術語(如跟拍、平移等)的理解有限。 老帕認為,這一點上
Sora不如Runway。

值得一提的是,儘管Sora原生支援生成1080p視頻,但老帕他們實際上生成的素材都是
480p的。 他們是在後期使用Topaz等工具對視訊素材進行了超分處理。

生成速度方面,根據老帕的回憶,每次大概需要10-20分鐘的時間。
影片後期

接下來,就到了網友們反應最強烈的部分──後期。

前面已經說到,Sora本身也解決不了不同影片片段裡一致性的問題。

除了氣球不一定符合設定,或許是因為訓練資料的原因,Sora也喜歡自動為氣球加上
奇奇怪怪的人臉。

給主角生成其實不需要的假人頭。

Sora還堅定地認為氣球得帶根繩。

總而言之言而總之,這些都需要老帕上手丟到AE裡,進行後期處理。

另外,儘管Shy Kids發現「35mm底片」這樣的關鍵字很好用,能讓Sora生成的影片畫面風
格更一致,但藝術家們仍需要為最後的成片做調色,為畫面添加顆粒和閃爍效果,以使整
部影片畫面更協調統一。


老帕也提到了一個有趣的細節:

Sora很喜歡慢動作。

    我不知道為什麼,但有很多鏡頭看起來都是0.5倍速和0.75倍速。

    因此我們需要對大量畫面進行調速,免得影片看起來像是大型慢動作項目。

那麼,Sora生成的影片素材有多少最終被用在影片裡了?

「數學很差」的老帕估計了一下,大概是 300:1 。

音訊方面,Sora目前還不能產生聲音,因此旁白和音樂都是團隊自己加上去的。
版權

為了不侵犯版權,OpenAI給了Sora一些限制。

例如,你不能把提示詞寫成“35mm膠卷,未來太空船中,一名男子拿著光劍靠近”,那樣
Sora會直接拒絕生成,因為這畫面太像《星際大戰》了。

喔對,像什麼「阿羅諾夫斯基式鏡頭」和「希區考克變焦」也是不行的。
3人團隊2週製作完成

該說不說,在外界捲起風波之前,Shy Kids團隊對於Sora的表現還是很滿意的。

畢竟,製作《氣球人》這樣一個高品質短片,最後只用了他們仨1.5到2週的時間。

團隊認為,現在,對於專業的電影團隊來說,Sora當然還有很大進步空間,但對於大部分
人而言,Sora已經足夠驚艷。

用老帕自己的話說:

    我覺得人們應該將Sora變成工作流程的一部分。

    不過,如果他們不想跟AI沾邊,也沒關係。

對於這樣的觀點,也有不少網友表示認同,認為Sora這樣的影片生成AI,是對現有工作流
程很好的補充。

Adobe把它們整合進軟體裡,就是一個很不錯的主意。

但,「我厭倦了OpenAI們的精美Demo行銷」。

還有網友不滿的點在於,爆紅的「人工智慧生成影片」背後有大量的人類工作,他們投入
數百個小時工作,卻被AI掩蓋了真實的價值。

那麼,這事兒你怎麼看?

參考連結:
[1]https://www.fxguide.com/fxfeatured/actually-using-sora/
Actually using SORA - fxguide
[圖]
The exact current state of SORA with the team from Air Head or 'How to tell a consistent story despite the slot machine nature of genAI.' ...

 
[2]https://twitter.com/bilawalsidhu/status/1783544598259794046




--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 114.38.27.129 (臺灣)
※ 作者: jackliao1990 2024-05-01 21:56:57
※ 文章代碼(AID): #1cCaeowV (AI_Art)
※ 文章網址: https://www.ptt.cc/bbs/AI_Art/M.1714571826.A.E9F.html
zaa0210: 那這幾天大陸發佈的 AI 講的比 Sora 還厲害又怎麼看?1F 05/02 07:01
Tosca: 正常啊 我們用AI生圖出來也要精修阿 很少直接拿來用=.=2F 05/02 08:32
Tosca: 一般民眾沒玩過AI的才會認為念咒語生出來直接用好棒棒
Tosca: 事實上要好看要精緻 都嘛還是要稍微修圖 合理阿
Tosca: 事實上AI的功勞就是縮短工時和作品精緻化 這其實同一件事
Tosca: 以前從無到有畫一張圖 十個小時好了 五小時畫 五小時精修
Tosca: 現在AI幫忙生圖 半小時抽卡 剩下9.5小時可以精修 當然精緻
stlinman: 就算現在影視工業也是後製不然怎麼會有調色師,AI光是能8F 05/02 22:35
stlinman: 加速渲染就能很快改變現在的影視工業了!

--
※ 看板: FW 文章推薦值: 0 目前人氣: 0 累積人氣: 137 
作者 jackliao1990 的最新發文:
點此顯示更多發文記錄
分享網址: 複製 已複製
r)回覆 e)編輯 d)刪除 M)收藏 ^x)轉錄 同主題: =)首篇 [)上篇 ])下篇