AI生成的《西遊記》短片震驚網友

2024年2月20日 21点热度 0人点赞


一年前,AI模型ChatGPT的問世在社會各界激起了廣泛的討論和關注。時光荏苒,轉眼間AI行業已經發生了翻天覆地的變化。最近,來自四川的博主「AI瘋人院」在網絡上發布了一部利用AI技術生成的《西遊記》動畫短片,其震撼的視覺效果令眾多網友驚嘆不已,紛紛感慨科技發展的迅猛。揚子晚報/紫牛新聞記者采訪到了這位博主馮先生,從事15年美術工作的馮先生表示,這段視頻如果人工製作至少需要半年,而自己在AI的幫助下用時一周就完成了,目前隨着文生視頻模型Sora的問世,很多現在遙不可及的事情在未來都可以實現了。 揚子晚報/紫牛新聞記者 姜天聖

AI包攬大部分流程,就連分鏡規劃也靠ChatGPT

這段3分56秒的動畫短片以《西遊記》原著第一集為藍本,通過AI技術將石猴降生到拜師學藝的故事生動地呈現在觀眾面前。

視頻中整個天庭識別度極高,宮殿群依山而建,錯落有致,屋頂覆蓋着金色的琉璃瓦,陽光下閃閃發光,讓人一眼就能感受到那種神秘而莊嚴的氛圍。花果山則充滿了寧靜與和諧。鬱郁蔥蔥的樹木、飛流直下的瀑布、古樸典雅的石橋,共同勾勒出一個如詩如畫的世外桃源。視頻還展示了孫悟空駕舟渡海、來到城鎮、前往靈台方寸山等場景,引發網友嘖嘖稱奇,「這個視頻真的太震撼了!AI還原的《西遊記》簡直絕了!只看開篇就已經被驚艷到了!」「場面確實震撼,希望UP主可以繼續沿着劇情更新,贊。」

除了《西遊記》外,馮先生還用AI生成了絲綢之路、龍生九子、克魯蘇神話等視頻動畫,目前他在抖音上有超過十萬粉絲,收獲了超過百萬點贊。在評論區,網友們驚嘆之餘,也有人詢問這是如何做出來的。馮先生告訴記者,用AI生成視頻需要四步:構思、用文字生成靜態圖片、讓圖片動起來、整理剪輯。

「第一步肯定是構思,以《西遊記》第一集為例,從混沌初開到石猴出世再到拜師學藝,首先就要確定一共需要多少個畫面、多少個分鏡。」構思這一塊看似需要「腦洞」,實際不然,馮先生表示,自己會使用ChatGPT分析原著文字,讓AI幫自己規劃一些分鏡方案,然後自己再從中找到合適的。有了分鏡規劃後,用AI繪畫軟件把想要的畫面畫出來,然後再用「圖片生成視頻」軟件讓這些畫面動起來。這兩個過程中,一般會產生大量的廢稿,「目前AI很難完全理解我的意思,無論是圖片還是動畫片段,隨機性都比較大,每次我都會用AI生成很多,在這些素材裡面找到合適的再進行下一步。」

「剩下的就是把素材放到一起剪輯了,台詞我會自己想好,然後使用AI配音。有些特殊角色我會自己配, 用變聲器變聲,在剪輯的時候還可以再用聲音特效打磨一下。」再加上轉場、背景音,一部由AI生成的動畫視頻就誕生了。

有網友想看打鬥場面,但目前AI生成視頻還有許多限制

「在兩年前我就使用過谷歌發布了一款AI繪圖模型,那時候AI繪圖極其抽象,生成的畫面支離破碎。比方說畫一個人,AI能畫出五官,但是五官會非常扭曲,那時候大家都在批評,說這個軟件只能畫恐怖圖片。但是在去年底的時候,這個模型更新到第四版,進步就很大了,當時我還受邀參加了內測。」馮先生介紹,如今這個AI繪圖模型已經進步到可以畫卡通、素描、水彩等多種風格,並且在細節處理上也更進一步,「例如衣服上的繡花,甚至鑲金絲線都能畫出來。」

「AI繪畫問世以來引發過很多次爭議,插畫師們認為AI用自己的作品進行訓練,現在倒過頭來搶自己的飯碗。」馮先生坦言,AI技術的迭代確實影響了一部分人的利益,「但這是沒辦法的事情,就像潘多拉魔盒一樣,一旦被打開,再要關上就不可能了,再去抵觸它已經沒有任何意義。」

「就拿這次我發布的《西遊記》動畫短片來說,我一共用AI生產了三千多張圖片,最後選擇了約一百張,放在以前的話,哪怕是資深畫師要畫出這些畫肯定需要半年,至於要讓畫『動』起來那更是天方夜譚了。」

在後台,有不少網友留言想看《西遊記》中的打鬥場景,「目前AI生成視頻還有許多限制,以目前的技術還做不到。」馮先生表示,許多之前做不到的事情,現在AI能夠做到了;現在做不到的事情,說不定未來哪一天也能做到,「等到AI足夠強大的時候,我肯定會滿足網友們的要求的,希望這一天早日到來。」

延伸閱讀: Sora或顛覆AI視頻領域

記者注意到,近日Open AI發布了視頻生成模型Sora,介紹稱Sora能夠嚴格根據用戶輸入的提示詞、文本指令或靜態圖像,生成長達1分鍾的視頻,保持較高的視覺質量,其中包含精細復雜的場景、生動的角色表情以及復雜的鏡頭運動。同時也接受現有視頻擴展或填補缺失的幀。

目前Sora官網上已經有幾十個演示樣本,不僅能准確呈現細節,還能理解物體在物理世界中的存在,並生成具有豐富情感的角色。

業內不少人士都十分看好Sora,360集團創始人周鴻禕表示,Sora的誕生意味着AGI(通用人工智能)實現將從10年縮短至一兩年,「一旦人工智能接上攝像頭,把網上的視頻都看一遍,它對世界的理解將遠遠超過文字學習……它展現的不僅僅是視頻製作能力,它展現的是大模型對真實世界有了理解和模擬後,會帶來新的成功和突破。」

工信部信息通信經濟專家委員會委員、數字經濟專家劉興亮稱,這標志着AI技術在內容創作領域的一個新紀元,「Sora能幫助創作者們以更低的成本和更快的速度將創意變為現實,而且為觀眾帶來了更豐富和多樣化的視覺體驗。技術創新的這一巨大飛躍,預示着AI在未來人類生活的各個方面都將發揮更加重要的作用。」

馮先生也非常看好Sora,他表示,「雖說我還沒有使用過這套程序,但從官方說法和官方發布的視頻來看,由這套模型生成視頻里的各個元素協同度很高,並且在分鏡、運動拍攝、遠近角切換等領域也遠比現在的模型優秀。也就是說,現在遇到的困難,未來可能就不再是困難了。」(揚子晚報)

來源:揚子晚報 責編:DD001