2024年12月30日晚,在央視新聞主辦、快手可靈AI技術(shù)支持的《AI奇妙夜》晚會(huì)上,來(lái)自廈門(mén)的AI創(chuàng)作者溫勤,帶著他和小伙伴創(chuàng)作的3部短片亮相。這3部AI短片主題是什么?在制作過(guò)程中又有什么挑戰(zhàn)?昨日,記者采訪參加晚會(huì)歸來(lái)的溫勤。
近百G原始素材 光梳理就用了3天
1月2日上午,記者在同安銀城智谷附近見(jiàn)到了溫勤,雖然剛剛經(jīng)歷高強(qiáng)度的視頻制作身心俱疲,但談到晚會(huì)發(fā)布他和小伙伴共同完成的作品時(shí),他還是滿滿的自豪感。
溫勤說(shuō),2024年12月初,快手可靈AI團(tuán)隊(duì)聯(lián)系到他,稱計(jì)劃與央視新聞在跨年之際推出一臺(tái)《AI奇妙夜》晚會(huì),詢問(wèn)他是否愿意參加。雖然時(shí)間緊任務(wù)重,但身為AIGC創(chuàng)作者的溫勤,也想挑戰(zhàn)一下這個(gè)任務(wù),就愉快地接了下來(lái)。
“當(dāng)時(shí)我和央視團(tuán)隊(duì)確定需要制作3部片子,同時(shí)央視團(tuán)隊(duì)也打包給我近百G內(nèi)存的原始素材,我光梳理就用去了整整3天時(shí)間。”溫勤介紹,這次他一共參與了《奔月》《蔡磊:用AI完成一場(chǎng)演講》《我們》三部短片的制作?!侗荚隆肥峭ㄟ^(guò)過(guò)去、現(xiàn)在、未來(lái)三個(gè)時(shí)間段展示中國(guó)航天科技的發(fā)展,而《蔡磊:用AI完成一場(chǎng)演講》主要以京東集團(tuán)原副總裁、漸凍癥患者蔡磊抗擊漸凍癥的故事為背景策劃,《我們》則是通過(guò)反戰(zhàn)題材的AI短片來(lái)呼吁世界和平。
向AI生成工具“投喂”是最大難點(diǎn)
“這三部短片,制作難度都不小,也有各自需要攻克的技術(shù)難題,我想借機(jī)挑戰(zhàn)一下自己。”溫勤說(shuō),《奔月》這部短片,最大的難點(diǎn)在于如何讓AI理解中國(guó)傳統(tǒng)文化中如紅包、中國(guó)結(jié)、餃子等元素,為了完成畫(huà)面制作,溫勤和小伙伴向AI生成工具“投喂”了大量文字和圖片信息,花費(fèi)一周時(shí)間制作了一百多個(gè)鏡頭,最終讓AI生成了合適的畫(huà)面。
“蔡磊這部片子制作的最大難點(diǎn),在于他本人已經(jīng)幾乎無(wú)法正常說(shuō)話,可我們又希望AI能將他的原聲轉(zhuǎn)化成一場(chǎng)完美的演講,這背后的工作量非常之大。”AI輸出的聲音總有一股子“機(jī)器人”口音,怎樣才能“原音重現(xiàn)”?溫勤和團(tuán)隊(duì)先后調(diào)取了蔡磊近百部資料視頻,從中提取蔡磊的原聲,做了降噪處理后盡可能讓AI去學(xué)習(xí)蔡磊說(shuō)話的各種語(yǔ)氣和聲調(diào),同時(shí)讓AI輸出的聲音盡量符合蔡磊本人在進(jìn)行演講時(shí)的情緒變化,讓聲音聽(tīng)起來(lái)更像正常人說(shuō)話的音調(diào)。“同時(shí)我們也查閱了全球著名的TED大會(huì)上,各種業(yè)內(nèi)大咖在演講時(shí)的燈光、畫(huà)面切換、觀眾形態(tài)等內(nèi)容,將它們進(jìn)行梳理后‘投喂’給AI,最終順利輸出了作品。”溫勤說(shuō)。
在《我們》這部作品中,觀眾看到畫(huà)面兩邊同步顯示的不同地點(diǎn)的孩童看起來(lái)年齡相近,但背后是溫勤通過(guò)上千個(gè)指令,讓AI程序輸出的孩童畫(huà)面保持一致性,同時(shí)還要通過(guò)提示詞來(lái)固定畫(huà)面兩邊的氛圍,做到始終如一,溫勤為此也付出了不少努力。
希望用AI制作出更多廈門(mén)文旅題材短片
學(xué)習(xí)計(jì)算機(jī)出身的溫勤在2021年接觸元宇宙相關(guān)產(chǎn)品后,慢慢轉(zhuǎn)型成為一名AI產(chǎn)品經(jīng)理,對(duì)市面上的AI生成軟件也是如數(shù)家珍。
在工作和生活中,溫勤會(huì)使用AI工具來(lái)協(xié)助自己,比如,通過(guò)可靈AI實(shí)現(xiàn)“老照片擁抱”,通過(guò)美圖WHEE實(shí)現(xiàn)“建筑物穿毛衣”“AI藝術(shù)字”,當(dāng)遇到圖片不清晰的時(shí)候,會(huì)使用WHEE的AI超清功能完成照片修復(fù),當(dāng)工作需要文檔資料的時(shí)候會(huì)使用“豆包”“KIMI”進(jìn)行歸納整理總結(jié)等。
“AI對(duì)人類而言,扮演的是一個(gè)工具的角色,而我們?nèi)祟悇t是要將內(nèi)心的溫暖傳達(dá)給它,才能讓它輸出更多有溫度的產(chǎn)品。”完成了這項(xiàng)挑戰(zhàn)后,溫勤告訴記者,他希望在新一年用AI制作出更多文旅題材的短片,為廈門(mén)這座旅游城市做出自己的貢獻(xiàn)。
揭秘
如何讓蔡磊重新說(shuō)話?
溫勤和團(tuán)隊(duì)先后調(diào)取了蔡磊近百部資料視頻,從中提取蔡磊的原聲,做了降噪處理后盡可能讓AI去學(xué)習(xí)蔡磊說(shuō)話的各種語(yǔ)氣和聲調(diào),同時(shí)讓AI輸出的聲音盡量符合蔡磊本人在進(jìn)行演講時(shí)的情緒變化,讓聲音聽(tīng)起來(lái)更像正常人的說(shuō)話頻率。
簡(jiǎn)介
●《奔月》:通過(guò)過(guò)去、現(xiàn)在、未來(lái)三個(gè)時(shí)間段展示中國(guó)航天科技的發(fā)展。
●《蔡磊:用AI完成一場(chǎng)演講》:以京東集團(tuán)原副總裁、漸凍癥患者蔡磊抗擊漸凍癥的故事為背景策劃。
●《我們》:呼吁世界和平的反戰(zhàn)題材短片。
?。◤B門(mén)日?qǐng)?bào)記者 薛堯)