快手抖音爭相上桌,AI短劇何以成為香餑餑?
隨著人工智能技術(shù)的不斷進(jìn)步,AI短劇正在成為內(nèi)容創(chuàng)作領(lǐng)域的新寵。近日,快手和抖音等平臺(tái)紛紛推出AI短劇,引發(fā)行業(yè)內(nèi)外的廣泛關(guān)注。本文將深入探討AI短劇的制作流程、技術(shù)挑戰(zhàn)以及其在內(nèi)容創(chuàng)作中的潛力和未來發(fā)展趨勢(shì)。
在波濤洶涌的大海中,上古神靈悉數(shù)登場(chǎng),漁村少年李行舟漂洋過海,打蠃魚、斗共工、搶水神戟、游深海、救人魚、戰(zhàn)九嬰,最后帶著母親與村民涉?;丶?。
這是一個(gè)以《山海經(jīng)》為背景的少年歷險(xiǎn)玄幻短劇——特別之處是,其中的主角、配角、異獸、奇景全部由AI生成,劇情也全部由文生圖、圖生視頻的方式完成,但其效果不輸電影CG特效,自7月13日在快手上映以來,播放量超600萬。
當(dāng)短劇的熱風(fēng)從去年吹到今年,新生產(chǎn)方式的出現(xiàn)將為這股熱風(fēng)再添一把火。
藝恩數(shù)據(jù)則預(yù)測(cè),2023年短劇用戶規(guī)模超5億,短劇市場(chǎng)規(guī)模近400億,接近電影市場(chǎng)體量70%,五年內(nèi)市場(chǎng)規(guī)模有望突破千億元。借助AI大模型視頻生成能力,短劇的生產(chǎn)速度在加快,以往三個(gè)月的制作時(shí)間現(xiàn)在只需要半個(gè)月,短劇的題材也在拓展,玄幻、科幻、穿越等主題的內(nèi)容越來越多。
這背后來自AI視頻生成模型的快速發(fā)展。自從年初Sora爆火,國內(nèi)市場(chǎng)也出現(xiàn)了大量AI視頻生成模型:抖音的即夢(mèng)AI、快手的可靈AI、愛詩科技的PixVerse 、美圖的WHEE、清華大學(xué)聯(lián)合生數(shù)科技共同發(fā)布的Vidu、智象未來推出的Pixeling、右腦科技的VegaAI……所有鏡頭均由AI生成的短劇正是大模型應(yīng)用的核心場(chǎng)景。
大模型給短劇行業(yè)帶來哪些可能性?AI短劇能否成為獨(dú)立賽道?當(dāng)下AI與短劇的結(jié)合還有哪些制約?億邦動(dòng)力采訪了短劇導(dǎo)演、平臺(tái)負(fù)責(zé)人、AIGC創(chuàng)作者等,試圖回答這些問題。
一、AI短劇,打開進(jìn)入奇幻世界的新方法
不妨先來感受一下AI短劇的畫面效果。
“魚身而鳥翼,音如鴛鴦,見則其邑大水”的蠃魚:
借鑒了《紅樓夢(mèng)》的風(fēng)月寶鑒,也是《山海奇鏡之劈波斬浪》中的“鏡”:
大反派九嬰, “其狀如牛而龍尾,九首,能噴水吐火,其音如嬰兒,見則其邑大水”。
《山海奇鏡之劈波斬浪》在影院播放時(shí),大屏幕上的大特寫細(xì)致逼真——大海時(shí)而波濤如怒,時(shí)而悠遠(yuǎn)浩蕩,異獸動(dòng)輒遮天蔽日,猙獰兇殘,上古神靈或動(dòng)或靜,絲滑流暢,老者滄桑的眼神和少年掙扎的表情,在大屏幕上纖毫畢現(xiàn)。
盡管導(dǎo)演陳坤一再指出,AI在視頻生成過程中,長于奇景、異獸的生成,不善于人物表情、人物互動(dòng)的生成,但《山海奇鏡之劈波斬浪》中的人物面部特寫依然扛得住大屏幕。
導(dǎo)演陳坤(AKA閑人一坤)是一名從業(yè)二十余年的傳統(tǒng)影視人,目前轉(zhuǎn)型AI影視,這是他推出的第一部AI短劇,所有鏡頭均由快手的可靈AI生成。
他介紹,《山海奇鏡之劈波斬浪》立項(xiàng)于2023年12月,第一版完成于2024年5月,但團(tuán)隊(duì)對(duì)效果很不滿意,“要么是PPT動(dòng)畫,要么是沒法跟背景完美融合。”為此,他們嘗試用ComfyUI去搭建工作流(一種基于節(jié)點(diǎn)的工作流程,將穩(wěn)定擴(kuò)散的流程分解成多個(gè)節(jié)點(diǎn),實(shí)現(xiàn)精準(zhǔn)定制和可靠復(fù)現(xiàn)),甚至考慮過綠幕動(dòng)捕轉(zhuǎn)繪,但不論如何抽卡、剪輯,總是達(dá)不到理想的效果。
6月7日可靈AI上線后,陳坤成為第一批試用者。在可靈AI完成的第一批鏡頭中,有一幕是水神共工從山中站起來,僅通過圖片和提示詞,共工完成抬頭、挺胸、起身、站立的流暢畫面,其中肌肉緊繃、頭發(fā)飛揚(yáng)、山石崩裂,效果逼真。“這個(gè)鏡頭非常符合我們的提示詞要求,也非常符合物理定律的,不像以前的參數(shù)微調(diào),看到這個(gè)效果,我就意識(shí)到這是顛覆性的?!标惱せ貞?。
基于這一效果,陳坤決定所有鏡頭全部由可靈AI重新生成,然后再重新剪輯,重做音樂。“鏡頭重新生成加重新剪輯,我們團(tuán)隊(duì)一共十幾個(gè)人,半個(gè)月做完。”陳坤介紹。
最近在抖音上線的科幻短劇《三星堆:未來啟示錄》則使用了抖音的即夢(mèng)AI,由抖音聯(lián)合博納影業(yè)AIGMS制作。
這部科幻短劇,不僅有機(jī)甲斗法、末世災(zāi)難,主角團(tuán)還穿越到中國古代,在竹海環(huán)繞的中式庭院中,與高冠博帶的古蜀國人,一起揭開青銅神樹的秘密,探索文明興亡的奧秘。
《三星堆:未來啟示錄》立項(xiàng)于2022年,籌備于2023年底。博納影業(yè)制作總監(jiān)、博納AIGMS制作中心負(fù)責(zé)人曲吉小江表示,以最快速度推出該劇的目的之一,就是讓行業(yè)看到目前AI技術(shù)的極限是什么,未來的可能性在哪里。
“當(dāng)下的觀眾對(duì)AI影視內(nèi)容其實(shí)是充滿了好奇和期待的?!鼻〗l(fā)現(xiàn),目前,一個(gè)由AI創(chuàng)作的短視頻片段,一經(jīng)發(fā)布就能獲得百萬流量的加持。觀眾還是期待看到更震撼的視覺效果和更智能的觀影體驗(yàn)。
截止目前,《山海奇鏡之劈波斬浪》更新4集,在快手播放量677.3萬,《三星堆:未來啟示錄》更新9集,在抖音播放量1942.1萬。
除了抖音、快手的積極布局,6月底,由中央廣播電視總臺(tái)影視劇紀(jì)錄片中心制作的三部AI微短劇《英雄》、《愛永無終止》、《奇幻專賣店》在央視頻上線。
- 《英雄》:講述一個(gè)普通人“大胖子”跨越時(shí)空界限,與西漢名將霍去病并肩戰(zhàn)斗的成長故事。
- 《愛永無終止》:通過AI+真人,講述了一名年輕人使用AI技術(shù)創(chuàng)造出意外去世的父親影像,借此來撫慰奶奶心靈的溫馨故事。
- 《奇幻專賣店》:科幻萌寵主題,通過AI生成的虛擬人物和動(dòng)物,講述了一個(gè)尋找與被尋找、愛與被愛的故事。
此外待播短劇還有:
- 《西西里的美麗傳說》:懸疑+愛情,主角穿梭古今,逆風(fēng)翻盤。
- 《如果AI》:科幻+文旅,提出了關(guān)于人工智能發(fā)展、現(xiàn)實(shí)與虛擬的邊界、人類情感復(fù)雜性以及希望與絕望之間對(duì)峙的故事。
- 《大宋喵喵志》:奇幻+搞笑,圍繞擁有遠(yuǎn)大抱負(fù)的現(xiàn)代貓咪與宋代書生的搞笑生活展開,以寵物的生活視角結(jié)合宋朝的社會(huì)風(fēng)貌。
可以看出,AI短劇傾向于科幻、玄幻等內(nèi)容題材。“因?yàn)檫@兩條賽道在傳統(tǒng)影視制作中,受制于CG特效的高成本和長周期,觀眾需求強(qiáng),但供給較弱。AI短劇在該領(lǐng)域最容易發(fā)揮優(yōu)勢(shì)并受到觀眾認(rèn)可?!标惱ぶ赋?。
同時(shí),“中國文化”也成為AI短劇關(guān)鍵詞——深厚的歷史積淀,悠久的志怪傳奇,自帶的文化號(hào)召力,豐富的文化母題和神秘元素,也給短劇行業(yè)帶來高質(zhì)量的內(nèi)容增量。
二、視頻模型群雄逐鹿,AI短劇等來臨界點(diǎn)
AI短劇背后,是今年能力突飛猛進(jìn)的視頻生成模型。
據(jù)博納影業(yè)AIGMS公眾號(hào),《三星堆:未來啟示錄》定制化的工作流程為:
- AI創(chuàng)意與文本創(chuàng)作:大語言模型(LLM)
- 視覺概念及分鏡設(shè)計(jì):變化模(Transformer Model)、文本到圖像生成(Text-to-Image Generation)
- 鏡頭畫面生成:擴(kuò)散模型(Diffusion Models)、生成對(duì)抗網(wǎng)絡(luò)(GANs)、風(fēng)格遷移(Style Transfer)、深度學(xué)習(xí)(Deep Learning)
- 圖像質(zhì)量增強(qiáng):超分辨率技術(shù) (Super-Resolution)
- 圖像到視頻轉(zhuǎn)換:時(shí)序生成模型 (Sequential Generative Models)
- 視頻編輯和媒體內(nèi)容增強(qiáng):自動(dòng)視頻編輯算法 (Automated Video Editing Algorithms)
- 文本到語音合成:語音合成技術(shù) (Text-to-Speech Synthesis, TTS)
- 文本到音樂創(chuàng)作:音樂生成AI (Music Generation AI)
在《三星堆:未來啟示錄》看片會(huì)上,即夢(mèng)AI相關(guān)負(fù)責(zé)人表示,此次合作過程中,即夢(mèng)AI改進(jìn)了“視頻生成”的功能,包括支持24fps、30fps、60fps的補(bǔ)幀以及二倍超分的能力,新增鏡頭水平移動(dòng)、上下移動(dòng),支持鏡頭移動(dòng)的方向和幅度控制等。
2024年被視為“視頻模型元年”,年初Sora炸場(chǎng)(點(diǎn)擊閱讀《Sora爆火,AI電商打開新世界的大門》),引發(fā)全球AI視頻風(fēng)暴,海外Runway、Pika、Luma斗法,國內(nèi)互聯(lián)網(wǎng)大廠和獨(dú)角獸公司齊上陣,學(xué)習(xí)Sora的DiT架構(gòu),增加首尾幀控制、鏡頭控制、運(yùn)動(dòng)控制等功能,提升視頻生成時(shí)長和質(zhì)量。
“去年8月份,Runway帶火了Diffusion +UNet架構(gòu),全球上百家視頻生成公司開始用這個(gè)架構(gòu)。今年Sora帶火了Diffusion+Transformer架構(gòu),現(xiàn)在國內(nèi)DiT架構(gòu)大概六七家,年底估計(jì)能跑出二十多家?!边\(yùn)營AIGC創(chuàng)作者社區(qū)的宋東恒觀察到。
“目前的視頻模型處于群雄逐鹿?fàn)顟B(tài)。Runway出了一個(gè)Motion Brush(運(yùn)動(dòng)筆刷,用于視頻內(nèi)容控制),PixVerse也上一個(gè)Magic Brush。一個(gè)模型率先推出高清功能,立馬會(huì)有其他同行跟進(jìn)。每一個(gè)工具都在拼命往前追趕,想給創(chuàng)作者更多的一些工具?!标惱ぶ赋?。
此前,AI視頻模型多用于電商素材營銷(點(diǎn)擊閱讀《AI視頻爆發(fā)!一天10萬條,沖進(jìn)抖音快手小紅書》),隨著短劇爆火,AI視頻模型也大舉進(jìn)入短劇領(lǐng)域。
在創(chuàng)作者看來,AIGC不僅能降本增效,還能創(chuàng)作“不可能”。
宋東恒觀察到,在制作成本普遍為幾萬到幾十萬每分鐘的動(dòng)畫番劇中,AI可以幫助創(chuàng)作者制作同樣的內(nèi)容,將成本降低十分之一。
宋東桓嘗試用3D輔助+DiT首尾幀,可以實(shí)現(xiàn)轉(zhuǎn)繪之外另外一種低成本精準(zhǔn)控制畫面的效果,而且比之轉(zhuǎn)繪還更靈動(dòng)?!皠?chuàng)作者不需要會(huì)做動(dòng)畫或動(dòng)捕,只需要會(huì)做參考圖,就可以作出視頻,這進(jìn)一步降低創(chuàng)作者的創(chuàng)作門檻?!?/p>
曲吉小江認(rèn)為,AI還能夠創(chuàng)造全新的觀影體驗(yàn),比如將電影變成互動(dòng)形式,觀眾可以在觀看過程中做出選擇,決定故事的發(fā)展方向。還可以讓劇中角色返老還童,生成高度逼真的虛擬角色,為創(chuàng)作帶來更多可能。
不過,對(duì)于創(chuàng)作者來說,他們的創(chuàng)作依然受限于當(dāng)下的技術(shù)上限。
陳坤提到,目前AI技術(shù)的不足包括:人物一致性、場(chǎng)景一致性、人物表演、動(dòng)作交互和運(yùn)動(dòng)幅度?!耙?yàn)榧夹g(shù)限制,我們沒有去講一個(gè)很復(fù)雜的故事,也沒有把很多人物表演融進(jìn)去,不是編劇寫不出,是在目前技術(shù)條件下還做不好,我認(rèn)為不適合呈現(xiàn)一個(gè)非常復(fù)雜的故事,容易讓大家看不懂?!?/p>
“我們是在技術(shù)極限處反復(fù)橫跳?!标惱し治?,“但很多人看到的是不完美,我看到的恰恰是無限的可能?!?/p>
三、AIGC+短劇,撐起平臺(tái)半邊天
“在快手上,每日觀看10集以上的重度短劇用戶數(shù)達(dá)9400萬,短劇供給嚴(yán)重不足,我們也想提升產(chǎn)能,方法有兩種:一種是增加創(chuàng)作者,一種是提升創(chuàng)作者生產(chǎn)效率?!痹凇渡胶F骁R之劈波斬浪》看片會(huì)上,快手文娛業(yè)務(wù)負(fù)責(zé)人陳弋弋表示。
快手曾披露,2023年快手短劇日活躍用戶數(shù)達(dá)2.7億,日均消耗時(shí)長2小時(shí),短劇內(nèi)容創(chuàng)作者10萬以上,播放量過億的短劇300多部。抖音官方數(shù)據(jù)顯示,2023年抖音播放量破億的微短劇達(dá)500部,其中12部作品的播放量破10億,微短劇日播放量增長了一倍。
《山海奇鏡之劈波斬浪》和《三星堆:未來啟示錄》兩部劇作為試水之作,不僅要給短劇賽道增加新內(nèi)容,也要給創(chuàng)作者提供新工具,提高生產(chǎn)力。
科幻、末日、上古傳說等新題材和新表現(xiàn)手法,為短劇發(fā)展帶來新的創(chuàng)作靈感和內(nèi)容增量?!段魑骼锏拿利悅髡f》導(dǎo)演徐卓認(rèn)為,隨著觀眾群體的擴(kuò)大和審美需求的提升,不僅要求題材和故事創(chuàng)新,更需要專業(yè)化的表現(xiàn)手法。有了AI的助力,微短劇的制作水準(zhǔn)將得到全面提升。AI技術(shù)將開啟微短劇3.0時(shí)代。
除了增加題材種類,今年年初,快手短劇還嘗試了創(chuàng)意玩法,利用AIGC工具的實(shí)時(shí)互動(dòng)、沉浸性特點(diǎn),激發(fā)用戶互動(dòng)興趣,吸引超20萬用戶的參與。收到良好反饋后,快手在3月舉辦的第十一屆網(wǎng)絡(luò)視聽大會(huì)上,提出“微短劇+AI”的理念,以智能、高效的技術(shù)能力重塑星芒短劇的內(nèi)容力。
相比于2023年短劇市場(chǎng)的井噴,2024年短劇已經(jīng)開始向著規(guī)范化、精品化發(fā)展?!案顿M(fèi)劇初期的流量紅利已經(jīng)消失了,長期的內(nèi)容紅利才剛剛開始?!庇袕臉I(yè)者表示。
經(jīng)過數(shù)年發(fā)展,微短劇已經(jīng)基本形成分工明確、環(huán)節(jié)完善的產(chǎn)業(yè)鏈條——上游為劇本創(chuàng)意、拍攝制作、監(jiān)管約束;中游為內(nèi)容分發(fā),包括平臺(tái)整合、買量、分銷等;下游為內(nèi)容消費(fèi),包括上線播出、觀看以及觀看后的充值消費(fèi)。
但AI短劇目前還是新生事物,能不能成為一個(gè)獨(dú)立賽道,陳坤、宋東恒、陳弋弋都不確定。想要成為獨(dú)立賽道,內(nèi)容能不能規(guī)?;?,用戶是不是愛看,有沒有商業(yè)模式,這些都有待驗(yàn)證。
AI短劇的商業(yè)模式也和傳統(tǒng)短劇一致,包括廣告營銷、付費(fèi)充值、版權(quán)分賬和電商帶貨四種方式,其中面向B端的廣告營銷和面向C端的付費(fèi)充值是微短劇最主要的變現(xiàn)來源。to B的品牌定制、廣告植入、IP合作都是成熟的商業(yè)模式,C端市場(chǎng)則需要爆品,“現(xiàn)在萬事俱備只欠東風(fēng),只差一個(gè)爆款作品把到C端消費(fèi)的路徑打通?!彼螙|桓說。
曲吉小江認(rèn)為,如果劇集能夠?qū)崿F(xiàn)破億的播放量,就摸到商業(yè)化的門檻。第二季可能會(huì)走付費(fèi)模式,未來AI技術(shù)足夠成熟之后,也有可能將AIGC作品搬到大熒幕。
陳坤也表示,首部AI短劇只是一個(gè)探索,暫時(shí)不考慮掙錢。未來如果和可靈AI合作第二部、第三部微短劇,可以一起去探索一些新的商業(yè)化路徑。
文丨胡鏷心
編輯丨張睿
本文由人人都是產(chǎn)品經(jīng)理作者【億邦動(dòng)力】,微信公眾號(hào):【億邦動(dòng)力】,原創(chuàng)/授權(quán) 發(fā)布于人人都是產(chǎn)品經(jīng)理,未經(jīng)許可,禁止轉(zhuǎn)載。
題圖來自Unsplash,基于 CC0 協(xié)議。
- 目前還沒評(píng)論,等你發(fā)揮!