不知你有沒有發現,虛擬偶像行業已經許久沒有鼓舞人心的大事件了?和2021年”主播與數字人齊飛,跳舞共唱歌一色“,虛擬偶像動輒單月收入百萬的盛況相比,2022年人們關於虛擬偶像聽到更多的是”開盒“、”塌房“和”差評如潮“等負面消息。虛擬偶像不再是資本市場的香餑餑,倒更像是一個不穩定的燙手山芋,每當產生負面消息,這一虛擬偶像IP的價值都有被直接歸零的風險。
人與產能的強綁定使得虛擬偶像發展受限,這也成為了業內的一項難題。對於有中之人扮演的虛擬偶像發生中之人離隊狀況,重金打造的虛擬形象就不得不被雪藏;而純虛擬化的虛擬偶像發生創作人員變動,內容創作風格的轉變也會讓形象的人氣受損。原本虛擬偶像願景中的”永不塌房“,漸漸成了笑談。
2023年初,ChatGPT的熱度飆升給到不少互聯網用戶驚喜,通過AI的幫助,內容的生成變得更簡單。 AIGC相關產業受到了大量關注,靠譜二次元(公眾號ID:kpACGN)發現一些AIGC項目開始運用在虛擬偶像二創領域,例如有粉絲用Stable Diffusion、DALL·E、NovelAI、Midjourney等AI作畫工具為心愛的虛擬偶像創作插畫甚至是cosplay,豐富衍生的圖片內容。不過,無論是插畫和cosplay,都可以由真人完成,所以此類創作雖然能讓粉絲叫好,並沒有一種讓偶像復活的驚喜感。
與此同時,SVC歌聲音色轉換技術開始在虛擬偶像二創圈流行,包括diff-SVC、so-vits-svc在內的多個開源技術項目得以應用。這些技術通過深度學習,根據人類聲音合成AI模型,並轉換原有人聲,生產出和虛擬偶像聲音十分相似的音頻作品。技術的進步讓虛擬偶像的二創跨出了一大步,不再局限於視覺。
近幾個月,基於湊·阿庫婭、鹿乃、珈樂等虛擬偶像角色進行仿真二創的AI投稿作品陸續出現在國內外的視頻網站,這些以AI虛擬偶像名義發布的作品讓粉絲們激動不已,甚至有珈樂(虛擬偶像女團A-SOUL成員)的粉絲在珈樂AI的音頻投稿下再一次打出了這樣一行字:”她只存在了一年半,接下來我要給她完整的一生。“
以前連粉絲都覺得是在玩梗的言論,如今有希望通過AIGC讓其成為現實。
AIGC續命虛擬偶像
2022年5月,虛擬偶像女團A-SOUL成員珈樂的中之人33和公司解約,使得珈樂進入休眠,此後A-SOUL一直以四人團的形式運營,這讓不少珈樂的唯粉倍感失落。後來,33以真人身份重新開播,熟悉的聲線讓不少人從珈樂粉轉為了3粉。但也有珈樂的粉絲覺得自己還是喜歡那個紫頭髮大眼睛狼耳朵,有著偶像化運營的虛擬形象,並不是形象的扮演者。一時間,圍繞著中之人和虛擬形象之間的爭議不斷展開,隨著33的直播越來越有個人特色,珈樂粉紛紛切割,重新回看起過去珈樂的作品和直播切片。
AI珈樂演唱A-SOUL二創名曲《枝江》,UP主:存夢P
但總看歷史作品對於粉絲而言太不過癮,於是有一批基於UTAU引擎的珈樂二創音樂作品橫空出世,雖然也能成為一部分珈樂粉絲的”代餐“,但老舊的UTAU引擎生成的人聲電音過重,存在不夠真實的缺點,讓不少粉絲無法接受。粉絲是想讓心愛的虛擬偶像變得更加真實,距離更近,但和中之人相比,UTAU並不能給到大多數粉絲替代感。在2022年底,Diff-SVC、so-vits-svc等項目陸續在開源社區發布,給粉絲還原珈樂的聲音提供了更好的選擇。
已經超過2300位技術宅收藏這一AIGC項目
和UTAU需要大量原音生成聲音數據庫,再利用MIDI譜面重新生成對應歌曲的過程相比,基於深度學習的Diff-SVC(簡稱ds)、so-vits-svc(簡稱svs)明顯要先進得多:一方面ds、svs的準備成本比較低,用戶只需要準備數十分鐘的角色語音、歌聲文件交給svs進行深度學習,就能生成對應角色的AI聲音模型,同時免去了音頻調校的工序,極大地降低了創作者的門檻;另一方面ds、svs的合成效果更好,因為音頻基於SVC技術,能讓一些歌手原本的唱法得以保留並直接轉換,生成的音頻更貼合收聽者。
因此,這類AIGC技術不僅讓聲音二創變得更加真實,還大大降低了聲音類二創的難度指數。想為珈樂等虛擬偶像創作聲音內容的創作者,如今只需要一個成熟的訓練模型,一首唱好的歌,加上一張好顯卡,就能得到由喜歡的虛擬偶像演唱的翻唱音樂。
整合包的出現讓AI翻唱的製作更簡單了,UP主:夜歩空
初音未來、洛天依等V家粉絲最近也吃到了AIGC帶來的內容紅利,由於VOCALOID熱度降溫等原因,V家相關的非音樂內容創作開始變少,知名插畫師近年很少再為愛發電地為這些”過氣萌二網紅“創作作品,這讓不少MikuFans、錦依衛只能眼饞其它虛擬偶像的二創。但AI作畫工具的興起,讓技術宅可以自己動手豐衣足食,一邊靠AI創作,一邊看著自己的作品流下老二次元的眼淚。
在2022年之前,通過主流的AI作畫工俱生成一張二次元風格的圖片還需要大量的參數,且生成的AI作品質量極為不穩定,需要碰運氣才能生成一張能看的圖片。但在2022年10月,基於Stable diffusion模型的NovelAI發布,改變了這一切,這個擅長生成二次元風格插畫的AI作畫工具讓偏愛二次元風格的AI畫師們狂喜,NovelAI不僅提供了傳統的文字轉圖片的方式,還有著基於已有圖片反推文字,並生成風格化圖片的功能,這讓AI創作二次元插畫的難度再次降低。
Stable Diffusion+NovelAI生成的AI珈樂插畫,UP主:ppupsie
今年,隨著NovelAI在個人電腦上的適配逐漸成熟,不少風格化訓練模型被共享,AI算力雲平台陸續上線,希望為虛擬偶像創作插畫等內容的粉絲進入這一領域的門檻越來越低,AI插畫作品陸續發布,不少初音未來、洛天依等V家角色的高質量AI插畫、AI Cosplay甚至是AI手辦模型作品陸續出現在大眾視野,引發了新的議論熱潮。
官方不應缺席AIGC
和民間AI創作工具使用門檻越來越低,用戶操作越來越簡單相比,官方在新技術工具跟進方面就顯得有些掉隊了。例如已經休眠一年的虛擬主播絆愛(點擊回顧:第一虛擬主播「絆愛」的消失),曾在去年推出了基於CeVIO AI的聲庫#kzn,主張用戶通過創作音樂作品的形式為絆愛IP繼續做貢獻。但是CeVIO AI是一款類似於VOCALOID的音頻製作工具,需要創作者有一定的音樂創作基礎。其中的AI功能主要為自然平滑地生成人聲服務,並沒有降低創作者的使用門檻。此外,#kzn的聲線雖然取自絆愛,但由於CeVIO AI引擎本身的風格,仍保留有一些電子音,相關作品的聽感遠不如絆愛本體的翻唱。
一直在限時發售的#kzn 聲庫
在國內虛擬偶像行業,只有洛天依、星塵等少量虛擬歌姬推出了利用AI輔助創作的產品,其中洛天依等Vsinger和ACE Studio、XStudio分別合作推出了AI聲庫,可以讓發聲更加平滑順暢;星塵則脫離了原本的VOCALOID引擎,轉為通過自家的AI發聲引擎Synthesizer V提升了原有的發聲質量。對於原本的P主(音樂創作者)來說,新工具的易用性有所提升,但對想成為P主的新人而言,相關工具的上手難度仍然偏高。而虛擬主播由於普遍生存週期較短,依賴中之人以直播整活變現,鮮有可供粉絲使用的AI創作工具。
靠譜二次元(公眾號ID:kpACGN)總結了當下大部分虛擬偶像都沒有合適的AIGC工具原因主要有兩點,一是AIGC發展速度超過預期,一些公司對AIGC領域還在觀察、預研和立項,不能立即推出相關產品;二是虛擬偶像公司大多出身於文娛領域,面對更偏技術向的AIGC,縱使心有意,但追逐的難度也非常高。
《AI繪圖,但是洛天依》,UP主:是瞳輝啊
從現在各個虛擬偶像二創領域的成果來看,基於已有高人氣的虛擬偶像,推出定制化的AIGC工具,對於IP擁有方來說,是一件有利可圖的事。首先,定制化的AIGC工具能方便創作者更準確地製作相應的AIGC產品,提升作品的綜合質量;其次,定制工具可以更方便地了解創作者的創作需求,隨時進行技術調整;最重要的是,經過定制的工具能有效防止AIGC常見的侵權、越權創作情況發生,規範基於自身IP的AIGC創作邊界。
如果有一款好用的定制化AIGC工具面世,或許能迎來十多年前V家剛剛面世時的創作潮。回顧過去,高人氣的虛擬偶像都離不開粉絲們的二創,AIGC工具能更方便地將粉絲的熱情轉化為高質量的二創內容,吸引潛在粉絲的關注和加入。
AIGC能否獨挑虛擬偶像大樑?
在虛擬偶像行業,AIGC的故事聽起來非常誘人,甚至能夠完成不少”去中之人化“的工作,讓虛擬偶像面向虛擬更進一步,但AIGC實際上只能帶動虛擬偶像產業一小部分。
據了解,遊戲公司米哈遊旗下的虛擬偶像鹿鳴舉辦過兩場直播活動,最近一次是2023年的1月。兩場直播的人物發聲已經通過旗下的逆熵AI解決,但鹿鳴的動作依舊依賴真人動捕,直播過程中也能發現存在運營人員引導干預的行為。而其他虛擬偶像的直播活動仍以中之人配音為主,這在一定程度上說明,寄希望於目前的AIGC技術完整地跑通虛擬偶像運作的流程,還有些為時過早。
更重要的是,對於當下火熱的虛擬偶像而言,粉絲追求的並不是單一的美術、聲音,而是一位有溫度的虛擬偶像,這其中不僅包含著製作人、中之人的角色塑造,還包括一整套偶像化的運營策略。讓虛擬人更像一個親和的人類,才是虛擬偶像獲得人氣的基本,”皮魂一體“才是虛擬偶像的製勝關鍵。而這對於當下的AIGC而言,還顯得有些難。
但對於瀕臨消失,離粉絲越來越遠的過氣虛擬偶像而言,AIGC確實可以拉她們一把,但目前AIGC能做到的,只是讓這些看起來無人問津的精緻虛擬小人,相對鮮活地存在既有粉絲的記憶裡,完成粉絲的執念罷了。