文 | 靠谱二次元
不知你有没有发现,虚拟偶像行业已经许久没有鼓舞人心的大事件了?和2021年“主播与数字人齐飞,跳舞共唱歌一色”,虚拟偶像动辄单月收入百万的盛况相比,2022年人们关于虚拟偶像听到更多的是“开盒”、“塌房”和“差评如潮”等负面消息。虚拟偶像不再是资本市场的香饽饽,倒更像是一个不稳定的烫手山芋,每当产生负面消息,这一虚拟偶像IP的价值都有被直接归零的风险。
【资料图】
人与产能的强绑定使得虚拟偶像发展受限,这也成为了业内的一项难题。对于有中之人扮演的虚拟偶像发生中之人离队状况,重金打造的虚拟形象就不得不被雪藏;而纯虚拟化的虚拟偶像发生创作人员变动,内容创作风格的转变也会让形象的人气受损。原本虚拟偶像愿景中的“永不塌房”,渐渐成了笑谈。
2023年初,ChatGPT的热度飙升给到不少互联网用户惊喜,通过AI的帮助,内容的生成变得更简单。AIGC相关产业受到了大量关注,靠谱二次元发现一些AIGC项目开始运用在虚拟偶像二创领域,例如有粉丝用Stable Diffusion、DALL·E、NovelAI、Midjourney等AI作画工具为心爱的虚拟偶像创作插画甚至是cosplay,丰富衍生的图片内容。不过,无论是插画和cosplay,都可以由真人完成,所以此类创作虽然能让粉丝叫好,并没有一种让偶像复活的惊喜感。
与此同时,SVC歌声音色转换技术开始在虚拟偶像二创圈流行,包括diff-SVC、so-vits-svc在内的多个开源技术项目得以应用。这些技术通过深度学习,根据人类声音合成AI模型,并转换原有人声,生产出和虚拟偶像声音十分相似的音频作品。技术的进步让虚拟偶像的二创跨出了一大步,不再局限于视觉。
近几个月,基于凑·阿库娅、鹿乃、珈乐等虚拟偶像角色进行仿真二创的AI投稿作品陆续出现在国内外的视频网站,这些以AI虚拟偶像名义发布的作品让粉丝们激动不已,甚至有珈乐(虚拟偶像女团A-SOUL成员)的粉丝在珈乐AI的音频投稿下再一次打出了这样一行字:“她只存在了一年半,接下来我要给她完整的一生。”
以前连粉丝都觉得是在玩梗的言论,如今有希望通过AIGC让其成为现实。
AIGC续命虚拟偶像
2022年5月,虚拟偶像女团A-SOUL成员珈乐的中之人33和公司解约,使得珈乐进入休眠,此后A-SOUL一直以四人团的形式运营,这让不少珈乐的唯粉倍感失落。后来,33以真人身份重新开播,熟悉的声线让不少人从珈乐粉转为了3粉。但也有珈乐的粉丝觉得自己还是喜欢那个紫头发大眼睛狼耳朵,有着偶像化运营的虚拟形象,并不是形象的扮演者。一时间,围绕着中之人和虚拟形象之间的争议不断展开,随着33的直播越来越有个人特色,珈乐粉纷纷切割,重新回看起过去珈乐的作品和直播切片。
AI珈乐演唱A-SOUL二创名曲《枝江》,UP主:存梦P
但总看历史作品对于粉丝而言太不过瘾,于是有一批基于UTAU引擎的珈乐二创音乐作品横空出世,虽然也能成为一部分珈乐粉丝的“代餐”,但老旧的UTAU引擎生成的人声电音过重,存在不够真实的缺点,让不少粉丝无法接受。粉丝是想让心爱的虚拟偶像变得更加真实,距离更近,但和中之人相比,UTAU并不能给到大多数粉丝替代感。在2022年底,Diff-SVC、so-vits-svc等项目陆续在开源社区发布,给粉丝还原珈乐的声音提供了更好的选择。
已经超过2300位技术宅收藏这一AIGC项目
和UTAU需要大量原音生成声音数据库,再利用MIDI谱面重新生成对应歌曲的过程相比,基于深度学习的Diff-SVC(简称ds)、so-vits-svc(简称svs)明显要先进得多:一方面ds、svs的准备成本比较低,用户只需要准备数十分钟的角色语音、歌声文件交给svs进行深度学习,就能生成对应角色的AI声音模型,同时免去了音频调校的工序,极大地降低了创作者的门槛;另一方面ds、svs的合成效果更好,因为音频基于SVC技术,能让一些歌手原本的唱法得以保留并直接转换,生成的音频更贴合收听者。
因此,这类AIGC技术不仅让声音二创变得更加真实,还大大降低了声音类二创的难度指数。想为珈乐等虚拟偶像创作声音内容的创作者,如今只需要一个成熟的训练模型,一首唱好的歌,加上一张好显卡,就能得到由喜欢的虚拟偶像演唱的翻唱音乐。
整合包的出现让AI翻唱的制作更简单了,UP主:夜歩空
初音未来、洛天依等V家粉丝最近也吃到了AIGC带来的内容红利,由于VOCALOID热度降温等原因,V家相关的非音乐内容创作开始变少,知名插画师近年很少再为爱发电地为这些“过气萌二网红”创作作品,这让不少MikuFans、锦依卫只能眼馋其它虚拟偶像的二创。但AI作画工具的兴起,让技术宅可以自己动手丰衣足食,一边靠AI创作,一边看着自己的作品流下老二次元的眼泪。
在2022年之前,通过主流的AI作画工具生成一张二次元风格的图片还需要大量的参数,且生成的AI作品质量极为不稳定,需要碰运气才能生成一张能看的图片。但在2022年10月,基于Stable diffusion模型的NovelAI发布,改变了这一切,这个擅长生成二次元风格插画的AI作画工具让偏爱二次元风格的AI画师们狂喜,NovelAI不仅提供了传统的文字转图片的方式,还有着基于已有图片反推文字,并生成风格化图片的功能,这让AI创作二次元插画的难度再次降低。
Stable Diffusion+NovelAI生成的AI珈乐插画,UP主:ppupsie
今年,随着NovelAI在个人电脑上的适配逐渐成熟,不少风格化训练模型被共享,AI算力云平台陆续上线,希望为虚拟偶像创作插画等内容的粉丝进入这一领域的门槛越来越低,AI插画作品陆续发布,不少初音未来、洛天依等V家角色的高质量AI插画、AI Cosplay甚至是AI手办模型作品陆续出现在大众视野,引发了新的议论热潮。
官方不应缺席AIGC
和民间AI创作工具使用门槛越来越低,用户操作越来越简单相比,官方在新技术工具跟进方面就显得有些掉队了。例如已经休眠一年的虚拟主播绊爱(点击回顾:第一虚拟主播「绊爱」的消失),曾在去年推出了基于CeVIO AI的声库#kzn,主张用户通过创作音乐作品的形式为绊爱IP继续做贡献。但是CeVIO AI是一款类似于VOCALOID的音频制作工具,需要创作者有一定的音乐创作基础。其中的AI功能主要为自然平滑地生成人声服务,并没有降低创作者的使用门槛。此外,#kzn的声线虽然取自绊爱,但由于CeVIO AI引擎本身的风格,仍保留有一些电子音,相关作品的听感远不如绊爱本体的翻唱。
一直在限时发售的#kzn 声库
在国内虚拟偶像行业,只有洛天依、星尘等少量虚拟歌姬推出了利用AI辅助创作的产品,其中洛天依等Vsinger和ACE Studio、XStudio分别合作推出了AI声库,可以让发声更加平滑顺畅;星尘则脱离了原本的VOCALOID引擎,转为通过自家的AI发声引擎Synthesizer V提升了原有的发声质量。对于原本的P主(音乐创作者)来说,新工具的易用性有所提升,但对想成为P主的新人而言,相关工具的上手难度仍然偏高。而虚拟主播由于普遍生存周期较短,依赖中之人以直播整活变现,鲜有可供粉丝使用的AI创作工具。
靠谱二次元总结了当下大部分虚拟偶像都没有合适的AIGC工具原因主要有两点,一是AIGC发展速度超过预期,一些公司对AIGC领域还在观察、预研和立项,不能立即推出相关产品;二是虚拟偶像公司大多出身于文娱领域,面对更偏技术向的AIGC,纵使心有意,但追逐的难度也非常高。
《AI绘图,但是洛天依》,UP主:是瞳辉啊
从现在各个虚拟偶像二创领域的成果来看,基于已有高人气的虚拟偶像,推出定制化的AIGC工具,对于IP拥有方来说,是一件有利可图的事。首先,定制化的AIGC工具能方便创作者更准确地制作相应的AIGC产品,提升作品的综合质量;其次,定制工具可以更方便地了解创作者的创作需求,随时进行技术调整;最重要的是,经过定制的工具能有效防止AIGC常见的侵权、越权创作情况发生,规范基于自身IP的AIGC创作边界。
如果有一款好用的定制化AIGC工具面世,或许能迎来十多年前V家刚刚面世时的创作潮。回顾过去,高人气的虚拟偶像都离不开粉丝们的二创,AIGC工具能更方便地将粉丝的热情转化为高质量的二创内容,吸引潜在粉丝的关注和加入。
AIGC能否独挑虚拟偶像大梁?
在虚拟偶像行业,AIGC的故事听起来非常诱人,甚至能够完成不少“去中之人化”的工作,让虚拟偶像面向虚拟更进一步,但AIGC实际上只能带动虚拟偶像产业一小部分。
据了解,游戏公司米哈游旗下的虚拟偶像鹿鸣举办过两场直播活动,最近一次是2023年的1月。两场直播的人物发声已经通过旗下的逆熵AI解决,但鹿鸣的动作依旧依赖真人动捕,直播过程中也能发现存在运营人员引导干预的行为。而其他虚拟偶像的直播活动仍以中之人配音为主,这在一定程度上说明,寄希望于目前的AIGC技术完整地跑通虚拟偶像运作的流程,还有些为时过早。
更重要的是,对于当下火热的虚拟偶像而言,粉丝追求的并不是单一的美术、声音,而是一位有温度的虚拟偶像,这其中不仅包含着制作人、中之人的角色塑造,还包括一整套偶像化的运营策略。让虚拟人更像一个亲和的人类,才是虚拟偶像获得人气的基本,“皮魂一体”才是虚拟偶像的制胜关键。而这对于当下的AIGC而言,还显得有些难。
但对于濒临消失,离粉丝越来越远的过气虚拟偶像而言,AIGC确实可以拉她们一把,但目前AIGC能做到的,只是让这些看起来无人问津的精致虚拟小人,相对鲜活地存在既有粉丝的记忆里,完成粉丝的执念罢了。