关于云计算:阿里云视频云用技术普惠打造平民化虚拟人

29次阅读

共计 2173 个字符,预计需要花费 6 分钟才能阅读完成。

近日,国内首个超写实数字人 AYAYI 发表入职阿里,成为天猫超级品牌日的数字主理人,二者将独特开启元宇宙的营销世界。在将来她将与天猫解锁多个身份,如 NFT 艺术家、数字策展人、潮牌主理人、顶流数字人等等。

提到虚构数字人,大家第一工夫想到就是 2012 年诞生的洛天依。她的呈现补了国内空白的虚构偶像市场。尽管她最后只领有声音与立绘,但九年来,粉丝们一直为她写歌作曲、绘制插画、制作 MMD,这些同人创作,一点点填充着最后的空白。相比于真人养成偶像,依靠于 UGC 内容长大的虚构偶像,更像是一场纯正的养成式造星。而在 2021 年初以洛天依为代表的、次元特色的虚构偶像开始在春晚大放荣耀,这意味着国家级平台对次元文化的尊重与认可,也是虚构与事实产生的一次无益互动。


洛天依亮相春晚节目少儿歌舞《听我说》

iiMedia Research (艾媒征询) 数据显示,2020 年中国虚构偶像外围产业规模为 34.6 亿元,同比增长 70.3%,预计 2021 年将达到 62.2 亿元;另一方面,随着商业价值被一直挖掘,越来越多产业与虚构偶像分割在一起,虚构偶像带动产业规模 2020 年为 645.6 亿元,预计 2021 年为 1074.9 亿元。
而在国外的短视频平台上,虚构数字人也是大行其道。一位名叫 Lil Miquela 的虚构偶像,其人设是一个 19 岁混血女孩,有着可恶雀斑,长期定居在洛杉矶,领有西班牙裔、巴西裔和美国血统的虚构模特及音乐人。据央视网 2021 年 01 月 30 日的报道,Lil Miquela 在 2019 年的支出折合人民币大概为 7600 万。

什么是虚构数字人?

“虚构数字人”一词最早源于 1989 年美国国立医学图书馆发动的“可视人打算”(Visible Human Project, YHP)。2001 年, 国内以“中国数字化虚构人体的科技问题”为主题的香山 迷信会议第 174 次学术讨论会提出了“数字化虚构人体”的概 念。这些“虚构数字人”次要是指人体构造的可视化,以三维模式显示人体解剖构造的大小、形态、地位及器官间的互相空间关系,即利用人体信息,实现人体解剖构造的数字化。次要利用于医疗畛域的人体解剖教学、临床诊疗等。

不同于上述医疗畛域的数字化人体,目前网络上围绕元宇宙所探讨的虚构数字人 (以下简称“数字人”) 是指具备数字化形状的虚构人物。与具备实体的机器人不同,虚构数字人依赖显示设施存在。虚构数字人宜具备以下三方面特色: 一是领有人的外观,具备特定的面貌、性别和性情等人物特色; 二是领有人的行为,具备用语言、面部表情和肢体动作表白的能力; 三 是领有人的思维,具备辨认外界环境、并能与人交换互动的能力。

近年来,得益于深度学习算法的冲破,数字人的制作过程变成更加简略,虚构数字人开始进入公众的视线,利用在各行各业,例如曾经呈现了娱乐型数字人 (如虚构主播、虚构偶像)、教育型数字人(如虚构老师)、助手型数字人 (如虚构客服、虚构向导、智能助手)、影视数字人(如替 身演员或虚构演员) 等。不同形状、不同性能的虚构数字人赋能影视、传媒、游戏、金融、文旅等畛域,依据需要为用户提供定制化服务。


虚构数字人产业视图 材料起源:《2020 年虚构数字人倒退白皮书》

在实现技术方面,虚构数字人零碎个别状况下由人物形象、语音生成、动画生成、音视频 合成显示、交互等 5 个模块形成。其中最为根底的是人物形象技术,依据人物图形资源的维度,可分为 2D 和 3D 两大类,从形状上又可分为卡通、拟人、写实、超写实等格调。


材料起源:《2020 年虚构数字人倒退白皮书》

阿里云卡通智绘:打造身边的虚构偶像

因为虚拟人的人物形象构建方面具备肯定的技术门槛,所以对普通人来说,虚拟人仿佛仍停留在偶像阶段,只能“远观”。但来自阿里云视频云的团队却通过优化的算法技术,让普通人也能有机会发明属于本人的卡通形象,在虚拟世界里塑造“平民偶像”,在 2021 年的云栖大会开发者展区,阿里云就展现了最新技术——卡通智绘我的项目,吸引了近 2000 名体验者,成为了大会爆款。这项技术采纳了隐变量映射的人脸风格化技术计划,通过机器学习算法能够把拍摄者原本的面目特色和指标训练格调做深度交融,重建面部的形态,它既合乎用户脸部特色,又具备卡通的风格化,还能够跟踪用户的面部姿势和丰盛的表情生成实时动画。


而这所有的技术全靠 AI 实现,对使用者而言只需通过上传一张自拍照就能主动生成合乎用户人脸特点的虚拟人。

阿里云卡通智绘能够对输出人像图片,挖掘其显著特色(如眼睛大小,鼻型等),自动化生成具备集体特色的虚构形象(即风格化后的成果)。所谓人脸风格化,就是将实在的人脸头像转换为特定的格调头像,最常见的包含卡通格调、动漫格调、油画格调,如下图所示:


阿里云视频云卡通智绘效果图

得益于 AI 技术的高速倒退,虚拟人曾经不再是触不可及的事物,在可预感的将来,由卡通智绘创立虚拟人将作为虚构主播、虚构老师、虚构客服、虚构向导的数字化身,越来越频繁的呈现在各行各业。

参考资料:中国人工智能产业倒退联盟总体组和中关村数智人工智能产业联盟数字人工作委员,《2020 年虚构数字人倒退白皮书》

「视频云技术」你最值得关注的音视频技术公众号,每周推送来自阿里云一线的实际技术文章,在这里与音视频畛域一流工程师交换切磋。公众号后盾回复【技术】可退出阿里云视频云产品技术交换群,和业内大咖一起探讨音视频技术,获取更多行业最新信息。

正文完
 0