ai捏脸师:从幕后到台前,他究竟经历了怎样的故事?

2022江苏卫视跨年演唱会上 , 周深与邓丽君一曲跨越时空的合唱让人久久不能自已 。但当人们从歌曲的旋律中回过头来 , 大家更感兴趣的 , 或许是邓丽君这样虚拟形象应当如何构建 。
毕竟 , 元宇宙已经来了 , 而在这个颜值即正义的时代 , 我们真实的长相没得选择 , 元宇宙的长相却可以定制 。
有需求就会有市场 , 让人在虚拟世界“长”出一张好看的脸这件事自然也早就有人在做 。
2021年年初 , EpicGame公司旗下的虚幻引擎平台发布了一款新的工具MetaHumanCreator , 宣称能够让任何人在几分钟里创造一个配备完整骨骼、毛发和服装的数字人形象 。
在韩国 , 有人已经通过MetaHumanCreator制造的虚拟形象在游戏直播平台上成为网红 , 年入千万 。在国内 , 类似的AI捏脸技术其实也早已在《逆水寒》《天谕》《永劫无间》等诸多游戏中落地 。
然而 , 作为AI捏脸技术的构建者 , AI捏脸师的幕后故事却不太被人们所知 。
但最近 , 随着元宇宙概念的风起 , 在虚拟世界里塑造一个更真实的人物形象成为建设元宇宙的基础技术之一 , 像晚丰一样长期从事AI捏脸技术研究的工程师们也开始被推到了前台 。
所以这一次 , 商业数据派也访谈了网易伏羲的几位AI“捏脸师” , 看看在他们眼中 , 一个新兴的职业从幕后到台前 , 究竟经历了怎样的故事?而面对已经乘风而起的元宇宙 , 他们又期望技术给世界带来怎样的改变?
颜值即正义的虚拟世界
捏脸是第一步
颜值即正义 , 进入元宇宙的第一步就是创建一个虚拟形象 。
经常玩游戏的朋友都会知道 , 为了增强体验 , 现在很多游戏都会设置一个环节 , 让玩家可以为自己的角色亲手塑造一个形象 。
2013年 , 韩国游戏厂商NCSoft推出的一款主打东方武侠和捏脸系统的游戏《剑灵》在国内爆火 。从此之后 , 捏脸系统就逐渐成为了绝大多数MMORPG类游戏中不可或缺的一部分 。2018年 , 网易推出一款大型端游《逆水寒》 , 其中就包含了捏脸系统 。

ai捏脸师:从幕后到台前,他究竟经历了怎样的故事?
文章图片

文章图片

(图:游戏《剑灵》中的捏脸效果)
“当时的捏脸系统很复杂 , 几十上百个滑块 , 调整各种参数 , 普通玩家要好几天才能捏出一个自己的形象 。”AI捏脸师 , 网易伏羲视觉技术负责人神秀说道:“这个流程太复杂 , 我们希望开发一个AI算法 , 让每一个用户都能用一张照片在游戏中快速创建让自己满意的形象 。”
“我们最初的构想是 , 希望AI能够模仿真实人类在捏脸时的反馈 , 比如我先捏一个初稿 , 然后和用户上传的图像对比 , 看看哪里不像 , 比如说眼睛、嘴巴 , 然后再针对性地去调整 。然后再对比 , 再调整 , 如此反复 , 最终让两者无限的接近一致 。”
说起来容易 , 但做起来却并不简单 。
“刚拿到这个课题的时候是最难的 。”神秀告诉商业数据派:“因为整个业界在之前都没有人做过这个事 , 没有先例可以借鉴 。”
首先就是如何捏脸的问题 , 当时伏羲内部其实也从不同角度讨论了许多方法 , 但最终只有两种是比较成熟可行的 。
一种是从骨骼捏脸的角度去做尝试 , 这种方式比较成熟 , 也比较适合现有的一套产业化流程 , 所以在游戏中落地也比较容易 。但它的缺点就是没有那么像 。
另一种方案就是从人脸重建的角度去尝试 , 这套方案可以完全重建人脸的三维贴图 , 甚至人脸皮肤的每一个褶皱 。但它的缺点就是计算的耗时会比较长 , 然后同步也会比较困难 , 这也让它不太适合游戏的场景 。