这个人竟是假的...?!
随着实时引擎在各个领域的广泛使用,人们对数字人类的兴趣日渐浓厚,越来越多的角色被创作出来。有一位来自韩国的作者金贤日( 音译),他正使用Unity开发一个虚拟偶像的项目。* 全文翻译自:
以下是作者对项目的分享。
“我想用实时渲染方式创建一个活生生的人,给人以从虚拟空间中走出真人的感觉。”--金贤日
项目起源
我想用实时渲染方式创建一个活生生的人,让它给人感觉是虚拟空间走出的真人,也想挑战自己可以做到什么程度。随着项目的推进,我的目标也逐步实现。
作为一名3D角色美术师,我在游戏行业摸爬滚打了10多年,经历了各种项目,也积累了角色制作的经验,但始终遗撼的是无法表达真实角色的情感。当我看到目前图形技术的发展时,我认为应该可以实现我真正想要表达的东西了,就开始了这项挑战。
Project Touch Girl之后成为YouTuber的原型
随后,我决定离开当时的公司,开始制作针对移动平台名为Project Touch Girl的游戏。这是一个交互约会仿真游戏,可以在手机上触摸角色进行互动。
我是一名美术师,尝试做这样一个项目时,编程对我来说是很大的障碍。好在当我进一步学习时,感觉Unity的C#的难度对于我这样的美术师来说还能掌握。我也针对品质的部分做了很多测试与调整,让它实现我想要的外观。
当看到Unity新的《异教徒》(The Heretic)视频和其他HDRP Demo所展现的惊人品质时,我认为这已经达到了我的作品需要的CG品质。
SU-A项目
当看到HDRP的潜力时,我认为以实时渲染方式制作虚拟偶象的时机已到,所以我离开了公司,开始认真研究。我想要的不是单纯的图像式偶象表演,而是能够和真人交互的角色。
Touch Girls项目之后,新的SU-A项目进行了将近一年。2019年12月31日,我在Twitter上发布了一个视频,当天就有近20万次浏览,反响特别好。
著名的科幻作家威廉·吉布森(William Gibson)也转推了,现在也还有很多人转发。
很多看过视频的人都在问“这真的是在Unity中渲染的吗?”所以我又上传了一些Unity编辑器中的照片,很多人发表了“我不敢相信”“真的很棒”之类的评论。著名的CG网站80lv也对此进行了报道。
开发中的画面, 从原本的Unity 2018升级到2019.3。HDRP版本是7.1.8
为何不使用3D扫描而要自己建模?
首先,如果是人物扫描,就需要配备一些复杂的设备比较,此外要找到符合我心目中的角色的模特也不容易。而且我的专业就是做人物角色,我喜欢做角色,因此我对制作自己想要的角色很有信心,而对于扫描人物技术则充满疑问。目前大家都认为项目中的角色非常逼真,这让我很自豪。
在项目进行中要展示的内容
角色给人的感觉要像真人,此外,角色的表情动作也要到位,达到时下公认的“漂亮”的标准。有别于西方文化,东方文化和K-POP正在兴起,我认为有些是韩国文化特有东西,也希望能做出证明这点的代表作。
目前,角色的脸部表情用了大约50个Blendshape节点,我也在研究表情和表情之间的转换如何看起来更自然。
轻咬下唇的感觉就像真人
皮肤
皮肤的呈现是制作女性角色时最重要的部分之一。HDRP的StackLit无需修改即可使用,而8K Albedo贴图作为额外的细节纹理,来表达皮肤的细节贴图。
头发
头发Shader是基于Unity的Shader Graph的Hair Shader。当前我们正在研究各种方法来实现根据角色的运动来表达头发的自然飘动。
可以在Shader >> HDRP >> Hair Graph中创建和使用HDRP的头发着色器。
动态变形应用在衣服和头发的移动。当前正在进行各种测试找出让头发飘动更自然的算法。
视频中我使用iPhone X进行动作捕捉和眼球追踪。从移动整个身体到移动手指,结果都符合预期。目的是自然地实时展示整个身体的运动。可以从Package Manager下载AR Face Tracking来获取面部捕捉和追踪数据。
在Project SU-A中,我们更改了HDRI的来源,更改了T恤的颜色,调整到让角色看起来更自然。首先,我将T恤的颜色更改为白色,并调整了后处理的Bloom、Color Grading、White Balance等。调整后处理(Post Porcessing)的一些设置,从正面向角色打了盏聚光灯,这是模拟在真实工作室中拍摄模特的照明。
由于照明太强导致人脸曝光太多,因此我不得不修改和补强角色脸部表情(如妆容)的材质。这个过程让我感觉好像是帮一个真人化妆补光,是一次非常有趣的经历。
项目目标
这个项目仍然有很多东西正在准备,目前也还没有达成任何投资计划。不过我已经实现了角色服装和细节制作流程,我们可以用比较高的标准来完成这个项目,让它像真人一样扮演虚拟偶象的角色。目标是就做到这一点。
作者的办公桌,他大部分时间都在这里开发这个项目
如果您对该项目感兴趣,可以关注作者Twitter:Hyeong-il Kim,查看开发进度。作者会在其中发布开发中的一些信息和屏幕截图。
作者基于Unity开发的虚拟偶像项目带了极大震撼,人物效果以假乱真,不禁引人遐想。未来,借助快速发展的技术和手段,诸如电影《她》中的设想或将成为现实也未可知。 让人心动了。 背后是大汉崽扮演 这也能吹。。。
页:
[1]