时间:2022-12-29 00:02:51
对最近游戏领域有所关注的朋友们或许发现了,前几天由我们主动在网游圈引发那次小小的“地震”——《武林旧事·叶雪青》演示视频,至今仍在各平台被热烈讨论着。
b站目前播放量已经超过260万 微博发布当天登上热搜第28位 |
作为“2023年品质飞跃计划”的主角之一,师姐单机玩法的质量大家有目共睹,用小寒的话说就是:咱们的首飞飞挺高~
而能如此有底气,是因为除了画面建模等方面的飞跃提升,我们还在师姐的“微表情“这个堪称魔鬼细节处,完成了一项全新黑科技技术的尝试!
接下来,让我们隆重请出电影画质挑战者、师姐微笑守护者、微表情堪比真人的全新黑科技:人脸4D扫描技术!
在三清山落日的余晖下,与即将远行的师姐相遇,她还是如往昔一般温柔,眼眸灵动间,仿佛跨越了次元的阻隔。
压缩严重,游戏内效果更佳 |
一次浅浅微笑,一份不经意的害羞,甚至师姐连对“我”受伤的担忧,都展现的无比生动,如真人一般无二。
压缩严重,游戏内效果更佳 |
看到这里,各位能明白为何小寒敢称这项技术为黑科技了吧。这可是逆水寒联合了公司诸多大牛部门,如:网易伏羲实验室、仓颉动画中心、雷火3D扫描实验室,齐力攻坚业界难题,将最顶级、最前沿的技术实装在咱们雪青师姐的身上。
那么,到底什么是人脸4D扫描技术呢?让小寒来给诸位同门展开讲讲~
所谓人脸4D扫描技术,其实是基于传统3D扫描技术的一种时序拓展,它能更精准地捕捉人脸每一帧的变化,收获比过去更加逼近真实人脸的表情效果。
如果3D扫描是记录人脸在空间中的单张快照,那么4D扫描就是记录由3D快照组成的模型序列!
也因此,在聊人脸4D扫描之前,我们首先得聊聊原来的3D扫描技术。
事实上,随着技术发展,传统的3D扫描技术其实已经可以制作出以假乱真的人物角色了。
拿咱们自己来说,雷火工作室基于图像建模的人脸3D扫描技术,采用了多达46台相机组成的【3D相机阵列】,能同时单次曝光采集46个角度的人脸二维图像,并以此制作成角色原型高模或表情基原始高模。
在3D扫描技术帮助下,产出的人物角色在静态时的表现无可指摘,还原度极高;可一旦“动”起来就可能存在失真的问题,尤其是有面部特写的时候,容易表现出不自然的神态。
为了在《武林旧事·叶雪青》以及未来的逆水寒中,真正实现堪比真人微表情的理想效果,人脸4D扫描技术的研发便被逆水寒项目组提上了日程。也正是大家在开头所见的师姐视频演绎。
那人脸4D扫描技术,相较于传统的3D扫描,为何能更加精准地还原角色微表情,甚至连动起来也生动无比呢?
众所周知,角色建模是一个复杂的过程,从人脸到数据、从数据到建模、从建模到游戏,每一个过程都有着不同的难点与挑战。
基于此,我们对应上述各个阶段,分别研发了「扫描重建过程」、「同拓扑过程」、「拟合绑定过程」,以保证演员的表演最终能在游戏中高保真呈现。
拿「扫描重建过程」来说,在人脸到数据阶段,4D扫描将原来的单次曝光变成了连续拍摄,46台相机每秒协同曝光50次,以3D扫描50倍的数据量,串联成每秒50帧的3D模型序列——这种数据量下呈现模型精度,能有多真实可想而知。
而「同拓扑过程」,则是为了在数据转换为建模阶段,保证所有表情动作在迁移过程高度精准,完美还原真人微表情——这必须通过大量复杂的图像算法工作,确保“面部任一细节的模型顶点索引在建模中完全一致”,在海量的数据计算中,不能有一点差池!
而「拟合绑定过程」相对更好理解一点,通俗一点讲就是“极限压缩”,将上述过程后庞大的数据压缩从而适配到游戏中——基于游戏内的面部绑定系统,利用高精度AI表情迁移算法,对3D模型序列进行rig参数拟合,形成高还原度且数据量小的rig动画参数。
在三大核心流程的基础上,结合丰富的动态数据,算法和人工协作处理……最终呈现的,便是上面视频中,堪比真人实机拍摄的师姐了。
事实上,如何将演员的表演,特别是颇具感染力的面部细节,无损还原到数字角色身上,一直是各大厂商追求的“圣杯”,逆水寒自然也不例外。
因此,在不知道熬掉多少根秀发之后,我们终于连同雷火各个顶尖的技术团队——网易伏羲实验室、仓颉动画中心、雷火3D扫描实验室,实现了从3D扫描到4D扫描、从照片到视频的维度级跨越式升级!
又由于人脸4D扫描技术在“真实”到“游戏”传输过程中的高保真,很大程度上解放了演员,让他们能更加自由尽情地表演、完美还原角色人物张力。
内外兼修之下,各位便看到了师姐跨越次元壁,如真人一般出现在我们眼前,仿佛真的在面对面交流一样。
值得期待的是,这不仅仅是概念展示,我们将会在不久的未来,将该项技术运用于逆水寒江湖,各位将在不久后,看到一个个真正“活起来“的NPC了!
是的!大家期待已久的NPC模型优化计划第二弹即将来袭,惊喜不绝!这次,我们将充分利用人脸4D扫描技术这一“黑科技”,对游戏内师姐叶雪青的模型进行更新迭代,力求塑造精度更高、更贴近角色设定的游戏模型!
人脸4D扫描技术,作为本次《武林旧事·叶雪青》玩法中的一次全新尝试,作为逆水寒2023品质飞跃计划中的一环,是项目组向未来交付的第一份答卷。
而我们也将在这条路上继续前行,直至打造出真正理想中的真实江湖,请各位同门保持期待,一直伴江湖同行!
2023-03-09
3062023-03-09
1512023-03-09
1212023-03-09
952023-03-08
1142023-03-08
882023-03-08
1162023-03-08
2502023-03-08
1592023-03-07
102