NVIDIA又要放大招了？各种先进AI技术将进入CG制作流程

栏目：娱乐资讯时间：2023-05-06

　　“ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”

　　中国很有影响力影视特效CG动画领域自媒体

　　CG界的科技技术盛会SIGGRAPH每年都会如期举办，届时将会有来自全世界顶尖的CG界大厂，大神们带着自己研发的新成果在会议期间公开发布。SIGGRAPH2023目前已提上日程，计划将于2023年8月6日至10日举办。目前很多大厂都开始跃跃欲试了，特别是大名鼎鼎的NVIDIA目前公开声明，他们打算公布18篇关于生成式人工智能和神经网络图形学的论文。

　　据了解这些论文是NVIDIA与美国、欧洲和以色列的十几所大学合作编著的，包括将文本转化为个性化图像的生成式人工智能模型；将静止图像转换为3D物体的逆向渲染工具；神经物理模型，使用人工智能模拟超写实复杂的3D元素；以及神经渲染模型，生成实时、人工智能驱动的视觉细节的新功能。涉及艺术、建筑、平面设计、游戏开发和电影领域，目的是能够让创作者更快地制作高质量的视觉效果，用于故事板、预览以及最终制作。

　　Ok，在这里我们介绍和我们行业相关的几个技术。

　　逆向渲染

　　在我们平时的工作中，在有了创意后，画出概念图，接下来的工作就是建模，渲染等等一系列流程。但这个过程太漫长了。我们现在所有的软件功能升级和硬件迭代都是在尝试提高创作者的效率，压缩这个过程。科学家们也是，这次NVIDIA的研究员目前正在研究人工智能技术，可自动将2D图像或者视频转转换为3D场景，然后再将AI生成的内容导入软件中根据自己需要做进一步编辑。

　　角色创建

　　NVIDIA与加州大学圣地亚哥分校的研究人员共同撰写的论文讨论了可以基于单一2D肖像生成和渲染超写实3D头部和肩部模型的技术，这是一项重大突破，可以通过人工智能创建3D化身和3D视频会议。此方法在消费级桌面上能实时运行，而且只使用传统的网络摄像头或手机摄像头来生成照片真实感或风格化的3D渲染。

　　AI提取视频动作应用到3D角色

　　NVIDIA与斯坦福大学合作，研究人员创建了一个人工智能系统，可以从真实网球比赛的实拍视频记录中学习一系列网球技巧，然后把这些动作映射到3D角色上。模拟网球运动员可以在虚拟球场上准确地将球打到目标位置，甚至可以与其他角色进行长时间的拉力赛。

　　除了网球的测试案例，SIGGRAPH的这篇论文还解决了制作3D角色的难题，这些角色可以在不使用昂贵的动作捕捉数据的情况下，以写实流畅的动作表现出不同的技能。

　　神经物理学实现逼真模拟

　　角色艺术家们对于制作毛发流程是最熟悉不过的了，人类头上平均有10万根毛发，每根毛发都对个体的运动和周围环境做出动态反应。传统流程是创作者使用物理公式来计算头发的运动，根据可用资源简化或近似头发的运动。无论是人物的头发还是动物的毛发都需要角色艺术家们耐心的去梳理，有的插件还和软件本身兼容性不好，模拟过程就崩掉了。

　　那，现在有新技术了，NVIDIA的方法是使用神经物理学实时高分辨率模拟数万根头发，这是一种人工智能技术，传授神经网络预测物体在现实世界中的移动方式。可精确模拟大规模头发，此新方法还专门针对现代GPU进行了优化。与目前最先进的CPU的解算方式相比，模拟时间大大缩短，时间从几天减少到几个小时，同时也提高了实时头发模拟的质量，实现基于物理的精确模拟和交互式毛发梳理。