科技魔方

NVIDIA发布多个神经图形SDK,加速3D内容开发

AR/VR

2022年08月10日

  8月10日消息,NVIDIA在SIGGRAPH 2022首日发布十多款全新的神经图形SDK,旨在为交通、医疗保健、电信、娱乐等领域的设计师、创作者提供更简单、快速的3D内容开发方式,加速“元宇宙”开发。据悉,这些工具可用于创建高保真3D模型,支持物理交互模拟,其中包括早前展示过的3D MoMa、全息VR眼镜等技术。

  据青亭网了解,神经图形是一个将AI与图形技术集成的新领域,其图形管道会从数据中学习,从而优化图形效果、自动化选择设计,重新定义创建、模拟和体验虚拟世界的方式。

  具体来讲,本次公布的SDK分别面向三大场景:3D内容创作、物理和动画、体验。

  3D内容创作相关SDK包括:Kaolin Wisp——用于加速3D深度学习的PyTorch库; Instant Neural Graphics Primitives——Instant NeRF背后技术,可将静止图像合集通过逆向渲染模型转化为3D场景; 3D MoMa——此前已经公布的一项3D模型合成技术,其特点是可通过2D图像生成基于三角形网格的3D模型,可直接导入3D引擎; GauGAN360——GauGAN的迭代技术,也是一种AI模型,可将涂鸦合成8K、360°全景图,并移植到Omniverse场景中; Omniverse Avatar Cloud Engine(ACE)——一个基于云端的AI虚拟化身开发工具。

  物理和动画相关SDK: NeuralVDB——在体积数据储存标准OpenVDB基础上引入神经表示,以减少3D数据内存、提高分辨率; Omniverse Audio2Face——可从单个音频源生成有表现力的面部动画; ASE——全称为动画技能嵌入,允许虚拟角色在不熟悉环境中自然响应环境、模拟逼真物理运动; Tao Toolkit——用于创建准确、高性能姿态预估模型的框架。

  体验相关工具: Image Features Eye Tracking——将像素渲染质量与用户反应时间结合,来优化快节奏游戏的图形性能; Holographic Glasses for Virtual Reality——与斯坦福大学合作开发,该工具采用了2.5毫米厚的光学模组,支持RGB 3D全息显示。

  参考:NVIDIA

+1

来源:青亭网

推荐文章