你现在可以用Nvidia的A.I.登月。和射线追踪技术


https://www.ispeech.org

nvidia rtx apollo 11登陆技术50周年
采用RTX技术的阿波罗登月;由Nvidia提供

除了在SIGGRAPH推出10款针对创作者的新型RTX Studio笔记本电脑之外,Nvidia还宣布了其研究团队在人工智能,增强现实和计算机图形领域所做的一些工作。在阿波罗11号登月50周年之际,Nvidia展示了其RTX显卡的射线追踪技术如何用于视觉上增强 50年前美国宇航局拍摄的图像 。在SIGGRAPH,Nvidia为纪念阿波罗11号所做的努力更进了一步,让太空迷有机会将自己叠加到一个短视频片段中,好像他们是宇航员尼尔阿姆斯特朗和巴兹奥尔德林,通过使用人工智能和射线追踪的力量实时渲染这些视频。

Nvidia TKTK解释说:“我们正在做的是使用人工智能将相机和人们瞄准他们的街头服装,以便能够进行3D姿势估计。”Rob Estes说道。 “我们知道他们在3D空间中的位置,我们知道他们的肢体是如何移动的,所以我们正在使用光线追踪绘制它,并让你在场景中作为宇航员进行移动。”

在月球上做月球漫步

好莱坞视觉效果导演多年来一直在做类似的事情,使用绿屏和动作捕捉演员穿着带点的西装来复制肢体运动,但是光线追踪和AI通过消除对专业设备和演员的需求而更进了一步。 “你可以在任何可以拍摄某人的地方做到这一点,”Estes详细阐述了在这个月球例子中启用AI的光线追踪的好处。从本质上讲,SIGGRAPH与会者可以在奥尔德林和阿姆斯特朗的太空服拍摄他们自己的短视频剪辑,他们做月球漫步,就像他们作为阿波罗11号任务的一部分在月球上一样。

“我们将对月球表面和月球着陆器进行模拟,我们将让他们看看他们登上月球会是什么样子。”他说,所有的灯光效果和渲染都是实时进行的。 “这是一项非常前沿的研究,之前没有人这样做过。你正在以一种具有许多实际好处的方式梳理人工智能和射线追踪。“这些好处不仅有助于好莱坞及其视觉效果团队,还有设计师和研究人员试图通过研究评估来解决难题,Nvidia进行了扩展。

与处方眼镜的Foveated渲染

nvidia射线追踪月球漫步与apollo 11 foveated渲染rx镜头

Nvidia希望使增强和虚拟现实应用程序的渲染看起来更逼真,更清晰,并且正在应用其渐进的渲染技术来实现这一目标。 Nvidia的研究团队所做的工作是增加对处方镜片的支持,这是该行业的第一个。虽然目前仍处于早期研究阶段,但Nvidia设想有一天处方眼镜的佩戴者不需要在其增强现实设备中佩戴单独的眼镜。

Nvidia正在使用多种类型的显示器来构建与您可能拥有的处方眼镜一致的VR或AR显示器。 “这是一个大问题,”埃斯蒂斯说。 “你以前从未见过20/20因为这些显示器没有视力。”

与光线跟踪可以为视频游戏带来逼真的电影效果的方式相同,通过保留图形功能,可以使渲染渲染可以使AR场景和图像看起来更逼真,分辨率更高。 foveated渲染不是渲染整个场景,而是允许创作者以高保真度渲染场景的中间部分,这是您的眼睛通常聚焦的地方,并且可以更少细节地渲染外围区域以节省GPU功率。

“因此,我们正在努力确保我们能够跟踪您的游戏位置,并应用此功能,以便在增强现实中获得更快的帧速率和更好的图形,或者这也可以应用于虚拟现实”埃斯蒂斯说。

AI艺术家GauGAN被释放

Nvidia GauGAN研究员照片
NVIDIA

在过去,Nvidia展示了它的GauGAN绘图工具如何通过利用人工智能的力量,让你通过几个简单的笔画绘制复杂的,生活生活的景观,甚至可以将我们中间艺术挑战的艺术家变成艺术家。 Nvidia透露,人工智能绘制的场景也被用于一些大牌好莱坞电影作为背景,工作室覆盖了他们想要为剪辑设定整体情绪的元素。

而不是使用AI来识别场景的元素,如狗或猫,GauGAN,顾名思义,使用生成对抗网络,或GAN。通过绘制地平线和海洋与天空相交的地方指定天空的位置,GauGAN开始用云和波浪“绘制”场景,用户可以在这个海景中添加岩石和海崖,渲染场景适当的阴影和反射。因此,Nvidia解释说,GAN不是识别图像中的物体,而是通过逼真的创作和场景渲染来帮助填充图像。

鉴于该工具的普及,Nvidia透露它将向每个人扩展对GauGAN的访问。此时,Estes表示,尽管GauGAN在电影行业有创造性的工作,但并没有计划将GauGan货币化,而且该公司只是在享受其他人使用它所带来的快乐。

Previous Entries 适用于每款iPad的最佳iPad键盘保护套 Next Entries 从Air到Pro,这是2019年7月最好的MacBook优惠

發表評論