欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  科技

一番深度学习后:NVIDIA AI首次写出虚幻4赛车游戏Demo

程序员文章站 2022-04-22 11:09:38
本文经授权转载,其它媒体转载请经爱活网同意 nvidia的dlss深度学习采样技术是目前显卡界最强的防狗牙技术,但ai的强大当然不会止于此。nvidia昨天发布的一篇研究论文探讨了a...

本文经授权转载,其它媒体转载请经爱活网同意

nvidia的dlss深度学习采样技术是目前显卡界最强的防狗牙技术,但ai的强大当然不会止于此。nvidia昨天发布的一篇研究论文探讨了ai生成画面与传统游戏引擎结合的方法,他们也为此制作了一个混合图形系统原型。

一番深度学习后:NVIDIA AI首次写出虚幻4赛车游戏Demo

虽然nvidia所使用的算法和构架思路前人早已提供,比如pix2pix、gan(对抗生成式神经网络),不过nvidia在此实现的新突破,则是借助这些现有的东西,用它们制作了一个能跑起来的游戏demo,尽管这个驾驶模拟demo很简陋,而且跑的成本有些高(nvidia用了块titan v),从无到有这一过程总有它的特殊意义在。

为实现该demo,nvidia首先喂给gan模型一堆从自动驾驶中获得的开源数据组,让ai学习辨识画面中的内容如天空,车辆,树木道路以及建筑等等,随后交由其自己根据学习数据生成这些物体的新状态;接下来是准备虚拟环境,用虚幻4引擎以传统方式构建出车辆所处环境的基本拓扑;最后,gan模型会把构成画面的各种元素实时生成出来传递给虚幻4引擎,更新画面的模型信息。

一番深度学习后:NVIDIA AI首次写出虚幻4赛车游戏Demo

在demo成型的初期,gan模型的表现非常不稳定,在25fps的帧率条件下它所传递的物体颜色和贴图信息几乎每帧都会改变,画面相当瞎眼;在为模型加入短时记忆之后,通过对比两帧画面,整套系统会自行判断画面内物体的运动,让整体动画看起来更具关联性,更像是连续行进中的游戏画面。

nvidia强调称该技术仍处于实验室的早期阶段,没个十年二十年恐怕不会出现在我们最终能玩到的游戏内。但是这类ai玩法我们其实已经在“根据人脸塑造自己的3d角色形象”,还有深度伪图等实例中见过了,也许它所要花的时间,会比我们想象中的要短。

(0)
打赏 一番深度学习后:NVIDIA AI首次写出虚幻4赛车游戏Demo 微信扫一扫

相关文章:

版权声明:本文内容由互联网用户贡献,该文观点仅代表作者本人。本站仅提供信息存储服务,不拥有所有权,不承担相关法律责任。 如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 2386932994@qq.com 举报,一经查实将立刻删除。

发表评论

一番深度学习后:NVIDIA AI首次写出虚幻4赛车游戏Demo
验证码: 一番深度学习后:NVIDIA AI首次写出虚幻4赛车游戏Demo