黄仁勋正在让GPU变得无所不能

nvidia从提出gpu以及cuda核心开始，nvidia便开始逐步迈出游戏圈，不断向全新的计算领域发起攻势。时至今日，nvidia gpu计算从机器人、自动驾驶，一路扩展到云计算、医疗甚至是nasa火星登录计划。

是的，正如gtc china 2019上，nvidia创始人兼ceo黄仁勋所言，就算摩尔定律走向终结，gpu加速计算将有机会成为未来的发展方向，gpu正在变得无所不能，也将无处不在。

云游戏与光线追踪全面开花以游戏发家的nvidia开场少不了游戏的戏份。开场黄仁勋便展示了《我的世界》rtx版本，这也是gtc主题演讲上首次展示《我的世界》rtx视频。

通过对光影的添加，这款沙盘化的游戏有了全新的演绎，不仅水面变得更为真实，随着视角、天气、时间变化，光影也呈现出不同的效果。

这套实时光纤追踪技术可以让开发者在添加光源之后，依靠geforce rtx显卡中的rt core演算出光线路径，从而获得自然的光线效果，同时也减轻了游戏开发者手动考虑光影贴图的繁琐工作。

除了《我的世界》增加的光线追踪特效，gtc上黄仁勋还宣布了六款游戏正引入光线追踪，包括《边境》（boundary）、《铃兰计划》（convallaria）、《暗影火炬》（f.i.s.t.）、project x（项目代号）、《无限法则》（ring of elysium）以及《轩辕剑柒》（xuan-yuan sword vii）。

同时老黄还特意在台上演示了《光明记忆：无限》的光线追踪demo。重点在于负责《光明记忆》的飞燕群岛个人工作室主力仅有一人，通过一人之力完成美术、程序以及最新的光线追踪技术功能，也足以见得虚幻引擎对光线追踪已经提供了相当优秀的支持，可以更为轻松调用geforce rtx的光线追踪功能。

此外，目前宣布支持光线追踪游戏阵营包括：《光明记忆：无限》（bright memory: infinite）、《赛博朋克2077》（cyberpunk 2077）、《消逝的光芒2》（dying light 2）、《我的世界》（minecraft）、《逆水寒》（justice）、《剑侠情缘叁网络版》（jx3 online）、《重生边缘》(synced: off-planet)、《仙剑奇侠传七》(sword and fairy 7)、《看门狗：军团》《watch dogs: legion》以及《吸血鬼:避世血族2》 (vampire: the masquerade – bloodlines 2)。

在推进光线追踪技术进驻预习的同时，nvidia与腾讯游戏合作的start云游戏服务也进入了测试阶段。

类似nvidia在北美和欧洲推出的geforce now云游戏服务，腾讯start可以让玩家在在配置不足的设备上也能玩aaa游戏。腾讯游戏计划将扩展其云游戏产品。

nvidia与腾讯还将成立一个一个游戏联合创新实验室。双方将共同探索ai在游戏、游戏引擎优化和新光照技术（包括光线追踪和光线烘焙）中的新应用。借着start服务东风，英伟达的云游戏技术也终于可以在国内付诸实践。

rtx studio加速内容创作显卡性能也早已不局限在游戏中，英伟达针对rtx studio的产品线覆盖也已经从geforce rtx 2060笔记本覆盖到8路quadro rtx 8000工作站。在加上nvidia omniverse所提供的3d制作流程的协作平台，创作者可以通过不同的分工协同工作。

现在nvidia omniverse也已经正式进驻建筑行业aec，可以做到无论本地还是云端，主流应用都能依靠nvidia rtx展开建模、着色、动画、视觉效果等等。在演讲台上，老黄也豪气的演示如何利用8 路 rtx 8000 的 rtx 服务器对深圳华润大厦实时渲染。

在电影、视觉特效领域，瑞云云端渲染平台也宣布配备nvidia rtx gpu。瑞云目前是全亚洲最大的云渲染平台，2019年火爆的《战狼2》、《哪吒》、《流浪地球》渲染均来自瑞云，超过85%的中国电影工作室都是瑞云的客户。很快，首批5000片rtx gpu也将会在2020年上线。

在现场，黄仁勋也不忘搬出那句经典台词：“买的越多，省得越多。”针对渲染工作，rtx gpu能够做到速度比cpu快12倍，价格低7倍。原本cpu上需要花费485个小时的渲染场景，交给rtx gpu现在可能只需要40个小时就能完成。

让未来所见所得跳出大家耳熟能详的游戏、渲染领域，nvidia也已经将视野放向了外太空。nasa计划在2030年将6位宇航员送向火星，着陆器将以12000千米/小时的速度进入火星大气层，而且必须精确点火减速并在6分钟内降落在火星表面。

为此nasa借助nvidia gpu通过fun3d流体李璇软件进行了数十万次火星着陆场景模拟，将产生的150tb数据变成了可视化，现在，nvidia dgx-2上已经可以借助magnum io gpu direct storage技术，对数据进行可视化处理，这在以前是不敢想象的。

如果登陆火星还不够，科研人员也正在借助gpu内的cuda核心对全基因组进行测序。通过全基因组测序分析整个基因序列，可以检测由遗传性疾病引起的dna变异。为此，nvidia推出了一套parabricks 基因组分析工具包，借助cuda基因测序可以加速到30-50倍完成。

而即将到来的5g与nvidia也同样有关系。目前nvidia已经与爱立信展开合作，通过cuda核心，能够提升5g vran性能，特别是在复杂的空间内，cuda能够加速解决物理空间内的信号优化的问题。

针对世界上最普及的arm，nvidia也给出了一套能够与arm配套的解决方案。得益于pcie标准，gpu也可以轻松与arm完成连接。基于arm，nvidia推出了nvidia hpc for arm首个参考架构，可以使用marvell、ampere、富士通亦或者其他arm的hpc处理器与volta gpu连接。更厉害的是，每个arm cpu最多可以连接4块volta gpu，扩展性能极其恐怖。

在现场，黄仁勋也毫不吝啬的通过vmd on arm通过cuda演示namd分子动力学模型的结果可视化处理，借助marvell thunderx2以及nvidia v100，并通过nvidia optix光线追踪器，并实现远程流式传输。

与此同时，tensorflow作为当今最重要的可言、云计算、工业、上也领域的hpc应用，也同样被nvidia cuda on arm所支持。

而随着深度学习不断挖掘，nvidia在5年左右的时间内将训练性能提高了300倍以上，借助volta、tensor core gpu、chip-on-wafer封装、hbm 3d堆栈存储器、nvlink、dgx系统，ai加速变得更快。

事实上nvidia ai已经影响到了各行各业，它出现在运输、医疗、金融、零售中，nvidia也不断为每种场景打造不同的平台，例如用于深度学习训练的dgx，用于超大规模云的hgx，用于边缘计算的egx，用于自治系统的agx。

现在，nvidia ai也已经被运用到百度推荐系统中，100多个推荐模型在百度中付诸实践，这些模型每周都会进行更新，自动学习用户潜在兴趣，新条目和特征被持续更新。目前百度庞大的用户潜在兴趣数据包含了千亿维稀疏离散特征和10tb embedding词表，只有通过gpu加速训练，才能在如此大规模的训练中加速且节省成本。

同样，阿里巴巴也接祖了nvidia加速计算平台大规模部署先进的ai技术，包括t4 gpu、cublas、自定义混合精度和推理加速软件等。确保双十一期间2684亿人民币，每秒几十亿次推荐请求，确保全天销售额顺利推进，所以一切也都借助了nvidia ai的运算支持。在nvida ai加持下，阿里巴巴已经嫩巩固支持比过去复杂6倍的模型，从而使点击率提高10％。相比于cpu，t4将我们最大模型的吞吐量提高了100倍。

tensorrt 7的性能攀升在帮助各大厂商推进ai的同时，nvidia也发布了全新的nvidia tensorrt 7推理软件，内置新型深度学习编译器。

该编译器能够自动优化和加速递归神经网络与基于转换器的神经网络。这些日益复杂的神经网络是ai语音应用所必需的。与在cpu上运行时相比，会话式ai组件速度提高了10倍以上，从而将延迟降低到实时交互所需的300毫秒阈值以下。

也就是说，在一套端到端的流程中，cpu推理延迟大概在3秒左右，但在t4 gpu上，整个过程只需要0.3秒。更重要的，原本tensorrt 5大概智能实现数十种不同的计算变化和优化，但到了tensorrt 7，已经可以做到1000种以上。

黄仁勋表示，现在技术已经进入了一个机器可以实时理解人类语言的ai新时代。在原有的tensorrt 5的基础上，各地开发人员能够更快部署会话式ai服务，从而实现更自然的ai人机交互。在首批使用nvidia会话式ai加速能力的企业中，包括了阿里巴巴、百度、滴滴出行、美团、快手、平安、搜狗、腾讯和字节跳动等中国企业。

继续为自动驾驶做足铺垫针对自动驾驶领域，nvidia发布了xavier继任者nvidia drive agx orin。

顾名思义，orin是下一代机器人处理器soc，它参数十分亮眼，包括170亿个晶体管，8核64位cpu，200tops深度学习算例，重点是，它的计算性能相当于xavier的7倍。这意味着这是一个从底层架构上更新的agx处理器，它的设计最早来自超算，拥有全新的功能安全特性，可以使cpu、gpu锁步运行而提升容错性，并且配备了全新的安全引擎保护数据不受网络攻击，以及与上一代xavier兼容。

通过不同的组合，nvidia drive 能够适配l2到l5级别的自动驾驶功能，其中orin能做到与xavier兼容，完全由软件定义。

在orin宣布的同时，nvidia也宣布为滴滴提供自动驾驶和云计算解决方案，通过nvidia drive，以及数据中心的nvidia gpu训练机器学习算法，滴滴已经能够实现l4几倍的自动驾驶推理能力。

作为滴滴自动驾驶ai处理的一部分，nvidia drive借助多个深度神经网络融合来自各类传感器（摄像头、激光雷达、雷达等）的数据，从而实现对汽车周围环境360度全方位的理解，并规划出安全的行驶路径。

用软件定义机器人平台整场演讲的重头戏，最终留给了isaac sdk。isaac sdk包括isaac robotics engine（提供应用程序框架），isaac gem（预先构建的深度神经网络模型、算法、库、驱动程序和api），用于室内物流的参考应用程序以及isaac sim的第一个版本（提供导航功能）。

全新isaac sdk可以大大加快研究人员、开发人员、初创企业和制造商开发和测试机器人的速度。它使机器人能够通过仿真获得由人工智能技术驱动的感知和训练功能，从而可以在各种环境和情况下对机器人进行测试和验证。

这个套件包含了training-in-sim工作流，使用随机域生成6d姿态图像，用于训练目标检测、像素分割、2d姿态、3d姿态等诸多内容。

最后现场，nvidia也给我们展示了一个会卖萌的leonardo物体操纵机器人。通过模拟和真是世界的学习，leonardo学会了如何遵守物理规则，在模拟的计算部分则运用到了gpu的physx 5.0物理引擎。

写在最后可以看到长达2小时的gtc china 2019演讲中，新推出的芯片只有orin一块。nvidia更多的重心放在了软件平台和ai智能优化上，通过硬件与软件配合，发挥cuda给gpu带来的大规模并行处理优势，使得gpu走出游戏和渲染，找到了一个更广阔的空间。

nvidia造gpu无疑是最擅长的，如何用好gpu，则需要无数工程师努力挖掘答案。无论是超算、ai、自动驾驶、边缘计算，nvidia都已经牢牢占住了自己的位置，足以见得gpu对专业领域而言，同样具备强烈的吸引力。