如期而至的英伟达GTC大会,黄仁勋接连发布多款堪称划时代的产品。从4nm制程工艺的超级GPU H100到144核超级芯片Grace CPU Superchip,从机器人到Omniverse,几乎每一项都立在时代的潮头。NVIDIA DRIVE系统作为自动驾驶领域的机器人,本次大会上发布了DRIVE Hyperion 9及DRIVE Map,同时DRIVE Orin宣布将于本月正式发售。
当今世界,苹果发布会期待度持续下降,马斯克站在山巅被万众膜拜,唯一可与之一较高下的也只有黄仁勋了。
严格意义上,在3月22日晚间一个半小时的时间里,黄仁勋在一年一度白的英伟达GTC大会上一口气发布了不下十件数据闪烁、技术硬核的新产品与解决方案。
单纯罗列这些产品可能就会让人眩晕。
比如采用全新Hopper架构的超级GPU H100,基于4nm制程工艺,集成800亿个晶体管,内核数量飙到16896个。
比如总共拥有144个核心的CPU超级芯片,Grace CPU Superchip。采用最新Arm架构,拥有1TB/s内存带宽,比苹果最新M1 Ultra的800GB/s还高出一截。
再比如新一代的企业级AI基础设施DXG H100和全球最快的AI超算EOS,以及一款用于6G通信研究的AI框架Sionna。
而在智驾网最为关注的驾驶领域,英伟达发布了DRIVE Hyperion 9和DRIVE Map,并宣布DRIVE Orin将于本月发售。
此外,作为一家世界顶尖的科技公司,黄仁勋表示,英伟达正在构建多个机器人平台。
除了用于自动驾驶的DRIVE,还包括用于操纵和控制系统的Isaac,用于自主式基础架构的Metropolis和用于机器人医疗器械的Holoscan。
机器人系统的工作流程很复杂,但黄仁勋将其简化为四大支柱:收集和生成真值数据,创建AI模型,使用数字孪生进行仿真,操作机器人。
而Omniverse则是用数字孪生来操作机器人舰队的核心。
随着技术的发展,元宇宙和机器人等概念正成为科技公司们绕不开的话题。
虽然智能驾驶被黄仁勋章以单独的版块进行介绍,但它其实在英伟达的产品序列中是机器人产业的一部分,即便是元宇宙平台Omniverse也成为了机器人训练的平台。
一句话概括就是,黄仁勋向我们所有人类许了一个愿:机器人时代的基础设施我为你们搭好了。
他正式打开了机器人工业的大门。
而对于智驾网,我们以智能驾驶为切口,看一看英伟达为建构在自动驾驶技术之上的机器人产业带来了哪些革新。
——01——
AI司机NVIDIA DRIVE
NVIDIA DRIVE是英伟达专为自动驾驶汽车开发的一系列产品,涵盖从汽车到数据中心的方方面面。为全栈端到端平台,并对开发者开放,既可选择使用整个平台,也可使用其中的一部分。
DRIVE Hyperion是一种车载解决方案,包括传感器、用于计算的DRIVE AGX以及强大的自动驾驶和智能驾驶舱功能所必须的软件工具。
此外还包括用于训练DNN进行感知的NVIDIA DGX和Omniverse中用于模拟的DRIVE Sim。Drive AV则是一款运行在车载Orin计算平台上的自动驾驶应用。
黄仁勋在演讲中播放了一段最新版NVIDIA DRIVE自动驾驶汽车的视频。
直观展示了NVIDIA DRIVE所能实现的功能。
车辆行驶路线包括高速公路和市区路线,以及拥挤的交叉路口在内的复杂驾驶场景。在可信度渲染视图中可看到汽车看见的场景。
NVIDIA DRIVE Chauffeur 是一款AI 辅助驾驶平台,可以使用自动驾驶到达目标地址。
除了能打开Drive Pilot,实现导航等基本功能,NVIDIA DRIVE Concierge还能识别特定的人员,以不同模式回答提问。可信度渲染图展示车辆的视野,并使驾驶者能提前知道自动驾驶车辆下一步的行动。
此外,DRIVE Sim中的传感器还能展示现实世界的场景。AI可实时查找停车位并完成泊车。
——02——
NVIDIA DRIVE Hyperion 9发布,DRIVE Orin本月发售
在主题演讲中,黄仁勋重点发布了基于Atlan计算平台的新一代DRIVE Hyperion 架构,该架构将搭载于2026年起交货的汽车。
DRIVE Hyperion平台采用可跨代扩展的设计,使客户能够在未来的架构中也能充分利用现有资产。
新一代平台将提高传感器数据的处理性能以进一步增强安全性,并扩展至全自动驾驶运行领域。
最新的DRIVE Hyperion 9 的传感器套件将包含 14 个摄像头、9 个雷达、3 个激光雷达和 20 个超声波传感器。
DRIVE Hyperion 9处理的传感器数据量将两倍于Hyperion 8,进一步增强安全性并扩大全自动驾驶的工作领域。
DRIVE Hyperion 8将从2024年起搭载至梅赛德斯-奔驰中,从2025年起搭载至捷豹路虎。
DRIVE Hyperion是用于量产自动驾驶汽车的平台。
基于DRIVE Orin的AI计算与完整传感器套件相集成,能够在量产之路上加速开发、测试和验证。
DRIVE Hyperion具有适用于自动驾驶的完整软件堆栈,以及驾驶员监控和可视化,能够无线更新,在车辆的整个生命周期中添加新的特性和功能。
DRIVE Hyperion和DRIVE Orin一起充当车辆的神经系统和大脑,实时处理大量传感器数据,以安全地感知、计划和行动。
DRIVE Orin系统级芯片可提供每秒254 TOPS算力,是智能车辆的中央计算机。
黄仁勋表示:“电动汽车已促使产业界对汽车架构进行彻底的重新设计,未来的汽车将高度可编程,从内置许多嵌入式域控制器发展为高度集中式的计算平台。AI和自动驾驶功能将在软件中提供,并在汽车生命周期内不断增强。”
在GTC主题演讲会上,黄仁勋骄傲地宣布比亚迪将为其2023年上半年开始投产的汽车搭载DRIVE Orin计算平台。
此外,Lucid、蔚来、理想汽车、小鹏、上汽集团旗下的智己汽车和飞凡汽车、集度、华人运通、VinFast、威马汽车等新能源汽车初创企业也都在DRIVE平台上开发软件定义汽车。
这些合作消息标志着:在全球领先的 30 家电动汽车制造商中,有 20 家选择 NVIDIA DRIVE Orin 作为首选的 AI 计算平台。
黄仁勋表示,DRIVE Orin将于本月开始发售。
——03——
元宇宙里的数字孪生
NVIDIA DRIVE Map是一种多模态地图引擎,包括摄像头、雷达和激光雷达的数据,可以单独定位到地图的每一层。这将提供多样性和冗余性,以实现最高级别的安全性。
Drive Map有两个地图引擎:真值测绘地图和众包车队地图。
黄仁勋表示,到2024年底,英伟达预计将绘制并创建北美、西欧和亚洲所有主要公路的数字孪生,总长度约为50万公里。数百万辆乘用车将不断扩展和更新该地图。
英伟达的计划是构建地球级别的自动驾驶车队数字孪生,以探索新的算法和设计,并在部署到车队之前测试软件,最大可能地实现安全性。
英伟达正在开发两种场景仿真方法,每种都以不同方式重建整个世界。
其中一种从NVIDIA DRIVE Map开始,这种多模态地图引擎,可为整个世界创建高度精确的3D表现形式。地图加载到Omniverse中,建筑、植被和其他路边目标均会生成。
汽车对之前驾驶过程中遇到的运动目标、汽车和行人进行推理和定位,然后放入数字孪生中。
开发者可以将每个运动目标生成动画或向其分配AI行为模型,还可以应用域随机化来生成多样化且合理的挑战性场景。
第二种方法使用神经图形AI和Omniverse将预先录制的驾驶视频转换为可回放和可修改的驾驶过程。
首先重建3D场景,系统会识别并移除运动的目标,背景被恢复。重建场景后,开发者可以改变现有车辆的行为,或添加完全可控、在交通环境下真实反应的车辆。
重新生成的驾驶过程,结合3D几何图形和基于物理效果的材质,开发者可以为场景重新打光,应用物理效果和仿真激光雷达等传感器。
进而重新运行预先录制的场景,并运用于闭环仿真和测试。
DRIVE Map和DRIVE Sim包含英伟达研究工作取得的突破性AI成果,展示了Omniverse数字孪生在推动自动驾驶汽车开发方面的力量。
——04——
占据自动驾驶半壁江山
除了汽车制造商,自动驾驶初创公司也可以在DRIVE Hyperion上进行开发,以提供软件定义的车辆。
在GTC大会期间,包括元戎启行、文远知行、云骥智行在内的多家自动驾驶公司宣布将搭载NVIDIA DRIVE Hyperion解决方案。
3约23日,云骥智行宣布与NVIDIA 达成深度合作关系,其最新车规级量产(L4 级)自动驾驶计算平台将搭载基于NVIDIA DRIVE Orin SoC(系统级芯片)的DRIVE Hyperion解决方案。其自动驾驶计算平台将覆盖全域自动驾驶场景,为车辆在复杂的城市开放道路中,实现安全顺畅的L4级自动驾驶提供算力支持。
此外,以滑板底盘为核心能力的悠跑科技也于3月23日宣布将采用NVIDIA DRIVE Hyperion AV平台架构打造其高性能汽车大脑,集成NVIDIA DRIVE Orin系统级芯片能力,打造业界首个拥有灵活算力的开放式汽车超算平台。
英伟达官方数据显示,从去年4月起,英伟达未来六年的汽车订单总收入已从80亿美元增长至110亿美元以上,几乎覆盖整个自动驾驶汽车行业。
从顶尖的电动汽车制造商,到世界著名汽车制造商捷豹路虎、梅赛德斯-奔驰和沃尔沃汽车,再到领先的卡车公司智加科技、图森未来和沃尔沃自动驾驶解决方案,以及先进的自动驾驶出租车制造商 AutoX、滴滴出行、小马智行和Zoox。
诚如马斯克对实现通用人工智能和人形机器人的追求,英伟达不仅在硬件上频频推出令业界咋舌的高性能产品,其自动驾驶机器人与Omniverse的结合也为业界提供了高性能、高安全的解决方案。
英伟达以一系列眼花缭乱的产品正在打开人工智能的大门。