英伟达与丰田扩大AI合作:从L2++辅助驾驶延伸至机器人及智慧城市
7月16日,据报道,丰田与英伟达发表联合声明,宣布将扩大双方的技术合作范围,以汽车为起点,将物理AI的应用拓展至机器人和智能设施等领域。这一举措标志着两家公司在AI领域的战略协同从单一产品维度向生态系统的全面延伸。
在汽车领域,丰田正在采用NVIDIA DRIVE AGX平台开发下一代车型,并搭载通过安全认证的NVIDIA DriveOS操作系统。NVIDIA DRIVE AGX平台是英伟达专为自动驾驶车辆设计的高性能AI计算平台,其中基于Thor系统级芯片的平台可提供超过1000 TOPS的AI性能,支持从L2+到全自动驾驶的架构扩展。DriveOS作为该平台的基础操作系统,为实时数据处理、传感器融合和AI推理提供了稳健的安全框架,符合ISO 26262等汽车行业严苛的安全标准。
值得关注的是,DriveOS LLM SDK还可为在资源受限的汽车平台上部署大语言模型和视觉语言模型提供优化方案,支持Llama、Qwen等主流模型的推理,并支持FP16、FP8、INT4等多种精度格式,以平衡性能和内存占用。这为实现更自然的人车交互提供了技术基础。
丰田还开发了符合MISRA标准的Code Assistant AI模型,用于辅助汽车软件开发。该模型使用NVIDIA Megatron-LM进行训练和微调,并参考NVIDIA Nemotron等数据集。Megatron-LM是英伟达的开源大规模语言模型训练框架,采用张量并行、流水线并行等先进技术,可将模型训练扩展至数千个GPU,支持从数十亿到万亿参数规模的模型。这些针对汽车开发的定制AI模型能够帮助工程师更高效地生成、审查和验证安全关键代码,在满足严格行业规范的同时缩短开发周期。
在生产制造环节,丰田将NVIDIA Omniverse库和Isaac Sim开放框架应用于工厂现场模拟。Omniverse是一系列加速库和微服务,支持开发物理AI仿真应用和智能体工作流,覆盖工业数字孪生、合成数据生成、机器人仿真和自动驾驶车辆仿真等场景。Isaac Sim则基于Omniverse构建,为开发者提供在基于物理的虚拟环境中开发、模拟和测试AI驱动机器人的能力。通过在虚拟环境中测试和优化生产方案,有助于减少停工、提高效率、降低成本,并持续改善工厂运营。在实际应用中,包括Boston Dynamics、Figure AI在内的多家机器人公司已采用Omniverse和Isaac Sim加速其AI机器人开发。
丰田旗下子公司Woven by Toyota则使用NVIDIA H100 Tensor Core GPU和Megatron-Core,开发了多模态视觉语言模型Woven City AI Vision Engine。H100 GPU是英伟达Hopper架构的数据中心级加速器,相较于前代产品,在大型语言模型训练上可提速30倍。该模型面向城市交通智能场景,能够分析现实环境、预测事态发展,并帮助交通和基础设施系统及时采取应对措施。这一技术将首先应用于丰田正在日本建设的Woven City——一座以AI驱动的未来城市试验场。