Rivian 如何使用亚马逊云科技数据传输终端改变其自主数据摄取方式

领先的电动冒险车品牌 Rivian 通过不懈地关注客户而建立了声誉，他们频繁更新车辆软件以增强客户体验就证明了这一点。Rivian R1 第 2 代电动汽车采用先进的自主平台，配备 5500 万像素高动态范围 (HDR) 摄像头、五个雷达和每秒超过 200 万亿次运算 (TOPS) 的机器学习计算能力。在这个坚实的基础上，Rivian 的 Autonomy 团队训练复杂的模型，为 Rivian Autonomy 平台配备了业内最先进、最具影响力的自动驾驶汽车（AV）功能之一。

Rivian 的数据收集测试队列每天从一系列传感器、摄像头和机载系统生成数 TB 的数据。这些数据是 Rivian 自动驾驶汽车开发的关键输入，因为它为机器学习模型提供了动力，并有助于验证总体系统性能并增强安全性。但是，其庞大的数量和种类给 Rivian 带来了艰巨的挑战：如何高效地上传、存储和处理它。

想象一下，一支由 Rivian 车辆组成的测试车队在美国各地行驶，每辆车都从众多传感器和摄像头生成大量数据。尽管这些数据具有巨大的洞察潜力，但在将其路由到 Amazon S3 的集中存储时也构成了物流挑战。AV 开发所需的数据类型多种多样，包括传感器数据、摄像机数据、GPS 数据、控制数据和环境数据。

将数据从车辆数据收集测试车队上传到云存储对于 Rivian 来说涉及多个挑战。它需要可靠的高速网络基础设施，包括高速连接、边缘计算、数据安全和数据压缩。因此，上传数据所需的基础设施通常成本高昂且实施起来很复杂，尤其是在偏远或连接不畅的地区。挑战显而易见：获得不论来源如何长距离无缝传输数据的能力。

亚马逊云科技数据传输服务

亚马逊云科技为客户提供了多种将数据传输到云端或迁出云端的选项。一种选择是 Amazon Direct Connect，它允许客户在其本地基础设施和亚马逊云科技之间建立专用网络连接。这提供了可靠的高吞吐量连接，并要求客户在固定的物理位置配置和管理网络设备。另一种选择是基于互联网的数据传输，它更灵活，但可能更慢且不可靠，尤其是对于大型数据集。Amazon Snowball 设备为客户提供了一种将大量数据物理传输到和传出亚马逊云科技数据中心的方式。Amazon Snowball 适用于定期数据传输场景和数据迁移，也适用于连接受限的地点。

Rivian 采用了一种创新方法，利用新的亚马逊云科技数据传输终端服务，该服务旨在为客户提供一个安全的物理位置，他们可以通过高达 400 Gbps 的网络带宽将存储设备带到任何亚马逊云科技端点，包括 Amazon S3 和 Amazon EFS，进行高吞吐量上传。亚马逊云科技数据传输终端通过提供一个位置来更快地上传到亚马逊云科技云，从而最大限度地缩短工程团队访问数据的等待时间，从而对 Snowball 产品进行了补充。

亚马逊云科技数据传输终端不仅适用于一次性数据传输，也适用于定期数据传输活动（例如，每月一次或每天多次）。以前，客户需要在托管设施中订购和配置 Amazon Direct Connect 端口，以便定期使用，而该端口和空间会长时间处于闲置状态，从而导致成本上涨。借助亚马逊云科技数据传输终端，客户现在可以进行临时预订或安排定期访问，只需按使用期限付费。

之前：测试车队开车前往 OEM 办公地点上传数据或运送固态硬盘。现在：使用亚马逊云科技数据传输终端，车辆将驶向最近的上传地点。

之前：测试车队开车前往 OEM 办公地点上传数据或运送固态硬盘。现在：使用亚马逊云科技数据传输终端，车辆将驶向最近的上传地点。

Rivian 实施——之前和之后

随着 Rivian 的 Autonomy 团队扩大数据收集范围，他们发现了提高数据摄取效率的机会。尽管现有方法（例如运送车辆或返回 Rivian 场地）是有效的，但它们要求车辆操作员花时间离开道路。为了进一步优化运营和最大化数据收集，Rivian 开始探索新的解决方案，以简化流程，同时保持车辆行驶。

亚马逊云科技数据传输终端通过其高带宽、低延迟网络和地理位置优越的设施帮助解决这些挑战，有助于确保更可靠、更快速的数据传输。与亚马逊云科技合作使 Rivian 能够获得丰富的专业知识和基础设施，有助于促进向新区域的快速扩张，而无需支付建造和管理上传设施的开销。这种可访问性还通过在主要大都市区提供便捷的上传点，有助于最大限度地延长车辆的正常运行时间。重要的是，亚马逊云科技数据传输终端维护着安全的监管链，有助于确保数据在整个摄取过程中保持保护。

通过使用亚马逊云科技数据传输终端，Rivian 的 Autonomy 团队可以专注于其核心能力：数据收集和高级驾驶辅助系统 (ADAS) 软件开发。他们将设计、实施和维护数据上传基础设施的复杂而无差别的任务转移到亚马逊云科技。

亚马逊云科技如何帮助支持提高 Rivian 的上传性能

Amazon Simple Storage Service (Amazon S3) ——专为从任何地方检索任意数量的数据而构建的对象存储——提供了多种强大的工具，每种工具都针对特定的用例量身定制。向 Amazon S3 传输数据的三个最常比较的选项是亚马逊云科技命令行接口 (亚马逊云科技 CLI)，这是管理您的亚马逊云科技服务的统一工具；亚马逊云科技通用运行时 (CRT) 库；以及 s5cmd。

这些工具的选择通常取决于特定的要求和用例。当 Rivian 开始自主数据上传之旅时，公司选择使用亚马逊云科技 CLI，这是一款简单、可编写脚本的工具，非常适合快速启动和运行 Amazon S3。2024 年，随着性能更强的 R1 Gen 2 车队的发布，该公司需要一种能够以更快的速度处理更大数据量的解决方案。为了应对这一新挑战，他们采用了基于亚马逊云科技 CRT 的 S3 客户端，该客户端提供了从 2.6 Gbps 到 3.2 Gbps 的出色吞吐量结果，仅受当前一代数据存储设备资源限制的限制。

最近使用亚马逊云科技数据传输终端对 Rivian 的数据上传机制进行了升级，这有助于该公司为其模型训练提取、处理和分析数据，比之前的系统快三倍。由于能够处理其 ADAS 车队每天生成的数兆字节的数据，Rivian 现在可以加快自动驾驶技术的开发和完善，例如物体检测、路径规划和决策算法。

Rivian Autonomy & AI 副总裁 James Philbin 分享了以下内容：

"亚马逊云科技数据传输终端使 Rivian 能够加快其自治功能路线图的开发。它使我们能够根据收集的数据处理和训练模型，速度大约是当前方法的三倍。至关重要的是，数据仍在 Rivian 的控制之下，无需运送固态硬盘。随着我们的扩展，这种能力对我们的数据收集计划至关重要。"

结论

Rivian 的旅程反映了技术进步与实际执行之间的深思熟虑的平衡。从概念到实施，该公司应对了管理大规模车辆数据收集的复杂性，同时优先考虑灵活、高效的上传方法。随着 Rivian 扩大运营规模，其经验为汽车数据管理和传输中的挑战和解决方案提供了宝贵的见解。通过与亚马逊云科技合作，Rivian 兑现了帮助其客户永远保持冒险精神的使命，无论他们走到哪里。

阿西夫·汗

阿西夫·汗是亚马逊云科技的首席解决方案架构师，为企业汽车客户提供支持。他热衷于为汽车行业设计、构建和提供创新、具有成本效益和可扩展的解决方案。工作之余，他喜欢指导年轻的专业人士，并通过构建原型来紧跟新兴的技术趋势。

阿迪亚·索马亚吉

Rivian 的自治系统经理阿迪亚·索马亚吉领导数据收集架构和固件集成方面的计划。他对汽车、技术和可持续电动未来的热情促使他专注于通过尖端技术增强自动驾驶功能和改善车辆安全。工作之余，Aditya 喜欢探索大自然，前往新的目的地旅行，磨练自己的摄影技巧。

马特·哈勒

亚马逊云科技全球客户代表 Matt Haller 在向客户交付战略业务成果方面拥有十多年的经验。

尼克·阮文

Nick Nguyen 是 Rivian 自动驾驶产品和项目总监，他专注于改善 Rivian 车主的驾驶体验。他的工作旨在改善安全功能，减轻驾驶员在各种户外活动和长途旅行中的压力。尼克对这个角色的热情源于他童年时期在长途旅行中探索这个国家的经历。他致力于以环境可持续的方式让更多的人获得类似的体验。工作之余，Nick 会花时间抚养孩子、开发 Android 应用程序和开展 3D 打印项目。