发布于: May 10, 2023
Amazon Step Functions 扩展了在云对象存储服务 Amazon Simple Storage Service(Amazon S3)中迭代和处理大型数据集(例如图像、日志和财务数据)的支持。
Amazon Step Functions 是一项可视化工作流服务,能够编排来自 220 多项亚马逊云科技服务的 10,000 多个 API 操作,实现业务流程和数据处理工作负载的自动化。
现在,Amazon Step Functions 可以迭代 Amazon S3 中存储的图像或日志等对象,然后启动和协调数千个并行工作流来处理数据,并将执行结果保存到 Amazon S3。您可以使用 Map 状态的新分布式模式扩展数千个同时运行的并行工作流执行。您可以使用分布式 Map 模式分析数百万个日志文件中是否存在安全风险,迭代数 TB 的数据以获取业务洞察,或者扫描图像和视频文件以查找特定对象。要处理您的数据,请使用计算服务(如 Amazon Lambda)并使用任何受支持的语言编写代码,或者从 220 多种专门构建的亚马逊云科技服务中进行选择以加快开发。Amazon Step Functions 可以管理并发和错误阈值,在可视化操作员控制台中显示每个工作流执行的进度,并让您控制故障和错误的处理方式。
立即在控制台中使用 Workflow Studio、Amazon Command Line Interface(CLI)或 Amazon SDK 开始使用新的分布式 Map 模式。要了解更多信息,请参阅 Amazon Step Functions 开发人员指南。
Amazon Step Functions 的分布式 Map 模式功能现已在由光环新网运营的亚马逊云科技中国(北京)区域和由西云数据运营的亚马逊云科技中国(宁夏)区域中推出。