批量计算服务batchcompute 快速开始 - 阿里云帮助与文档.pdfVIP

批量计算服务BatchCompute 快速开始 批量计算服务BatchCompute/快速开始 快速开始 快速开始 批量计算服务（Batch Computing Service，简称BatchCompute）是一种适用于大规模并行批处理作业的分 布式云服务。BatchCompute可支持海量作业并发规模，系统自动完成资源管理，作业调度和数据加载，并按 实际使用量计费。 快速开始 创建阿里云账号 登陆阿里云官网 ，点左上角“注册”创建阿里云账号。 开通BatchCompute服务 使用注册成功的阿里云账号登陆，点左上角“产品”，在“大规模计算”中找到批量计算服务 BatchCompute进入产品主页，开通BatchCompute服务。 获取 AccessKeyId 和 AccessKeySecret 用户登录后按如下方法获取 AccessKeySecret 阿里云首页-用户中心-AccessKeys 找到启用状态的 AccessKeyId 点击显示，即可获取对应的 AccessKeySecret。 如果没有可用的 AccessKeyId 可点击右上角的创建 Access Key按钮，创建成功后,系统会生成一对 AccessKeyId 和 AccessKeySecret。 下载 OSS SDK 由于 BatchCompute 使用 OSS 作为存储,请花 10 分钟时间了解 OSS。下载您的开发语言对应的 OSS SDK 创建 OSS Bucket 方法如下 登录阿里云首页-开放存储服务 OSS - 管理控制台 - 新建Bucket 具体请参考OSS文档 1 批量计算服务BatchCompute/快速开始 理解基本概念 为更好的继续下面的操作，首先简单理解BatchCompute中的几个核心概念。 作业准备 本作业采用 Python 语言编写，目的是找出给定三份数据里的所有质数并进行排序输出。 该作业包含两个任务: Find 任务和 Sort 任 务。其中，Find 任务会并行运行 3 个实例,每个实例寻找一份数据文 件中的质数,然后将结果存到 OSS 中。Sort 任务只有一个实例,即从 OSS 中读出 Find 任务寻找出来的质数并进 行排序, 最后再输出到 OSS 中。 存储输入文件 本作业需输入三份数据文件下载 data.tar ，本例中上传至OSS的路径分别如下 oss://my-bucket/find-prime/input-data-0.txt oss://my-bucket/find-prime/input-data-1.txt oss://my-bucket/find-prime/input-data-2.txt 本例中我们创建的 OSS Bucket 为 my-bucket，如要运行本例子，您需要创建自己的bucket，并且把三份数 据文件上传至您自己创建的bucket的路径下。如何上传到OSS，请参考OSS文档。 注意：存储作业数据和作业任务的 OSS bucket 必须保持与 BatchCompute 的用户名及region一致。 编写作业任务 Find 任务和 Sort 任务的 Python 代码下载 Find_Sort.tar 如要运行本例子，请按照上文所述创建的您的bucket路径，填入以下参数： Find.py ACCESS_KEY_ID: AccessKeyId可以由上文所述获取 ACCESS_KEY_SECRET: AccessKeySecret可以由上文所述获取 BUCKET: 存储输入输出文件的bucket FIND_INPUT_PATH: 输入文件在