云计算技术下蒙特卡洛的模拟.pdfVIP

云计算技术下蒙特卡洛的模拟

(2)配置实例:这一步只需要默认设置即可;

(3)添加存储:用户可以选择存储的大小和类型;

(4)标记实例:研究人员可以选择标记(命名)实例,当用户使用多个资源

和实例时,标签可以有助于管理;

(5)配置安全组:选择适当的安全设置很重要,安全组是一组控制与实例的

流量(通信)的防火墙规则,研究人员需要允许通过SSH与实例进行通信,并

允许通过Web浏览器(http)连接到RStudio服务器,因此需要打开以下端

口:22(SSH),80(HTTP),443(HTTPS),3389(RDP)和8787(RStudio

Server);

最后,点击下一步审核,完成实例的配置过程。

第三步是研究人员在自己的计算机和正在运行的EC2实例之间建立连接和通

信桥梁。也就是通过SSH(安全shell)软件实现连接。个人计算机一旦与实例

建立连接,研究人员就可以在他的虚拟机上安装和配置他可能需要的任何软件,

例如可以安装R和RStudioServer,Python,MATALB等。如果选择预先配置已

安装软件的AMI,则研究人员仍需要与实例(虚拟机)建立连接,以便启动和

使用他需要的软件。例如RStudioServer的使用,其中一个功能是可以通过SSH

设置和启动它,然后可以通过用户名和密码从Web浏览器访问它(就像访问他

的电子邮件一样)。值得注意的是,一旦研究人员完成了虚拟机的工作,他就

需要返回AWS和EC2并终止正在运行的实例。如果不这样做,将使实例处于工

作状态,并将收取不必要的费用。

实例运行后,需要通过安全shell(SSH)直接与其建立连接,不同的操作

系数有所区别,在Windows环境下可以利用PuTTY远程连接工具,而MACOSX

下使用MacOS终端来完成(Linux和MACOSX都是UNIX类型的操作系统),设

置是类似的。研究人员连接到AWS以便运行EC2上的实例。接下来,就需将数据

加载到S3,以及在EC2和S3之间传输数据。

3、数据的存储及传输

简单存储服务(AmazonSimpleStorageService,简称AmazonS3或S3)

1

是AWS的一部分,其存储成本较低,这一存储服务与EC2是分开的,S3使用Web

界面来存储和检索研究人员计算机的任何数据,提供安全且可扩展的对象存储。

S3非常适用于大数据集的使用。当研究人员使用大型数据集并且不希望每次都

将数据上传到他的虚拟机时,S3非常有用,即使使用较小的数据集,将数据上

传到S3也许在逻辑上更为简单,然后将其传输到EC2并直接在云中执行所有需

要的分析。只要两个云服务(EC2和S3)位于同一地理位置,S3和EC2之间的

数据传输速度非常快(比从个人计算机上传更快),并且是免费的。AWS将服务

器托管在世界各地的几个不同地理位置。研究人员应该选择最接近他/她的那个

并且使其一致,以便始终为其EC2和S3提供相同的位置。S3和EC2之间的数据

传输(反之亦然)也在通过SSH连接到虚拟机时完成。

如果研究人员使用的数据文件不大,他可以自己保存文件在本地计算机,并

在需要时将其上传到实例。以同样的方式,他的输出文件可以很容易地下载回个

人电脑。但是,如果数据文件非常大,则用户最佳选择是将其数据上传到AWS云

存储(S3),然后在需要时将其传输到EC2进行分析,然后将结果保存回S3。

我们建议使用此过程,一方面因为大数据文件可能需要花费大量时间上传,上

传可能会中断,以及其他可能的相关问题;另一方面,一旦数据在S3中,转移

到EC2是快速简便的。在本节中,我们将介绍用户如何将数据直接从个人计算

机传输到EC2,或者从计算机传输到S3然后再传输到EC2。

首先应在S3中创建存储桶(这是所有数据将进入的位置),类似数据库的

配置。在这种情况下,一般默认选择了美国标准。创建后,单击存储桶,然后创

建一个文件夹。我们就可以直接装载数据进入