原文 http://blog.csdn.net/tienway/archive/2010/03/16/5386119.aspx
亚马逊将他们的云计算平台称为弹性计算云(Elastic Compute Cloud
,EC2)
,它是最早提供远程云计算平台服务的公司。早在2006
年3
月,亚马逊就发布了简单存储
服务(Simple Storage Service
,S3)
。
亚马逊网络服务平台使用REST (Representational State Transfer)
和简单对象访问协议(SOAP)
等标准接口,用户可以通过这些接口访问到相应的存储服务。
核心概念
l
Amazon EC2
(
Amazon Elastic Compute Cloud
):
是
web service
,目的是使得用户可以发起和管理
Amazon
数据中心的
Linux/UNIX
和
Windows
服务器实例。
Amazon EC2
提供虚拟主机服务,主要可以随需添加“机器”,硬盘等,达到快速扩展的目地。
l
Amazon S3
(
Amazon Simple Storage Service
):
是一个公开的服务,
Web
应用程序开发人员可以使用它存储数字资产,包括图片、视频、音乐和文档。
S3
提供一个
RESTful
API
以编程方式实现与该服务的交互。
l
Amazon AMI
(
Amazon Machine Image
):
相当于一套业务系统的
snapshot
,保存到
Amazon S3
中,它包含启动业务应用实例必需的所有信息。
l
Instance
:
运行着的业务系统实例,该实例基于
AMI
产生,是执行
AMI
产生的系统,可以基于同一个
AMI
产生很多实例,共同对外提供服务,一般来说,一个
Instance
对应一个虚拟机。
l
Instance Type
:
Amazon
为了满足不同
Instance
的计算需求,提供了灵活的资源提供方式:
Standard, High-Memory and High-CPU
,
m1.small
,
m1.large
,
m1.xlarge
三种为
standard
类型,
m2.xlarge
,
m2.2xlarge
,
m2.4xlarge
为
High-Memory
类型,
c1.medium
,
c1.xlarge
为
High-CPU
类型。
l
Regions
:
Amazon EC2
支持在多个不同地理位置的区域发起实例,在每一个
Region
,都有一个标准的数据中心,提供
EC2
服务。
l
AWS
(
Amazon Web Services
):
EC2 AWS
提供了在
Amazon
的计算环境中运行企业应用的能力。
要想自己的企业应用运行于Amazon
的云计算环境中,做法比较简单,只需要利用Amazon
提供的工具、登录Amazon AWS
门户网站进行相应的操作即可。
准备工作
Ø
下载
Amazon
的命令行工具
ec2-api-tools
,需要的
JRE
为
1.5
以上;
Ø
如果访问
Linux and UNIX
实例,需要一个
SSH
客户端;如果访问
Windows
实例,需要一个远程桌面连接客户端;
Ø
为了使用
Amazon EC2
,必须注册
AWS
账号(
http://aws.amazon.com/
),注册
Amazon S3
账号(
http://aws.amazon.com/s3/
),注册
Amazon EC2
账号((
http://aws.amazon.com/
)),这三个账号的注册是独立注册,并且是必须的;
Ø
Amazon S3
账号是为了存储或者取回
Amazon EC2
AMI
s
;
Ø
得到
Key identifiers
(访问证书
X.509 Certificate
):设置
ec2-api-tools
时使用;
开发步骤
第一步:
建立自己的企业应用,并打包到AMI
中,该AMI
包含你应用所有依赖的软件,包括操作系统以及相关配置、业务应用、依赖的运行库等等。
如何制作AMI
,不用担心,Amazon
提供了必需的工具为你创建和打包AMI
。
第二步:
上传你的AMI
包到
Amazon S3
(Amazon Simple Storage Service
)服务存储中。在Amazon S3
下,我们可以安全可信的访问我们的AMI
。
第三步:
在
Amazon EC2
平台上,注册你的AMI
,通过这个步骤,校验上传AMI
是否正确,并且申请到为一个AMI ID
。
第四步:
借助AMI ID
和
Amazon EC2
提供的web
服务API
,就可以运行、监控、终止AMI
申请的实例。当前,Amazon
提供了命令行工具和java
库,你可以直接访问Amazon
提供的SOAP
或者基于API
的查询。
制作AMI
AMI
是一个基本的部署单元,作为一个基本单元,可以启动一个对应的客户端实例。所有的AMI
被保存在Amazon S3
中,Amazon S3
存储数据对象在
bucket
中,一个
bucket
有一个全局唯一的名字,并且仅仅属于专用的用户。上传
MAI
时,需要指定一个
bucket
,如果已经存在,则上传失败。
制作AMI
有两种方式:
基于已经存在的AMI
模板,首先选择一个已经存在的AMI
,然后启动一个AMI Instance
,通过
SSH
服务,访问并控制
AMI Instance
。
建立
Loopback File
,这种方式比较麻烦,具体可以参考
Amazon
的官方文档。
设置ec2-api-tools
首先从http://developer.amazonwebservices.com/connect/entry.jspa?externalID=351&categoryID=88
下载ec2-api-tools
,Amazon
提供了
Windows 2000/XP and Linux/UNIX/Mac
版本。下载后是一个
zip
包,直接解压缩即可。
1、
ec2-api-tools
的运行依赖于环境变量EC2_HOME
,查找需要的库文件。EC2_HOME
指向ec2-api-tools
的安装路径ec2-api-tools-A.B-nnnn (A
,B
标识版本编号,n
标识为修订编号)
。
set EC2_HOME=
c:\amazon\ec2\ec2-api-tools-1.3-46266
2、
ec2-api-tools
需要在申请
Amazon EC2
服务时产生的证书与密钥,以便在用命令行发出请求时,确知身份。为了不用每次使用命令行时,都去指定证书与密钥,可以通过设置环境变量,
windows
下:
set EC2_PRIVATE_KEY=
c: \amazon\ec2\pk-HKZYKTAIG2ECMXYIBH3HXV4ZBZQ55CLO.pem
set EC2_CERT=
c:\amazon\ec2\cert-HKZYKTAIG2ECMXYIBH3HXV4ZBZQ55CLO.pem
3、
指定Amazon EC2
使用的Region
,默认情况下,Amazon EC2
工具使用
Eastern United States
region (us-east-1)
,指向us-east-1.ec2.amazonaws.com
服务节点。通过
ec2-describe-regions
指令,查询可用的regions
,然后通过
set EC2_URL=<service_endpoint>
,修改使用的region
。
运行一个Instance
以
windows
实例为例。
Ø
运行一个Instance
实例,需要的前提条件:
Ø
预装1.5.0
以及以上的JRE
,设置JAVA_HOME
环境变量;
Ø
确信有AWS
账号,并且在Amazon S3
和Amazon EC2
注册;
Ø
确信在ec2
路径下有X.509
证书和私钥;
Ø
设置了EC2_HOME
、EC2_CERT and EC2_PRIVATE_KEY
环境变量;
1、
使用ec2-describe-images
发现可以使用AMI
以及信息;
2、
因为Amazon EC2
需要使用SSH
密钥对获取windows
登录密钥。因此首先获取SSH
密钥对,一般保存到本地一个密钥文件中;
3、
使用ec2-run-instances <ami_id> -k <keypair-name>
启动一个Instance
,此命令将返回
AMI
实例的
ID
;
4、
使用ec2-describe-instances <instance_id>
查询Instance
的状态;
Amazon EC2
的基本情况(资料来自网络):
Ø
磁盘系统使用 RAID
构建
Ø
大部分服务器在美国,小部分在欧洲,位于美国的服务器性能占了总量的 75-80%
。
Ø
各类 Instance
背后的硬件结构都是相似的,亚马逊在所有服务器之间协调资源,没有特意为不同的 Instance
购置不同的服务器。
Ø
EC2
最初的目标利用率是 70 - 75%
。
分享到:
相关推荐
姓名ec2-consistent-snapshot-使用一致的文件系统/ db在EC2上创建EBS快照支持状态该项目不再维护。 目前尚不清楚在EC2 / EBS上是否真的需要这样...概要ec2-consistent-snapshot [opts] VOLUMEID...选项-h-帮助打印帮助
Amazon EC2实例选择器 一个CLI工具和go库,根据资源标准(例如vcpus和内存)推荐实例类型。 概要 EC2上提供了270多种不同的实例类型,这会使选择合适的实例类型的过程变得困难。 实例选择器可帮助您选择兼容的实例...
Ubuntu在云计算领域具有深厚的基础,是Amazon EC2、Google Cloud Platform等主流云服务提供商的首选操作系统之一。Ubuntu支持Docker容器、Kubernetes集群管理和OpenStack云平台等多种先进技术,使其成为构建弹性可...
11.11. Amazon EC2 11.12. 案例 12. 故障排除和调试 HBase 12.1. 通用指引 12.2. Logs 12.3. 资源 12.4. 工具 12.5. 客户端 12.6. MapReduce 12.7. NameNode 12.8. 网络 12.9. RegionServer 12.10. Master 12.11. ...
- **Amazon EC2(Amazon EC2)**:提供在Amazon EC2环境下排查问题的方法。 - **HBase与Hadoop版本相关**:解释不同版本间可能存在的问题。 - **案例分析**:给出具体的故障排除案例。 #### 十三、HBase案例研究 - *...
- **Amazon EC2**: 在Amazon EC2上的优化策略。 - **案例**: 实际应用案例分享。 #### 十三、故障排除与调试 - **通用指引**: 故障排查的一般方法。 - **日志**: 日志分析的重要性。 - **资源**: 可用资源推荐。 -...
6. 云计算平台AWS的应用:内容中提到了在AWS(亚马逊网络服务)上设置账户、启动服务器实例、登录、配置、运行以及关闭EC2实例(Elastic Compute Cloud)的过程。这表明在云平台上进行深度学习模型的开发与训练正在...
- AWS的主要服务,如EC2、S3和Lambda的简介。 2. **Microsoft Azure** - Azure的核心功能,如虚拟机、存储和Azure Functions。 3. **Google Cloud Platform (GCP)** - GCP的独特优势,如AI和机器学习服务。 **第...
15. 概要设计阶段输出:概要设计阶段需要输出HLD(High Level Design)。选项B的描述是错误的,正确答案应该是A。 16. NAS和SAN一体化:华为混合闪存存储支持NAS和SAN一体化,二者软件协议栈并行且资源管理融合。...
此外,AWS的网络设计中还包括了高性能的EC2和S3服务间的传输能力。2012年8月6日,好奇号火星着陆直播时,AWS成功传输了高达25.3Gbps的数据流,这充分展现了AWS网络架构的高性能和高可靠性。 提到的DynamoDB是AWS...
Amazon EC2上的Hadoop 第10章 管理Hadoop HDFS 永久性数据结构 安全模式 日志审计 工具 监控 日志 度量 Java管理扩展(JMX) 维护 日常管理过程 委任节点和解除节点 升级 第11章 Pig简介 ...
Amazon EC2上的Hadoop 第10章 管理Hadoop HDFS 永久性数据结构 安全模式 日志审计 工具 监控 日志 度量 Java管理扩展(JMX) 维护 日常管理过程 委任节点和解除节点 升级 第11章 Pig简介 安装与运行Pig 执行类型 ...
- Amazon Web Services (AWS):提供EC2、S3、SQS、RDS等服务。 - Google:通过App Engine和Google Apps等服务,构建了一个以Google为主导的互联网应用生态系统。 - IBM:推出了“蓝云”和“蓝屋”服务。 - ...