制作一个云平台自建云计算平台

转载

智能开发先锋 2024-03-08 20:12:05

文章标签 制作一个云平台云计算平台虚拟机 ubuntu 文章分类 云平台云计算

众说周知Amazon EC2是一个公共的云计算平台,属于IaaS(基础设施即服务)这类.

现在有一款开源的项目Eucalyptus(Elastic Utility Computing Architecture for Linking Your Programs To Useful Systems),同样实现了Amazon EC2的功能和接口,由于其开源性,注定了搭建一个私有的云计算平台成为可能. 更方便的是Ubuntu9.10服务器版已经集成了Eucalyptus这个开源软件,使的搭建企业私有的云计算平台变得方便而简单.

下面我们将一步步来搭建这个私有的云计算平台.

一相关资源

1) 至少准备两台机器, 当然我这里是用虚拟机软件(Sun VirtualBox)来虚拟出两台实际的机器

(如果你也采用Sun VirtualBox,有些注意事项,可以参见后面的附录一)

2) 底层操作系统: Ubuntu9.10 服务器版 (http://www.ubuntu.com/cloud)

3) 云服务环境 : Eucalyptus , ( Ubuntu9.10 服务器版内置) http://eucalyptus.com/

4) Eucalyptus 命令行客户端(Euca2ools)

5) Eucalyptus客户端: Elastic Fox ,这是一个firefox插件 :http://developer.amazonwebservices.com/connect/entry.jspa?externalID=609

————————————————————————–

二云计算服务的搭建(使用Ubuntu自带的向导,十分简单的哦)

1) 一台机器, 作为Cluster(Front End) , 命名为: ubuntu-cluster , 它包含了如下部分

Cloud Controller (clc) 
 Cluster Controller (cc) 
 Walrus (the S3-like storage service) 
 Storage Controller (sc)

2) 至少一台机器作为Node, 命名为: ubuntu-node1,它包含了如下部分

Node Controller (nc)

3) 在作为Cluster的机器上 ,安装基本系统: Ubuntu9.10 服务器版

1.安装引导时,要选择 “Install Ubuntu Enterprise Cloud”
2. 安装过程中,如果提示”Cluster” 还是”Node”,一定要选择Cluster
3.安装过程中,提示”Configure postfix” 时选择 internetSite
4. 安装过程中,提示”Name your cluster” 时 ,请取一个合适的名字,比如我取之为: cluster1
5. 安装过程中,提示”a list of available IP addresses on your network”, 一定要选择一个可用的公共IP段.

4) 在作为Node的机器上 ,也安装基本系统: Ubuntu9.10 服务器版

1.安装引导时,要选择 “Install Ubuntu Enterprise Cloud”
2. 安装过程中,如果提示”Cluster” 还是”Node”,一定要选择Node, (如果Cluster正在运行,这一步可能不会出现,自动会选择Node
3.安装完一个节点后,,后续的节点可以采用克隆方法,参见后面的附录二

5) 在Cloud Controller(位于ubuntu-cluster)上注册所有的Node机器: 在ubuntu-cluster上执行:

sudo euca_conf –no-rsync –discover-nodes

至此,一个私有的云计算平台的服务端已经搭建好了,下面就开始说如何管理了,很简单吧!

三云计算平台管理之命令行工具(Euca2ools)

1)在 https://YourIP:8443 中注册个人信息然后登录下载证书 euca2-yourname-x509 .zip

2) 在客户端机器上执行

$ mkdir ~/.euca 
 $ cd ~/.euca 
 $ unzip euca2-yourname-x509 .zip 
 $ chmod 0700 ~/.euca 
 $ chmod 0600 ~/.euca/*

3) 在客户端机器上执行, 安裝 Euca2ools 和 EC2-API-Tools

. ~/.euca/eucarc 
 echo “[ -r ~/.euca/eucarc ] && . ~/.euca/eucarc” >> ~/.bashrc 
 sudo apt-get install euca2ools 
 sudo apt-get install ec2-api-tools 
 sudo reboot

4)在客户端机器,使用 Euca2ools 上传 Kernel / Ramdisk / FS Image (使用者可注册 Image，但只有管理者才可注册 kernel/ramdisks)

1. 目前 Eucalyptus 系統上没有 Kernel、Ramdisk 和 FS Image，所以我們使用官方提供的 Image (上传需要用到三个指令)

euca-bundle-image – 打包好將要上传的档案
euca-upload-bundle – 上传到 Eucalyptus
euca-register – 注册上传的档案

2. 上传Kernel,如(以我客户端机器的vmlinuz为例):

euca-bundle-image -i /boot/vmlinuz-2.6.31-14-generic-pae –kernel true 
 euca-upload-bundle -b kernel -m /tmp/vmlinuz-2.6.31-14-generic-pae.manifest.xml 
 euca-register kernel/vmlinuz-2.6.31-14-generic-pae.manifest.xml

3.上传 Ramdisk, 如(以我客户端机器的initrd.img为例)

euca-bundle-image -i /boot/initrd.img-2.6.31-14-generic-pae –ramdisk true 
 euca-upload-bundle -b ramdisks -m /tmp/initrd.img-2.6.31-14-generic-pae.manifest.xml
 euca-register ramdisks/initrd.img-2.6.31-14-generic-pae.manifest.xml

4. 查看已上传到档案:

方法一: https://YourIP:8443/#images

方法二: euca-describe-images

5. 根据查看的结果,上传FS Images:(分配 Kernel 和 Ramdisks 給 VMs 有三种方法,见附录三)
如(以我从Ubuntu官网上下载的Images:karmic-server-uec-i386.tar.gz为例 ):

tar zxvf karmic-server-uec-i386.tar.gz 
 euca-bundle-image -i karmic-server-uec-i386.img –kernel eki-977213C6 –ramdisk eri-0CBA157D 
 euca-upload-bundle -b images -m /tmp/karmic-server-uec-i386.img.manifest.xml 
 euca-register images/karmic-server-uec-i386.img.manifest.xml

5) 申請 key pair，以便 ssh 登入 instance

ec2-add-keypair mykey >mykey.private 
 chmod 0600 mykey.private

6) 在客户端机器,开启虚拟机.

1.查看 euca-describe-images ,获得希望启动Image的emi

2.启动一个虚拟机:

euca-run-instances -k mykey -n 1 <emi-XXXX>

3.查看这个虚拟机的基本信息,比如IP地址,和此实例id

euca-describe-instances

4.登录这个新启动的虚拟机

ssh -i mykey.private root@192.168.100.X

5.终止这个虚拟机实例

euca-describe-instances(获得instance-id) 
 euca-terminate-instances <instance-id>

—————————————————————————————————-

附录一:

虚拟测试环境的搭建:

1.虚拟机软件: Sun VirtualBox

2.管理 -> 全局设定 -> 网络中选择 “Host-Only” 点编辑,然后选择 “DHCP服务器”, 禁用”启用服务器”

3建立两台虚拟机, Linux/Ubuntu ,网络选择Host-Only方式

4在宿主机器上,将可以联互联网的网卡设置为针对 Host-Only 网卡的共享

说明,这里之所以采用 , Host-Only + 通过宿主机器共享上网 ,而不采用Bridged的联网方式,是前者可以在离开网络支持的情况下, 依然可以保证虚拟机的IP在局部可用并且不变.

附录二: VirtualBox 系统克隆及其可能后续操作:

1) VirtualBox 的虚拟硬盘的克隆命令: VBoxManage clonevdi old.vdi new.vdi

2) Ubuntu 修改主机名:

1. 启用root用户: sudo passwd root
2. .以root用户身份登录
3. pico /etc/hosts : 修改对应的旧的主机名
4. pico /etc/hostname : 删除该文件的所有内容，添加新的主机名
5. 执行命令: hostname <新的主机名>
6. logout
7. 禁用root用户: sudo passwd -l root

3)如果找不到网卡,不妨,查看一下: ifconfig –a ,然后配置 /etc/network/interfaces ,然后重启网卡

附录三: 分配 Kernel 和 Ramdisks 給 VMs 有三种方法

1) 在 ‘ec2-bundle-image’ 步骤指定

ec2-bundle-image -i <path/to/my/>vmimage.img –kernel <eki-XXXXXXXX> –ramdisk <eri-XXXXXXXX>

2)在 ‘ec2-run-instances’ 步骤指定

ec2-run-instances <emi-XXXXXXXX> –kernel <eki-XXXXXXXX> –ramdisk <eri-XXXXXXXX>

3) 在 https://YourIP:8443 选择 ‘Configuration’ 标签，新增 <eki-xxxxxxxx> 和 <eri-xxxxxxxx> 作为预设的 kernel 和 ramdisk

附录四: 如何删除Image

1) 先取消注册

ec2-deregister <emi-XXXXXXXX>

2) 移除位于 bucke 的档案

ec2-delete-bundle -a $EC2_ACCESS_KEY -s $EC2_SECRET_KEY –url $S3_URL -b <bucket> -p <file prefix>

3) 移除 image 和 bucke (—clear)

ec2-delete-bundle -a $EC2_ACCESS_KEY -s $EC2_SECRET_KEY –url $S3_URL -b <bucket> -p <file prefix> –clear

附录五: Euca2ools常用命令:

euca-describe-availability-zones verbose 察看可用的资源

euca-describe-instances 察看目前正在執行的虚拟机(VM)

euca-bundle-image 打包好将要上传到档案

euca-upload-bundle 上传档案到 Eucalyptus

euca-register 组成已经上传到档案

euca-describe-images 查看可用的 images

CentOS6下安装基于Xen的Eucalyptus 2.0.3

Eucalyptus

Cloud controller(CLC)，控制调度云的资源，同时提供web界面以及兼容EC2的SOAP服务
Walrus，实现了基于桶的存储，同时提供兼容S3的SOAP服务以及REST接口
Cluster controller(CC)，实现以集群为单位的调度
Storage controller(SC)，基于块的存储控制器，EBS-style
Node controller(NC)，虚拟节点，运行xen及虚拟机的机器

版本

CentOS 6 Minimal install
Xen 4.1.1 NC服务器上面需要完全安装，其余服务器需要几个编译好的rpm，参考
Eucalyptus 2.0.3，下载offline源码包, http://eucalyptussoftware.com/downloads/releases/eucalyptus-2.0.3-src-offline.tar.gz , 依赖的库 http://eucalyptussoftware.com/downloads/releases/eucalyptus-2.0.3-src-deps.tar.gz
euca2ools 1.3.1, 使用fedora的，下载 http://eucalyptussoftware.com/downloads/releases/euca2ools-1.3.1-fedora-x86_64.tar.gz
dhcpd 3.0.5, CC上需要安装, 使用旧版本rhel5的, eucalyptus 2.0.3对稍微高版本的ISC dhcpd支持有问题, 下载http://ftp.redhat.com/redhat/linux/enterprise/5Server/en/os/SRPMS/dhcp-3.0.5-29.el5_7.1.src.rpm

准备工作

1. 下载各个软件包

2. 除了NC以外的服务器安装CentOS 6 Minimal方式

3. NC服务器按照参考文档安装配置Xen环境，注意在Xen的内核配置里面添加一项 max_loop=256

4. 配置好所有机器的NTP，使它们时钟保持同步

安装过程

1. 创建 /etc/yum.repos.d/euca.repo