快速部署k8s

原创

liukuo881 2020-04-15 22:28:10 ©著作权

©著作权归作者所有：来自51CTO博客作者liukuo881的原创作品，请联系作者获取转载授权，否则将追究法律责任

kubernetes优势自动装箱，水平扩展，自我修复服务发现和负载均衡自动发布（默认滚动发布模式）和回滚集中化配置管理和秘钥管理存储编排任务批处理运行环境：

主机名	IP地址	服务
master	192.168.1.22	kube-apiserver kubelet kubectl
node1	192.168.1.23	kube-apiserver kubelet kubectl
node2	192.168.1.24	kube-apiserver kubelet kubectl

集群硬件环境

环境准备关闭防火墙： $ systemctl stop firewalld $ systemctl disable firewalld 关闭selinux： [root@master ~]# sed -i 's/enforcing/disabled/' /etc/selinux/config [root@master ~]# setenforce 0 关闭swap： swapoff -a $ 临时 vim /etc/fstab $ 永久 1.下载docker (1)若您安装过docker，需要先删掉，之后再安装依赖:

sudo yum remove docker docker-common docker-selinux docker-engine sudo yum install -y yum-utils device-mapper-persistent-data lvm2 (2)根据版本不同，下载repo文件 wget -O /etc/yum.repos.d/docker-ce.repo https://mirrors.huaweicloud.com/docker-ce/linux/centos/docker-ce.repo 软件仓库地址替换为：

sudo sed -i 's+download.docker.com+mirrors.huaweicloud.com/docker-ce+' /etc/yum.repos.d/docker-ce.repo (3)更新索引文件并安装

sudo yum makecache fast sudo yum install docker-ce 配置镜像加速器: mkdir -p /etc/docker tee /etc/docker/daemon.json <<- 'EOF' { "registry-mirrors": ["https://c15671a72e23484e8ad2e8bb0b9b4f00.mirror.swr.myhuaweicloud.com"] } EOF sudo systemctl daemon-reload sudo systemctl restart docker 1.2修改主机名 [root@master ~]# hostnamectl set-hostname master 2.k8s系统网络设置 (1)配置内核参数，将桥接的IPv4流量传递到iptables的链创建/etc/sysctl.d/k8s.conf文件添加如下内容： net.bridge.bridge-nf-call-ip6tables = 1 net.bridge.bridge-nf-call-iptables = 1 然后执行： [root@master ~]# sysctl --system 3.安装k8s

添加华为yum源 [root@master ~]# cat > /etc/yum.repos.d/kubernetes.repo << EOF

[kubernetes] baseurl=https://repo.huaweicloud.com/kubernetes/yum/repos/kubernetes-el7-x86_64 enables=1 gpgcheck=1 repo_gpgcheck=1 gpgkey=https://repo.huaweicloud.com/kubernetes/yum/doc/yum-key.gpg https://repo.huaweicloud.com/kubernetes/yum/doc/rpm-package-key.gpg EOF yum安装k8s插件 [root@master ~]# yum install -y kubelet-1.14.0 kubeadm-1.14.0 kubectl-1.14.0 [root@master ~]# systemctl enable kubelet [root@master ~]# systemctl start kubelet #安装kubelet 后会在/etc下生成文件目录/etc/kubernetes/manifests/ kubeadm：引导集群的命令 kubelet：集群中运行任务的代理程序 kubectl：命令行管理工具验证k8s 1.执行以下命令 [root@master ~]# kubectl get nodes The connection to the server localhost:8080 was refused - did you specify the right host or port? 3.查看当前版本 [root@master ~]# kubectl version 3.1配置master 3.1.1创建工作目录 [root@master ~]# ansible all -a "mkdir -p /work/k8s" [root@master ~]# cd /work/k8s/ 3.1.2创建kubeadmin.conf配置文件 1.生成配置文件 [root@master k8s]# kubeadm config print init-defaults ClusterConfiguration > kubeadmin.conf 2.修改kubeadmin.conf 修改下载镜像源 imageRepository: registry.aliyuncs.com/google_containers 修改API服务地址 localAPIEndpoint: advertiseAddress: 192.168.1.22 注192.168.1.11是masterip地址配置子网网络 networking: dnsDomain: cluster.local podSubnet: "10.244.0.0/16"
serviceSubnet: 10.96.0.0/12 注：这里10.244.0.0/16和10.96.0.0/12分别是k8s内部pods和service的网络，后续flannel网络需要用到。 3.1.3拉取k8s必备的模块镜像 1.查看都需要那些镜像文件需要拉取 2.[root@master k8s]# kubeadm config images list --config kubeadmin.conf registry.aliyuncs.com/google_containers/kube-apiserver:v1.14.0 registry.aliyuncs.com/google_containers/kube-controller-manager:v1.14.0 registry.aliyuncs.com/google_containers/kube-scheduler:v1.14.0 registry.aliyuncs.com/google_containers/kube-proxy:v1.14.0 registry.aliyuncs.com/google_containers/pause:3.1 registry.aliyuncs.com/google_containers/etcd:3.3.10 registry.aliyuncs.com/google_containers/coredns:1.3.1 kube-apiserver：集群的统一入口，各组件协调者，以RESTful API提供接口服务，所有对象资源的增删改查和监听操作都交给APIServer处理后再提交给Etcd存储。 kube-controller-manager：处理集群中常规后台任务，一个资源对应一个控制器，而ControllerManager就是负责管理这些控制器的。 kube-scheduler：根据调度算法为新创建的Pod选择一个Node节点，可以任意部署,可以部署在同一个节点上,也可以部署在不同的节点上。 kube-proxy在Node节点上实现Pod网络代理，维护网络规则和四层负载均衡工作。 pause etcd：分布式键值存储系统。用于保存集群状态数据，比如Pod、Service等对象信息。 coredns 2.拉取镜像 [root@master k8s]# kubeadm config images pull --config kubeadmin.conf 3.1.4初始化kubernetes环境 初始化并启动 [root@master k8s]# kubeadm init --config kubeadmin.conf k8s启动成功，但是记住末尾内容 Your Kubernetes control-plane has initialized successfully!

To start using your cluster, you need to run the following as a regular user:

mkdir -p $HOME/.kube sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config sudo chown $(id -u):$(id -g) $HOME/.kube/config

You should now deploy a pod network to the cluster. Run "kubectl apply -f [podnetwork].yaml" with one of the options listed at: https://kubernetes.io/docs/concepts/cluster-administration/addons/

Then you can join any number of worker nodes by running the following on each as root:

kubeadm join 192.168.1.22:6443 --token abcdef.0123456789abcdef
--discovery-token-ca-cert-hash sha256:bce41e8a7028dccdd878f1be0504be10e0d1d8dd3ab8d7b4eca509b699a8d016

1.按照提示执行 mkdir -p $HOME/.kube sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config sudo chown $(id -u):$(id -g) $HOME/.kube/config 如果node节点想要加入master集群，需要执行以下命令 kubeadm join 192.168.1.22:6443 --token abcdef.0123456789abcdef --discovery-token-ca-cert-hash sha256:bce41e8a7028dccdd878f1be0504be10e0d1d8dd3ab8d7b4eca509b699a8d016 2.创建系统服务并启动 [root@master k8s]# systemctl enable kubelet [root@master k8s]# systemctl start kubelet 3.1.5验证kubernetes启动结果 1.验证输入，注意显示master状态是NotReady，证明初始化服务器成功 [root@master k8s]# kubectl get nodes NAME STATUS ROLES AGE VERSION master NotReady master 10m v1.14.0 2.查看当前k8s集群状态 3.[root@master k8s]# kubectl get cs NAME STATUS MESSAGE ERROR scheduler Healthy ok
controller-manager Healthy ok
etcd-0 Healthy {"health":"true"} 目前只有一个master，好没有node，而且是NotReady状态，那么需要将node加入到master管理集群中来。在之前需要下配置k8s集群的内部网络，这里采用flannel 3.1.6部署集群内部通信flannel网络 [root@master k8s]# wget https://raw.githubusercontent.com/coreos/flannel/a70459be0084506e4ec919aa1c114638878db11b/Documentation/kube-flannel.yml 编辑这个文件确保flannel网络是对的 net-conf.json: | { "Network": "10.244.0.0/16", "Backend": { "Type": "vxlan" } 引用当前的flannel配置文件 [root@master k8s]# kubectl apply kube-flannel.yml 查看结果 [root@master k8s]# kubectl get nodes NAME STATUS ROLES AGE VERSION master Ready master 27m v1.14.0 3.2.1配置node节点 1.启动k8s后台服务 [root@node1 ~]# systemctl enable kubelet [root@node1 ~]# systemctl start kubelet 2.将master机器的/etc/kubernetes/admin.conf传到node下/work/k8s 登录master终端将admin.conf传递给node1-2 [root@master k8s]# ansible all -i hosts -m copy -a "src=/etc/kubernetes/admin.conf dest=/work/k8s" 3.node1-2,创建基础kube配置文件 [root@master k8s]# ansible all -i hosts -a "mkdir -p $HOME/.kub" [root@master k8s]# ansible all -i hosts -a "cp -i /work/k8s/admin.conf $HOME/.kube/config" [root@master k8s]# ansible all -i hosts -a "chown $(id -u):$(id -g) $HOME/.kube/config" 4.node1-2分别连接master加入master集群 [root@master k8s]# ansible all -i hosts -a "kubeadm join 192.168.1.22:6443 --token abcdef.0123456789abcdef --discovery-token-ca-cert-hash sha256:bce41e8a7028dccdd878f1be0504be10e0d1d8dd3ab8d7b4eca509b699a8d016" 5.node1-2应用flannel网络将master中的kube-flannel.yml传入到node节点/work/k8s [root@master k8s]# ansible all -i hosts -m copy -a "src=kube-flannel.yml dest=/work/k8s" 启动node1-2，flannel网络 [root@master k8s]# ansible all -i hosts -a "kubectl apply -f /work/k8s/kube-flannel.yml" 6.查看node是否加入到k8s集群中（需要一点时间） [root@master k8s]# kubectl get nodes NAME STATUS ROLES AGE VERSION master Ready master 97m v1.14.0 node1 Ready <none> 15m v1.14.0 node2 Ready <none> 15m v1.14.0 搭建完成搭建步骤分析4大步骤 1.master：kubeadm int --config admin.conf (初始化k8s集群) 创建一个master 2.配置master node之间的网络通信协议和模式 flannle网络 3.配置node节点，分别配置flannel网络 4.让node加入master kubeadm join 加入到master集群中

部署ningx应用，测试部署在Kubernetes部署中创建一个pod，验证是否正常运行： [root@master k8s]# kubectl create deployment nginx --image=nginx deployment.apps/nginx created [root@master k8s]# kubectl expose deployment nginx --port=80 --type=NodePort service/nginx exposed [root@master k8s]# kubectl get pod,svc NAME READY STATUS RESTARTS AGE pod/nginx-65f88748fd-754g4 1/1 Running 0 105s

NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE service/kubernetes ClusterIP 10.96.0.1 <none> 443/TCP 4h1m service/nginx NodePort 10.97.134.248 <none> 80:30983/TCP 23s