基于Centos7构建Kubernetes平台

一、实验环境

3centos7的主机

master  192.168.111.131部署etcd,kube-apiserver,kube-controller-manager,kube-scheduler 4个应用。

node01  192.168.111.130  部署dockerkubeletkube-proxy  3个应用

node02  192.168.111.129  部署dockerkubeletkube-proxy  3个应用

二、实验步骤

1. 修改主机名和ip,三个主机网卡均设置为桥接模式,能够联网。

2. 分别修改/etc/hosts文件:

Master配置

#vim   /etc/hosts

基于 CentOS 7 搭建kubernetes集群_第1张图片Node01

#scp  [email protected]:/etc/hosts   /etc/

Node02

#scp  [email protected]:/etc/hosts   /etc/

3. 三台均设置防火墙的默认区域为trusted。

ee14913cda9e6136612838b5ea8cd43a.png

edc7c7a738f8d14ccddc6e9e3e6d68ff.png

6d0452b50002cb23ba7c252ebcfb2efd.png

4. 三台均关闭selinux.

16ba9914cf30d9bd2c4c230190772897.png

5. 安装docker,并启动。因为master之后还需要做registry仓库,所以也需要安装docker.

#yum   install  -y  docker

基于 CentOS 7 搭建kubernetes集群_第2张图片6. 开启路由转发功能

基于 CentOS 7 搭建kubernetes集群_第3张图片

7实现node01node02之间容器互通

1node01node02新建网桥,并固定网桥ip

node01上操作

删除网桥docker0,新建网桥kbr0:

基于 CentOS 7 搭建kubernetes集群_第4张图片

新建网桥的配置文件:

基于 CentOS 7 搭建kubernetes集群_第5张图片

新建路由文件:route-eth0eth0node1上的网卡名。

基于 CentOS 7 搭建kubernetes集群_第6张图片

修改docker配置文件,添加-b=kbr0参数

基于 CentOS 7 搭建kubernetes集群_第7张图片reboot重启系统使网桥设置生效。

2node02做同样的设置:

新建网桥:

基于 CentOS 7 搭建kubernetes集群_第8张图片

新建网桥配置文件:

#scp [email protected]:/etc/sysconfig/network-scripts/ifcfg-kbr0  /etc/sysconfig/network-scripts/

基于 CentOS 7 搭建kubernetes集群_第9张图片

创建路由文件:

基于 CentOS 7 搭建kubernetes集群_第10张图片

修改docker 配置文件:

#vim  /etc/sysconfig/docker

基于 CentOS 7 搭建kubernetes集群_第11张图片重启系统reboot.

3)系统启动之后,查看网卡信息和路由信息。

#ifconfig

基于 CentOS 7 搭建kubernetes集群_第12张图片基于 CentOS 7 搭建kubernetes集群_第13张图片4)验证两个宿主机间容器的互通性:

node01上运行一个容器:

基于 CentOS 7 搭建kubernetes集群_第14张图片node02上运行一个容器:

基于 CentOS 7 搭建kubernetes集群_第15张图片容器间互ping:

#docker   run   -it    docker.io/centos:centos6

# yum  install  -y  iputils        进入容器安装

基于 CentOS 7 搭建kubernetes集群_第16张图片

#dcoker   run  -it    docker.io/centos:centos6

基于 CentOS 7 搭建kubernetes集群_第17张图片

master上部署应用:

1、安装etcd.

b2ec6adccb7b54d00444701bfb8bec39.png

查看etcd配置文件:

3547be473cfe7605b646fa6b7fb7cca0.png

2、修改配置文件:

基于 CentOS 7 搭建kubernetes集群_第18张图片3、启动etcd服务

基于 CentOS 7 搭建kubernetes集群_第19张图片查看服务端口号

7cbbdbf3aa69eb516490d5e9c12b22d7.png4、部署k8s-master组件(apiserver+controller-manager+scheduler

安装软件:

#yum  install  -y  kubernetes-master

65bdc1f6c20f9fb86af9c59439d7d0c9.png

查看配置文件:

基于 CentOS 7 搭建kubernetes集群_第20张图片

5修改配置文件:

#vim   /etc/kubernetes/config

基于 CentOS 7 搭建kubernetes集群_第21张图片解释:

KUBE_LOGTOSTDERR  日志设置

KUBE_LOG_KEVEL     日志级别设置

KUBE_ALLOW_PRIV    是否允许运行特权容器

KUBE_MASTER       主节点的地址,主要为replication controllerschedulerkubelet可以顺利找到apiserver

#vim  /etc/kubernetes/apiserver

基于 CentOS 7 搭建kubernetes集群_第22张图片KUBE_API_ADDRESS                   监听的接口,如果配置为127.0.0.1则只监听localhost,配置为0.0.0.0会监听所有接口,这里配置为0.0.0.0

KUBE_API_PORT="--port=8080"           apiserver的监听端口,默认8080,不用修改。

KUBELET_PORT="--kubelet_port=10250"    kubelet监听的端口,默认10250,无需修改

KUBE_ETCD_SERVERS  //指定etcd节点的地址

KUBE_SERVICE_ADDRESSES               这个是设置今后运行Service所在的ip网段

KUBE_API_ARGS=”--secure-port=0”  默认是要求https安全通信,”--secure-port=0”则不要求https安全通信

:这里需要注意原来KUBE_ADMISSION_CONTROL默认包含的要删掉,不然启动API server的时候会报错

6、启动服务:

基于 CentOS 7 搭建kubernetes集群_第23张图片

查看服务端口:

63d2ba2c998cbfa73ba87301f2fe8d17.png部署node主机:

1安装kubernetes-node软件

#yum  install  -y  kubernetes-node

cc37a364afc6bac7462120e9047dd1c4.png

2修改配置文件:

#vim  /etc/kubernetes/config

基于 CentOS 7 搭建kubernetes集群_第24张图片

#vim  /etc/kubernetes/kubelet

基于 CentOS 7 搭建kubernetes集群_第25张图片配置项KUBELET_POD_INFRA_CONTAINER="--pod-infra-container-p_w_picpath=registry.access.redhat.com/rhel7/pod-infrastructure:latest"作用k8s创建pod的时候需要起一个基本容器,所以node节点要能连网。也可以自己搭建一个私有仓库,将pod-infrastructure:latest镜像上传到私有仓库中修改此配置文件的地址就可以

3、启动服务:

基于 CentOS 7 搭建kubernetes集群_第26张图片

4、在node02主机上重复上面的操作。

5master检查node 状态:

fd645fb0fefffb94c2f567d49b8fd16a.png

基于 CentOS 7 搭建kubernetes集群_第27张图片 建私有仓库

Kubernetes管理容器如果是第一次操作,可能会有一定的等待时间,这是因为第一次下载p_w_picpaths需要一段时间。如果本地没有docker registry,要确保节点能访问互联网,所以我们可以搭建一个私有仓库,由私有仓库提供所需要的镜像,

本实验环境中用kubernetes同时作为registry

1导入镜像:

0fb4f66daebd207bc5de445289b9af7a.png2、基于私有仓库镜像运行容器

基于 CentOS 7 搭建kubernetes集群_第28张图片3、本地访问私有仓库:

a66732ae83ba48d1a6dd2df0d8093eb5.png

4上传镜像到私有仓库

导入之后用到的镜像到本地

2a4a51981a656c6eea61a75e6a1fb21e.png给基础镜像打个标签

基于 CentOS 7 搭建kubernetes集群_第29张图片

在三台主机上均修改docker 的配置文件,指定私有仓库的url.

b43a7c89dfa67d28876f2235f5e6816d.png重启docker服务:

基于 CentOS 7 搭建kubernetes集群_第30张图片

上传镜像到私有仓库并查看:

基于 CentOS 7 搭建kubernetes集群_第31张图片测试,下载刚才上传的镜像:

基于 CentOS 7 搭建kubernetes集群_第32张图片基于 CentOS 7 搭建kubernetes集群_第33张图片部署web应用

1为了部署pod的时候,下载镜像速度快点,把node节点主机配置文件中的pod镜像下载地址修改为本地私有仓库地址:

#vim  /etc/kubernetes/kubelet

基于 CentOS 7 搭建kubernetes集群_第34张图片#systemctl  restart  kubelet.service

2创建apache-rc.yaml文件,根据文件内容创建rcpod

基于 CentOS 7 搭建kubernetes集群_第35张图片

注意:必须按照此格式编写否则会报错

#kubectl  create  -f apache-rc.yaml

error: error validating "apache-rc.yaml": error validating data: found invalid field spec for v1.ReplicationControllerSpec; if you choose to ignore these errors, turn validation off with --validate=false

8922902afa67688ccce834f574d00643.png

查看pods状态:

80f19fdbe81b01aec08306d69d9afd9d.png

查看pods详细状态:

基于 CentOS 7 搭建kubernetes集群_第36张图片附:删除pod

kubectl delete pod podName

由于设置了两份副本,所以删除pod的时候,k8s会迅速起另外一个一模一样的pod以保持副本数量为2不变。

要彻底删除pod,只能删除创建它的replication controller

查看replication controller

kubectl get rc

删除replication controller

kubectl delete rc rcName

删除rc之后,其创建的pod会一并删除

 

3部署节点内部可访问的apache service

ServertypeClusterIPNodePort之分,缺省是ClusterIp,这种类型的service只能在集群内部访问

创建配置文件:

#vim  apache-service-clusterip.yaml

基于 CentOS 7 搭建kubernetes集群_第37张图片

创建service:

b2555de5ee8b225ff258c6d9ada2a1eb.png

查看service状态

基于 CentOS 7 搭建kubernetes集群_第38张图片

验证apache服务:(在node节点执行)

基于 CentOS 7 搭建kubernetes集群_第39张图片

4部署外部可访问的apache service

创建nodeport类型的service . 这种类型的Service在集群外部是可以访问

#vim  apache-nodeport-service.yaml

基于 CentOS 7 搭建kubernetes集群_第40张图片

创建service:

716e73c2122df42822b97b9579994383.png

查看service:

基于 CentOS 7 搭建kubernetes集群_第41张图片验证service的可访问性

外部访问:

基于 CentOS 7 搭建kubernetes集群_第42张图片基于 CentOS 7 搭建kubernetes集群_第43张图片

内部访问:

基于 CentOS 7 搭建kubernetes集群_第44张图片到此为止kubernetes 集群搭建完毕!!!