# 安装
[root@master ~]$ yum install etcd -y

# 查看文件
[root@master ~]$ rpm -ql etcd
/etc/etcd
/etc/etcd/etcd.conf
/usr/bin/etcd
/usr/bin/etcdctl
/usr/lib/systemd/system/etcd.service

# 修改配置文件，主要是修改etcd的客户端监听地址，以便之后安装的网络插件flannel组件可以访问
[root@master etcd]$ vim etcd.conf

ETCD_LISTEN_CLIENT_URLS="http://0.0.0.0:2379"


[root@master ~]$ systemctl enable etcd
[root@master ~]$ systemctl start etcd

etcdctl --help		# etcdctl是etcd数据库的命令行工具

# 注意：etcd是一个key/value型的数据库，里面的key被抽象为两种形式：文件和目录

	 backup          备份一个etcd数据库
     cluster-health  检查数据库的健康状况
     mk              创建一个新的键值对：etcdctl mk <key> <value>
     mkdir           创建一个新的目录：etcdctl mkdir <key>
     rm              移除一个键值对或目录： etcdctl rm <key>
     rmdir           移除一个空目录或者键值对：etcdctl rmdir <key>
     get             根据键名检索键值：etcdctl get <key>
     ls              检索目录
     set             给键名设置一个键值：etcdctl set <key> <value>
     update          更新一个已存在的键名的键值：etcdctl update <key> <value>

# 安装kubernetes-master，会附带kubernetes-client(即kube-ctl)
[root@master kubernetes]$ yum install -y kubernetes-master

# 查看文件，发现包含了apiserver、controller-manager、scheduler三部分
[root@master kubernetes]$ rpm -ql kubernetes-master 
/etc/kubernetes
/etc/kubernetes/apiserver
/etc/kubernetes/config
/etc/kubernetes/controller-manager
/etc/kubernetes/scheduler
/run/kubernetes
/usr/bin/hyperkube
/usr/bin/kube-apiserver
/usr/bin/kube-controller-manager
/usr/bin/kube-scheduler
/usr/lib/systemd/system/kube-apiserver.service
/usr/lib/systemd/system/kube-controller-manager.service
/usr/lib/systemd/system/kube-scheduler.service
/usr/lib/tmpfiles.d/kubernetes.conf

# 编辑apisever的配置文件，主要修改以下内容
[root@master kubernetes]$ vim apiserver 

# apiserver监听的地址
KUBE_API_ADDRESS="--insecure-bind-address=0.0.0.0"
# 本地apiserver的监听端口，默认值无需改动
# KUBE_API_PORT="--port=8080"
# etcd集群的地址
KUBE_ETCD_SERVERS="--etcd-servers=http://127.0.0.1:2379"
# 集群服务资源的地址范围
KUBE_SERVICE_ADDRESSES="--service-cluster-ip-range=10.254.0.0/16"


# 编辑master的配置文件，主要修改以下内容
[root@master kubernetes]$ vim config 

# 将错误使出追加到系统日志
KUBE_LOGTOSTDERR="--logtostderr=true"
# 日志级别，0代表debug级别
KUBE_LOG_LEVEL="--v=0"
# 是否允许集群容器以特权模式运行
KUBE_ALLOW_PRIV="--allow-privileged=false"
# 本地的master组件怎么发现apiserver，此处是apisever的地址
KUBE_MASTER="--master=http://127.0.0.1:8080"

# 启动
[root@master kubernetes]$ systemctl enable kube-apiserver kube-controller-manager kube-scheduler
[root@master kubernetes]$ systemctl start kube-apiserver kube-controller-manager kube-scheduler

# 查看健康状态，cs的意思是componentstatuses，组件状态，有返回说明apisever组件的状态也是健康的
[root@master kubernetes]$ kubectl get cs
NAME                 STATUS    MESSAGE             ERROR
etcd-0               Healthy   {"health":"true"}   
scheduler            Healthy   ok                  
controller-manager   Healthy   ok  

# 安装kubernetes-node，会附带kubernetes-client(即kube-ctl)
[root@node1 ~]$ yum install kubernetes-node -y

# 查看软件包，分为kubenet、proxy两部分
[root@node1 ~]$ rpm -ql kubernetes-node 
/etc/kubernetes
/etc/kubernetes/config
/etc/kubernetes/kubelet
/etc/kubernetes/proxy
/etc/systemd/system.conf.d/kubernetes-accounting.conf
/run/kubernetes
/usr/bin/hyperkube
/usr/bin/kube-proxy
/usr/bin/kubelet
/usr/lib/systemd/system/kube-proxy.service
/usr/lib/systemd/system/kubelet.service
/usr/lib/tmpfiles.d/kubernetes.conf

# 编辑node的配置文件，主要修改apiserver的地址
[root@node1 kubernetes]$ vim config 

# apiserver的地址
KUBE_MASTER="--master=http://192.168.110.160:8080"

# 编辑kubelet的配置文件
[root@node1 kubernetes]$ vim kubelet 

# kubelet的地址，此处是本地
KUBELET_ADDRESS="--address=127.0.0.1"
# kubelet的端口，默认无需修改
# KUBELET_PORT="--port=10250"
# 使用IP地址覆盖主机名，也可以留空，使用真实主机名
KUBELET_HOSTNAME="--hostname-override=192.168.110.161"
# apiserver的地址
KUBELET_API_SERVER="--api-servers=http://192.168.110.160:8080"
# pod infrastructure container
KUBELET_POD_INFRA_CONTAINER="--pod-infra-container-image=registry.access.redhat.com/rhel7/pod-infrastructure:latest"

# 启动
[root@node1 kubernetes]$ systemctl enable kubelet kube-proxy
[root@node1 kubernetes]$ systemctl start kubelet kube-proxy

# master节点可以查看node节点信息
[root@master kubernetes]$ kubectl get node
NAME              STATUS    AGE
192.168.110.161   Ready     14m
192.168.110.162   Ready     2m
192.168.110.163   Ready     1m
192.168.110.164   Ready     49s

# 安装
[root@node1 kubernetes]$ yum install -y flannel

# 查看文件
[root@node1 kubernetes]$ rpm -ql flannel
/etc/sysconfig/flanneld
/run/flannel
/usr/bin/flanneld
/usr/bin/flanneld-start
/usr/lib/systemd/system/docker.service.d/flannel.conf
/usr/lib/systemd/system/flanneld.service
/usr/lib/tmpfiles.d/flannel.conf

# 修改配置文件，主要是两行内容
[root@node1 sysconfig]$ vim flanneld 

# etcd 数据库的地址
FLANNEL_ETCD_ENDPOINTS="http://192.168.110.160:2379"
# etcd数据库中要存储网络相关的配置，所以要创建键值对，此处是指定键值对的键名的前缀
FLANNEL_ETCD_PREFIX="/atomic.io/network"


# 在master节点创建etcd的键值对，配置网络
etcdctl mk /atomic.io/network/config '{"Network":"172.18.0.0/16","Backend":{"Type":"vxlan"}}'

# 启动，注意：工作节点需要重启docker才能更新网络配置
[root@master etcd]$ systemctl enable flanneld.service 
[root@master etcd]$ systemctl start flanneld.service 

# 1 修改宿主机的转发规则
iptables -P FORWARD ACCEPT
iptables-save > /etc/sysconfig/iptables


# 2 修改docker的启动脚本，在[Service]区域内增加一行，在启动前执行一条iptables命令，修改转发规则
vim /usr/lib/systemd/system/docker.service
ExecStartPost=/usr/sbin/iptables -P FORWARD ACCEPT
systemctl daemon-reload && systemctl restart docker