K8SEASY：一键安装K8S高可用集群

简述

kubeadm 二进制部署 k8s集群，整个部署过程相对比较繁琐，但是通过安装有助于入门者初步了解k8s的组件、网络等信息，因此还是需要了解的。

而本文要推荐的是一款可快速部署多节点高可用K8S集群的软件：K8SEASY,同时内置了Dashboard、Prometheus、Grafana、node-exporter等组件，简单易用。

其他优点如下：

• 一键安装，安装一个系统只需要 3 分钟, 安装好以后完整的监控也一并装好，可以直接使用。（不止支持单master 还支持3master 高可用方案)
• 新版本发布，支持 1.19.x 新增nginx-ingress, helm 组件， 支持自动发现。
• 完全不需要配置，一键完成，包括集群也是一键生成。
• 不需要下载任何镜像，所有需要的模块组件都已经准备。
• 安装所有的组件是以系统服务方式安装，启动停止方便。
• 完美支持Centos7.0 和Ubuntu 16.04/18.04。

内核升级

1.离线升级内核

wget https://elrepo.org/linux/kernel/el7/x86_64/RPMS/kernel-lt-5.4.107-1.el7.elrepo.x86_64.rpm
wget https://elrepo.org/linux/kernel/el7/x86_64/RPMS/kernel-lt-devel-5.4.107-1.el7.elrepo.x86_64.rpm
yum localinstall -y kernel-lt-5.4.107-1.el7.elrepo.x86_64.rpm kernel-lt-devel-5.4.107-1.el7.elrepo.x86_64.rpm

2.设置grub内核版本

# vim /etc/default/grub
GRUB_TIMEOUT=5
GRUB_DISTRIBUTOR="$(sed 's, release .*$,,g' /etc/system-release)"
#由saved改为0
GRUB_DEFAULT=0
GRUB_DISABLE_SUBMENU=true
GRUB_TERMINAL_OUTPUT="console"
GRUB_CMDLINE_LINUX="crashkernel=auto rd.lvm.lv=centos/root rd.lvm.lv=centos/swap rhgb quiet"
GRUB_DISABLE_RECOVERY="true"

3.重新创建内核配置

grub2-mkconfig -o /boot/grub2/grub.cfg

4.重启并查看内核

# uname -a
Linux prod-166-203-252 5.4.107-1.el7.elrepo.x86_64 #1 SMP Sat Mar 20 09:47:18 EDT 2021 x86_64 x86_64 x86_64 GNU/Linux

集群部署

1.下载k8seasy组件

wget http://dl.k8seasy.com/installer 
wget http://dl.k8seasy.com/kubernetes-server-linux-amd64.tar.gz
wget http://dl.k8seasy.com/pack.2020.10.02.bin

其中：

• installer 是安装工具。
• kubernetes-server-linux-amd64.tar.gz 可官网下载，须是amd64平台。
• pack.2020.10.02.bin 是镜像文件。

2.创建密钥

./installer --genkey -hostlist=10.166.203.252

此时会在installer同级目录下生成密钥k8skey.pem，此密钥将用于后续新节点的加入。

3.创建集群

#如果是多个master，可以使用如下命令
./installer   -kubernetestarfile kubernetes-server-linux-amd64.tar.gz -masterip 10.166.203.252,10.166.203.253,10.166.203.254

# 单master
./installer   -kubernetestarfile kubernetes-server-linux-amd64.tar.gz -masterip 10.166.203.252
# 以下是单master部署过程打印信息
master:  10.166.203.252
IP: 10.166.203.252  Eth: ens192
1> Upgrade system.
2> Install etcd.
3> Install flanneld.
4> Install haproxy.
5> Update kubernets env.
6> Install K8S API Server.
7> Install K8S Controller Server.
8> Install K8S Scheduler Server.
9> Install Docker.
...............
10> Update Kubeadm env.
11> Install kubelet.
12> Install K8S Proxy.
13> Install coredns.
14> Install monitoring & dashboard.
15> Install Helm.
16> Install nginx-ingress.
17> Install localwebproxy.


请使用浏览器 访问 alertmanager  http://10.166.203.252:8080 
请使用浏览器 访问 grafana  http://10.166.203.252:8081   默认用户名 admin  默认密码 admin
请使用浏览器 访问 prometheus http://10.166.203.252:8082
请使用浏览器 访问 node_export http://10.166.203.252:9100
请使用浏览器 访问 dashboard http://10.166.203.252:10000

You can find more detail about alertmanager by visiting http://10.166.203.252:8080
You can find more detail about grafana by visiting http://10.166.203.252:8081   the default user: admin   pass: admin
You can find more detail about prometheus by visiting http://10.166.203.252:8082
You can find more detail about node_export by visiting http://10.166.203.252:9100
You can find more detail about dashboard by visiting http://10.166.203.252:10000
18> Install localwebproxy.
已经复制了一个配置文件 lens.kubeconfig 在当前目录，这个配置文件可以被 各种管理工具（如lens) 直接使用
请在 /etc/hosts 文件里加入 如下内容
10.166.203.252  s7400036261.lens.k8seasy.com
其中10.166.203.252 为本机的IP, 也可以为任何管理工具直接能访问的本机IP （如本机有多个ip 可以任选一个

K8Seasy is a tools that can help you quickly deploy Kubernetes clusters to local and cloud environmental.
K8S version: 1.11.3-1.18
installer version: 1.0.0.004
Packfile version: 2020.10.02.001
Packfile: pack.2020.10.02.bin
Packfile md5sum: 06222ec7e9dfd17efe318e94540c019d
Build Time: 
Git Hash: 
Website:  http://www.k8seasy.com  https://github.com/xiaojiaqi/k8seasy_release_page
Feature Request/Bug Report Form: https://github.com/xiaojiaqi/k8seasy_release_page/issues
Email:  [email protected]
License: Personal non-commercial use. License cannot be used either directly or indirectly for business purposes.

正如部署信息提示，可通过以下地址登录相关组件：

# 访问 alertmanager  
http://10.166.203.252:8080 
# 访问 grafana，默认用户名 admin  默认密码 admin
http://10.166.203.252:8081   
# 访问 prometheus 
http://10.166.203.252:8082
# 访问 node_export 
http://10.166.203.252:9100
# 访问 dashboard 
http://10.166.203.252:10000

4.查看资源

# 查看api-server，由于是单master，因此只有一个。
# service kube-apiserver status
Redirecting to /bin/systemctl status kube-apiserver.service
● kube-apiserver.service - Kubernetes API Server
   Loaded: loaded (/etc/systemd/system/kube-apiserver.service; enabled; vendor preset: disabled)
   Active: active (running) since Fri 2021-03-26 18:43:55 CST; 42min ago
     Docs: https://github.com/GoogleCloudPlatform/kubernetes
 Main PID: 13094 (kube-apiserver)
    Tasks: 16
   Memory: 347.8M
   CGroup: /system.slice/kube-apiserver.service
           └─13094 /etc/k8s/k8sapi/api/kube-apiserver --advertise-address=10.166.203.252 --default-not-ready-toleration-seconds=360 --default-unreachable-toleration-seconds=360 --feature-gates=DynamicAuditi...
           


# kubectl get svc -A
NAMESPACE              NAME                        TYPE        CLUSTER-IP       EXTERNAL-IP   PORT(S)                        AGE
default                kubernetes                  ClusterIP   10.254.0.1       <none>        443/TCP                        29m
kube-system            kube-dns                    ClusterIP   10.254.0.2       <none>        53/UDP,53/TCP,9153/TCP         28m
kube-system            kubelet                     ClusterIP   None             <none>        10250/TCP,10255/TCP,4194/TCP   27m
kubernetes-dashboard   dashboard-metrics-scraper   ClusterIP   10.254.68.28     <none>        8000/TCP                       27m
kubernetes-dashboard   kubernetes-dashboard        NodePort    10.254.241.174   <none>        443:10001/TCP,80:10000/TCP     27m
monitoring             alertmanager-main           ClusterIP   10.254.215.113   <none>        9093/TCP                       28m
monitoring             alertmanager-operated       ClusterIP   None             <none>        9093/TCP,9094/TCP,9094/UDP     27m
monitoring             grafana                     ClusterIP   10.254.103.193   <none>        3000/TCP                       28m
monitoring             kube-state-metrics          ClusterIP   None             <none>        8443/TCP,9443/TCP              28m
monitoring             node-exporter               ClusterIP   None             <none>        9100/TCP                       28m
monitoring             prometheus-adapter          ClusterIP   10.254.23.219    <none>        443/TCP                        28m
monitoring             prometheus-k8s              ClusterIP   10.254.47.42     <none>        9090/TCP                       27m
monitoring             prometheus-operated         ClusterIP   None             <none>        9090/TCP                       27m
monitoring             prometheus-operator         ClusterIP   None             <none>        8443/TCP                       28m

从service中可以看到dashboard、alertmanager、grafana、node-exporter都已经内置。

5.加入新节点

#将密钥复制到新节点
cp ../k8skey.pem ./
#将机器加入集群
./installer   -kubernetestarfile kubernetes-server-linux-amd64.tar.gz -masterip 10.166.203.252

#如果是多个master集群，可以使用如下命令加入集群
./installer   -kubernetestarfile kubernetes-server-linux-amd64.tar.gz -masterip 10.166.203.252,10.166.203.253,10.166.203.254

注意：新节点也要提前准备installer、kubernetes-server-linux-amd64.tar.gz、pack.2020.10.02.bin等安装资源。

6.一键卸载

# ./installer -uninstall
1>  uninstall kube-apiserver
2>  uninstall kube-controller-manager
3>  uninstall kube-proxy
4>  uninstall kube-scheduler
5>  uninstall kubelet
6>  uninstall flanneld
7>  uninstall haproxy
8>  uninstall docker
9>  uninstall etcd
10>  uninstall localwebproxy
It's done.