使用 kubeadm 创建一个 kubernetes 集群

2018-02-04 561

简介

kubeadm是一个kubernetes官方提供的快速安装和初始化拥有最佳实践（best practice）的kubernetes集群的工具，虽然目前还处于 beta 和 alpha 状态，还不能用在生产环境，但是我们可以通过学习这种部署方法来体会一些官方推荐的kubernetes最佳实践的设计和思想。

kubeadm的目标是提供一个最小可用的可以通过Kubernetes一致性测试的集群，所以并不会安装任何除此之外的非必须的addon。

kubeadm默认情况下并不会安装一个网络解决方案，所以用kubeadm安装完之后需要自己来安装一个网络的插件。

使用

系统环境

kubeadm支持多种系统，这里简单介绍一下需要的系统要求：

Ubuntu16.04+ / Debian 9 / CentOS 7 / RHEL 7 / Fedora 25/26(best-effort) / HypriotOS v1.0.1+ / Other
2GB或者以上的RAM（否则将没有足够空间留给app）
2核以上CPU
集群的机器之间必须能通过网络互相通信
SWAP必须被关闭，否则kubelet会出错！

具体的详细信息可以在官方网站上看到。

本篇内容基于aws的ap-northeast-1的ec2，CentOS 7 的操作系统（ami-4dd5522b），实例类型t2.medium 2核4GB，3台机器，1 master，2 nodes，kubernetes 1.9 版本。为了方便起见，在安全组里面打开了所有的端口和IP访问。

机器配置：

[centos@ip-172-31-24-49 ~]$ uname -a
Linux ip-172-31-24-49.ap-northeast-1.compute.internal 3.10.0-693.5.2.el7.x86_64 #1 SMP Fri Oct 20 20:32:50 UTC 2017 x86_64 x86_64 x86_64 GNU/Linux

首先，我们关闭selinux：

$ sudo vim /etc/sysconfig/selinux

把SELINUX改成disabled，然后保存退出。

在我用的ami中，swap是默认关闭的，所以不需要我手动关闭，大家需要确认自己的环境中swap是否有关闭掉，否则会在之后的环节中出问题。

为了方便我们安装，我们将sshd设置为keepalive：

$ sudo -i
$ echo "ClientAliveInterval 10" >> /etc/ssh/sshd_config
$ echo "TCPKeepAlive yes" >> /etc/ssh/sshd_config
$ systemctl restart sshd.service

接下来我们重启一下机器：

$ sudo sync
$ sudo reboot

至此，准备阶段结束。

安装kubeadm

首先，我们需要在所有机器上都安装docker, kubeadm, kubelet和kubectl。

切记：kubeadm不会自动去安装和管理 kubelet和kubectl，所以需要自己去确保安装的版本和你想要安装的kubernetes版本相同。

安装docker：

$ sudo yum install -y docker
$ sudo systemctl enable docker && sudo systemctl start docker

在RHEL/CentOS 7 系统上可能会路由失败，我们需要设置一下：

$ sudo -i
$ cat <<EOF >  /etc/sysctl.d/k8s.conf
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
EOF
$ sudo sysctl --system

接下来我们需要安装kubeadm, kubelet和kubectl了，我们需要先加一个repo：

$ cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=https://packages.cloud.google.com/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=1
repo_gpgcheck=1
gpgkey=https://packages.cloud.google.com/yum/doc/yum-key.gpg https://packages.cloud.google.com/yum/doc/rpm-package-key.gpg
EOF

然后安装：

$ sudo yum install -y kubelet kubeadm kubectl
$ sudo systemctl enable kubelet && sudo systemctl start kubelet

至此，在所有机器上安装所需的软件已经结束。

使用kubeadm初始化master

安装完所有的依赖之后，我们就可以用kubeadm初始化master了。

最简单的初始化方法是：

$ kubeadm init

除此之外，kubeadm还支持多种方法来配置，具体可以查看一下官方文档。

我们在初始化的时候指定一下kubernetes版本，并设置一下pod-network-cidr（后面的flannel会用到）：

$ sudo -i
$ kubeadm init --kubernetes-version=v1.9.0 --pod-network-cidr=10.244.0.0/16

在这个过程中kubeadm执行了一系列的操作，包括一些pre-check，生成ca证书，安装etcd和其它控制组件等。

界面差不多如下：

最下面的这行kubeadm join什么的，就是用来让别的node加入集群的，可以看出非常方便。我们要保存好这一行东西，这是我们之后让node加入集群的凭据，一会儿会用到。

这个时候，我们还不能通过kubectl来控制集群，要让kubectl可用，我们需要做：

# 对于非root用户
$ mkdir -p $HOME/.kube
$ sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
$ sudo chown $(id -u):$(id -g) $HOME/.kube/config

# 对于root用户
$ export KUBECONFIG=/etc/kubernetes/admin.conf
# 也可以直接放到~/.bash_profile
$ echo "export KUBECONFIG=/etc/kubernetes/admin.conf" >> ~/.bash_profile

接下来要注意，我们必须自己来安装一个network addon。

network addon必须在任何app部署之前安装好。同样的，kube-dns也会在network addon安装好之后才启动。kubeadm只支持CNI-based networks（不支持kubenet）。

比较常见的network addon有：Calico, Canal, Flannel, Kube-router, Romana, Weave Net等。这里我们使用Flannel。

$ kubectl apply -f https://raw.githubusercontent.com/coreos/flannel/v0.9.1/Documentation/kube-flannel.yml

安装完network之后，你可以通过kubectl get pods --all-namespaces来查看kube-dns是否在running来判断network是否安装成功。

默认情况下，为了保证master的安全，master是不会被调度到app的。你可以取消这个限制通过输入：

$ kubectl taint nodes --all node-role.kubernetes.io/master-

加入nodes

终于部署完了我们的master！

现在我们开始加入一些node到我们的集群里面吧！

ssh到我们的node节点上，执行刚才下面给出的那个 kubeadm join的命令（每个人不同）：

$ sudo -i
$ kubeadm join --token 72a8a4.2ed9076cd668b8b7 172.31.31.60:6443 --discovery-token-ca-cert-hash sha256:f0894e55d475f882dd40d52c6d01f758017ec5729be632294049f687330f60d2

输出差不多如下图：

这时候，我们去master上输入kubectl get nodes查看一下：

[root@i-071abd86ed304dc84 ~]# kubectl get nodes
NAME                  STATUS    ROLES     AGE       VERSION
i-071abd86ed304dc84   Ready     master    12m       v1.9.0
i-0c559ad3c0b16fd36   Ready     <none>    1m        v1.9.0
i-0f3f7462b0a004b5e   Ready     <none>    47s       v1.9.0

成功！

总结

我们可以看到，用kubeadm部署可以让我们比手动部署方便得多，虽然比不上kops这样的一键部署生产Kubernetes集群的工具，但是kubeadm最初的设计也并非是傻瓜式使用。

kubeadm给了用户很多的灵活性，让用户可以完全自定义地去配置自己的集群。

不过目前（截止博客发布为止），kubeadm还只是在测试，官方还不建议在生产环境中使用，不过预计会在2018年春季可以投入生产使用。

最后，我们总结一下kubeadm最核心的几个概念：

官方认为的最佳实践（best-practice）
合理的安全（reasonably secure）
可扩展（extensible）
最小可用（minimum viable）

微信关注我们

原文链接：https://yq.aliyun.com/articles/431059

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

云场景实践研究第19期：小博无线

更多云场景实践研究案例，点击这里：【云场景实践研究合集】联合不是简单的加法，而是无限的生态，谁会是下一个独角兽作为国内领先的商用无线技术方案提供商，小博无线2013年10月上云以来，已在云端飞行了三年整，从单台主机进化为今天数十台主机, 上百个负载均衡，数百个容器的略具规模的系统。本文主要介绍小博无线三年来使用阿里云计算平台的实践经验。阿里云的云数据库采用隐式主备，备用节点对用户不可见。新建一个RDS或Redis实例时阿里云会自动创建好主节点和备用节点，并监控主节点状态，当主节点故障时无需用户干预，运维机器人会自动进行主备切换，保证高可用。采用的阿里云产品阿里云服务器ECS 阿里云负载均衡SLB 阿里云对象存储OSS 阿里云云数据库RDS 阿里云云数据库Redis 关于小博无线小博无线是国内领先的商用无线技术方案提供商，获得了美团点

2018-02-03

627

Service 是kubernetes中一个很重要的，也是很有用的概念，我们可以通过service来将pod进行分组，并提供外网的访问endpoint。在这个过程中还有比如kube-proxy提供了对service的访问。 Connecting Users to Pods 如果我们要让一个用户能够使用应用程序，用户需要能访问到pod，但是pod是一个短暂存在的东西，很可能突然挂了然后重启，这时候ip地址就会改变，所以pod的ip地址并不是静态的。比如说：用户在这张图里面通过ip地址访问到了4个pod，突然其中有一个pod挂了，然后controller又起了一个pod：这时候用户就访问不到了，因为用户不知道新的ip地址是多少。 kubernetes为了解决这个问题，提供了一个高层的抽象，叫做Service。Service从逻辑上把pod进行分组，并且设置访问的策略。一般我们是通过label和selector来达到分组的目的的。 Services 比如，我们用app作为key，db和frontend作为value来区分pod：通过selector（app=frontend和app=d...

2018-02-04

655

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。