centos7使用kubeadm安裝k8s叢集

實驗環境說明

實驗架構

lab1: master 11.11.11.111
lab2: node 11.11.11.112
lab3: node 11.11.11.113
複制代碼

實驗使用的 `Vagrantfile`

# -*- mode: ruby -*- # vi: set ft=ruby :

ENV["LC_ALL"] = "en_US.UTF-8"

Vagrant.configure("2") do |config|
 (1..3).each do |i|
 config.vm.define "lab#{i}" do |node|
 node.vm.box = "centos-7.4-docker-17"
 node.ssh.insert_key = false
 node.vm.hostname = "lab#{i}"
 node.vm.network "private_network", ip: "11.11.11.11#{i}"
 node.vm.provision "shell",
 inline: "echo hello from node #{i}"
 node.vm.provider "virtualbox" do |v|
 v.cpus = 2
 v.customize ["modifyvm", :id, "--name", "lab#{i}", "--memory", "2048"]
 end end end end 複制代碼

安裝要求

需要在每個節點上先安裝好kubeadm

有每個節點配置好hosts解析

cat >>/etc/hosts<<EOF
11.11.11.111 lab1
11.11.11.112 lab2
11.11.11.113 lab3
EOF
複制代碼

安裝配置master節點

說明

由于kubeadm預設會去拉取gcr.io上的鏡像來啟動master相關的元件，由于在國内無法通路gcr.io是以會導緻無法成功啟動。有如下幾種解決辦法：

在能翻牆的機器上拉取鏡像，再打包導入到master機器上（docker save/load）
直接拉國内别人的鏡像，然後打tag為gcr.io的鏡像
啟動配置叢集的時候指定鏡像相關配置，使用阿裡鏡像（本次實驗采用）

初始化

cat >kubeadm-master.config<<EOF
apiVersion: kubeadm.k8s.io/v1alpha1
kind: MasterConfiguration
kubernetesVersion: v1.10.3
imageRepository: registry.cn-hangzhou.aliyuncs.com/google_containers
etcd:
 image: registry.cn-hangzhou.aliyuncs.com/google_containers/etcd-amd64:3.1.12
api:
 advertiseAddress: 11.11.11.111

controllerManagerExtraArgs:
 node-monitor-grace-period: 10s
 pod-eviction-timeout: 10s

networking:
 podSubnet: 10.244.0.0/16
EOF

# 配置kubelet使用國内可用pause鏡像 # 修改/etc/systemd/system/kubelet.service.d/10-kubeadm.conf # 添加如下配置
sed -i '/ExecStart=$/i Environment="KUBELET_EXTRA_ARGS=--pod-infra-container-image=registry.cn-shanghai.aliyuncs.com/gcr-k8s/pause-amd64:3.0"' /etc/systemd/system/kubelet.service.d/10-kubeadm.conf

# 重新載入配置
systemctl daemon-reload

# 設定kubelet開機啟動
systemctl enable kubelet

# 使用配置檔案方式
kubeadm init --config kubeadm-master.config
複制代碼

沒有經過測試的另一種初始化方法

# 使用指令行方式
KUBE_REPO_PREFIX='registry.cn-hangzhou.aliyuncs.com/google_containers' kubeadm init \
--kubernetes-version=v1.10.3 \
--pod-network-cidr=10.244.0.0/16 \
--apiserver-advertise-address=11.11.11.111
複制代碼

配置kubectl使用

rm -rf $HOME/.kube
mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config

# 檢視node節點
kubectl get nodes

# 隻有網絡插件也安裝配置完成之後，才能會顯示為ready狀态 # 設定master允許部署應用pod，參與工作負載，現在可以部署其他系統元件 # 如 dashboard, heapster, efk等
kubectl taint nodes --all node-role.kubernetes.io/master-

複制代碼

配置使用網絡插件

配置使用

flannel

# 下載下傳配置
mkdir flannel && cd flannel
wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

# 修改配置 # 此處的ip配置要與上面kubeadm的pod-network一緻
 net-conf.json: |
 {
 "Network": "10.244.0.0/16",
 "Backend": {
 "Type": "vxlan"
 }
 }

# 修改鏡像
image: registry.cn-shanghai.aliyuncs.com/gcr-k8s/flannel:v0.10.0-amd64

# 如果Node有多個網卡的話，參考flannel issues 39701， # https://github.com/kubernetes/kubernetes/issues/39701 # 目前需要在kube-flannel.yml中使用--iface參數指定叢集主機内網網卡的名稱， # 否則可能會出現dns無法解析。容器無法通信的情況，需要将kube-flannel.yml下載下傳到本地， # flanneld啟動參數加上--iface=<iface-name>
 containers:
 - name: kube-flannel
 image: registry.cn-shanghai.aliyuncs.com/gcr-k8s/flannel:v0.10.0-amd64
 command:
 - /opt/bin/flanneld
 args:
 - --ip-masq
 - --kube-subnet-mgr
 - --iface=eth1

# 啟動
kubectl apply -f kube-flannel.yml

# 檢視
kubectl get pods --namespace kube-system
kubectl get svc --namespace kube-system
複制代碼

安裝配置node節點

配置

# 配置kubelet使用國内可用pause鏡像 # 修改/etc/systemd/system/kubelet.service.d/10-kubeadm.conf # 添加如下配置
sed -i '/ExecStart=$/i Environment="KUBELET_EXTRA_ARGS=--pod-infra-container-image=registry.cn-shanghai.aliyuncs.com/gcr-k8s/pause-amd64:3.0"' /etc/systemd/system/kubelet.service.d/10-kubeadm.conf

# 重新載入配置
systemctl daemon-reload

# 設定kubelet開機啟動
systemctl enable kubelet
複制代碼

加入叢集

# 此指令為啟動master成功後傳回的結果
kubeadm join --token 55a6f8.1091208463fe1252 11.11.11.111:6443 --discovery-token-ca-cert-hash sha256:790c6b38b087b167c1f52c04526d8729115192a305eb91c01c0fd8dc7facbbcd
複制代碼

測試容器間的通信和DNS

配置好calico網絡之後，kubeadm會自動部署kube-dns

啟動

kubectl run nginx --replicas=2 --image=nginx:alpine --port=80
kubectl expose deployment nginx --type=NodePort --name=example-service-nodeport
kubectl expose deployment nginx --name=example-service
複制代碼

檢視狀态

kubectl get deploy
kubectl get pods
kubectl get svc
kubectl describe svc example-service
複制代碼

DNS解析

kubectl run curl --image=radial/busyboxplus:curl -i --tty
nslookup kubernetes
nslookup example-service
curl example-service
複制代碼

通路測試

# 10.96.59.56 為檢視svc時擷取到的clusterip
curl "10.96.59.56:80" # 32223 為檢視svc時擷取到的 nodeport
http://11.11.11.112:32223/
http://11.11.11.113:32223/
複制代碼

清理删除

kubectl delete svc example-service example-service-nodeport
kubectl delete deploy nginx curl
複制代碼

挖坑記

1. 如果删除kube-dns後怎麼修複

# 第一種方法
kubeadm upgrade apply v1.10.3 --config kubeadm-master.config

# 第二種方法
kubeadm config upload from-file --config kubeadm-master.config
kubeadm upgrade apply v1.10.3
複制代碼

2. 忘記初始master節點時的node節點加入叢集指令怎麼辦

# 簡單方法
kubeadm token create --print-join-command

# 第二種方法
token=$(kubeadm token generate)
kubeadm token create $token --print-join-command --ttl=0

本文轉自掘金-

centos7使用kubeadm安裝k8s叢集

centos7使用kubeadm安裝k8s叢集

實驗環境說明

實驗架構

實驗使用的 `Vagrantfile`

安裝要求

安裝配置master節點

說明

初始化

配置kubectl使用

配置使用網絡插件

安裝配置node節點

配置

加入叢集

測試容器間的通信和DNS

啟動

檢視狀态

DNS解析

通路測試

清理删除

挖坑記

繼續閱讀

Apache (You don't have permission to access / on this server.）

debian9更新4.9.0核心到4.19.2核心過程

centOS7 配置 vsftpd 虛拟使用者及權限Vsftpd配置虛拟使用者及權限

linux-svn解除安裝與安裝

vsftp虛拟多使用者多權限一鍵部署腳本

Ubuntu14.04 LTS下安裝mongodb

httpd服務的部署、啟動、配置和簡單優化一、部署二、啟動三、配置檔案

配置網頁内容通路

手動安裝Intel network I217-LM網卡的Linux驅動

禁止ubuntu系統彈出報錯界面

Ubuntu Linux下Apache的配置檔案

samba伺服器的功能

【Linux】UDP廣播封包接收速率問題

Linux裝置模型（中）之上層容器

PowerPC平台 Linux移植三

centos7使用kubeadm安裝k8s叢集

實驗環境說明

實驗架構

實驗使 用的 Vagrantfile

安裝要求

安裝配置master節點

說明

初始化

配置kubectl使用

配置使用網絡插件

安裝配置node節點

配置

加入叢集

測試容器間的通信和DNS

啟動

檢視狀态

DNS解析

通路測試

清理删除

挖坑記

繼續閱讀

實驗使用的 `Vagrantfile`