在 Mac 上安裝 K8s 集群
1. 安裝 VirtualBox 和 Ubuntu
2. 安裝 Docker
在 Ubuntu 中安裝 docker
# 安裝 docker
sudo apt install docker.io
# 查看 docker 版本
sudo docker -v
修改配置
sudo vim /etc/docker/daemon.json
{
"exec-opts": ["native.cgroupdriver=systemd"]
}
sudo systemctl daemon-reload
sudo systemctl restart docker
3. 安裝 K8s
3.1 配置 iptables
cat <<EOF | sudo tee /etc/modules-load.d/k8s.conf
br_netfilter
EOF
cat <<EOF | sudo tee /etc/sysctl.d/k8s.conf
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
EOF
# 讓配置生效
sudo sysctl --system
3.2 安裝證書相關(guān)軟件
sudo apt-get update
sudo apt-get install -y apt-transport-https ca-certificates curl
3.3 安裝 kubeadm
# 配置源
sudo curl -s https://mirrors.aliyun.com/kubernetes/apt/doc/apt-key.gpg | sudo apt-key add -
sudo tee /etc/apt/sources.list.d/kubernetes.list <<-'EOF'
deb https://mirrors.aliyun.com/kubernetes/apt kubernetes-xenial main
EOF
# 安裝k8s組件
sudo apt-get update
sudo apt-get install -y kubelet kubeadm kubectl
# 將軟件包標(biāo)記為保留，以防止軟件包被自動安裝、升級或刪除
sudo apt-mark hold kubelet kubeadm kubectl
3.4 初始化
sudo vim /etc/hosts
# 在文件最后增加一行
192.168.56.100 dreamk8s.com
# 保存文件
sudo kubeadm init \
--image-repository registry.aliyuncs.com/google_containers \
--kubernetes-version v1.22.2 \
--pod-network-cidr=192.168.0.0/16 \
--apiserver-advertise-address=192.168.56.100
安裝完成
image.png
可以查看啟動的容器
image.png
3.5 配置 kubeconfig
mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config
3.6 允許pod調(diào)度到master節(jié)點(diǎn)
查看節(jié)點(diǎn)
image.png
默認(rèn)情況下，出于安全原因，你的集群不會在控制平面節(jié)點(diǎn)上調(diào)度 Pod。 如果你希望能夠在控制平面節(jié)點(diǎn)上調(diào)度 Pod， 例如用于開發(fā)的單機(jī) Kubernetes 集群，請運(yùn)行：
kubectl taint nodes --all node-role.kubernetes.io/master-
image.png
3.7 安裝 calico cni 插件
Quickstart for Calico on Kubernetes
wget https://docs.projectcalico.org/manifests/tigera-operator.yaml
wget https://docs.projectcalico.org/manifests/custom-resources.yaml
# 修改 custom-resources.yaml
# 新增，其中 enp0s8 是 192.168.56.100 的網(wǎng)卡
nodeAddressAutodetectionV4:
interface: enp0s8
image.png
kubectl create -f tigera-operator.yaml
kubectl create -f custom-resources.yaml
image.png
3.8 查看運(yùn)行情況
image.png
4. 加入新節(jié)點(diǎn)
- 安裝 Ubuntu k8s2
- 分配 IP：192.168.56.101
- 安裝 Docker
- 安裝 kubeadm
- 將節(jié)點(diǎn)加入到k8s集群中
sudo kubeadm join 192.168.56.100:6443 --token q7sjag.7wogatqvoo4sqa3g --discovery-token-ca-cert-hash sha256:5fb832b6a32003574ab5f76e31c5a1cfd49bcbd0b37a9a6140d088b7f4fd8cf5
如果提示錯誤，則需要重新生成 token
image.png
4.1 重新生成token
- 在 master節(jié)點(diǎn)中（k8s1） 中
查看是否存在 jws-kubeconfig-xxxxx ，如果不存在則證明 token 過期
kubectl get configmap cluster-info --namespace=kube-public -o yaml
或者通過 token list 查詢
kubeadm token list
- 生成 token
kubeadm token create --ttl 0
image.png
查看 token 列表
image.png
- 生成證書摘要
openssl x509 -pubkey -in /etc/kubernetes/pki/ca.crt | openssl rsa -pubin -outform der 2>/dev/null | openssl dgst -sha256 -hex | sed 's/^.* //'
image.png
- 在 k8s2 中使用新的 token 加入 k8s 集群
sudo kubeadm join 192.168.56.100:6443 --token 8n2j4e.vjz54voa5dlagnbq --discovery-token-ca-cert-hash sha256:5fb832b6a32003574ab5f76e31c5a1cfd49bcbd0b37a9a6140d088b7f4fd8cf5
image.png
- 在 master 節(jié)點(diǎn)上查看節(jié)點(diǎn)
kubectl get nodes
image.png
5. 解決加入新節(jié)點(diǎn)后 calico-node 不正常的問題
5.1 查看 calico-node 的狀態(tài)
# 查看 calico-node pod 的狀態(tài)
kubectl get pod -o wide -n calico-system
加入新的節(jié)點(diǎn)后發(fā)現(xiàn)兩個 calico-node 的 pod 運(yùn)行異常，READY那一列顯示 0/1 ，但是在worker節(jié)點(diǎn)加入之前是好的
image.png
5.2 查看節(jié)點(diǎn)信息
kubectl get node -o wide
image.png
發(fā)現(xiàn)兩個節(jié)點(diǎn)的 INTERNAL-IP 是一樣的
5.3 查看兩個節(jié)點(diǎn)的 ip
# 在兩個節(jié)點(diǎn)上分別運(yùn)行
ifconfig
master 節(jié)點(diǎn)上
image.png
worker 節(jié)點(diǎn)上
image.png
master 和 worker 節(jié)點(diǎn)上的 enp0s3 的 ip 都是 10.0.2.15，但是我們需要用 enp0s8 的 ip 作為節(jié)點(diǎn)的各自 ip
5.4 修改節(jié)點(diǎn)的 INTERNAL IP
# 在兩個節(jié)點(diǎn)上分別編輯配置文件
sudo vim /etc/systemd/system/kubelet.service.d/10-kubeadm.conf
# 新增加一行 Environment="KUBELET_EXTRA_ARGS=--node-ip=192.168.56.100"
image.png
其中的 ip 對應(yīng)的是 enp0s8 網(wǎng)卡的ip，第二個節(jié)點(diǎn)上的ip是 192.168.56.101
重啟服務(wù)使配置生效
sudo systemctl daemon-reload
sudo systemctl restart kubelet
再次查看節(jié)點(diǎn)信息
image.png
查看 calico-node 的狀態(tài)
image.png
已經(jīng)正常
加入新的節(jié)點(diǎn)時也是一樣的操作
現(xiàn)在就有一個可以使用的 k8s 集群了
