摘要:拷貝到目錄拷貝到其他配置首次啟動(dòng)時(shí)向發(fā)送請(qǐng)求,驗(yàn)證請(qǐng)求中的是否與它配置的一致,如果一致則自動(dòng)為生成證書(shū)和秘鑰。
8. MASTER節(jié)點(diǎn)配置 8.1 安裝組件緊接上一章
上傳kubernetes-server-linux-amd64.tar.gz
tar -xzvf kubernetes-server-linux-amd64.tar.gz cd kubernetes cp -r server/bin/{kube-apiserver,kube-controller-manager,kube-scheduler,kubectl,kube-proxy,kubelet} /usr/local/bin/
適用所有Master
8.2 創(chuàng)建kubectl與apiserver通信證書(shū)cd /opt/ssl #vi admin-csr.json { "CN": "admin", "hosts": [], "key": { "algo": "rsa", "size": 2048 }, "names": [ { "C": "CN", "ST": "ShangHai", "L": "ShangHai", "O": "system:masters", "OU": "System" } ] } # 生成 admin 證書(shū)和私鑰 cd /opt/ssl/ cfssl gencert -ca=/etc/kubernetes/ssl/ca.pem -ca-key=/etc/kubernetes/ssl/ca-key.pem -config=/etc/kubernetes/ssl/config.json -profile=kubernetes admin-csr.json | cfssljson -bare admin # 查看生成 [root@localhost ssl]# ls -ltr admin* -rw-r--r--. 1 root root 231 Jul 27 17:06 admin-csr.json -rw-r--r--. 1 root root 1407 Jul 27 17:07 admin.pem -rw-------. 1 root root 1679 Jul 27 17:07 admin-key.pem -rw-r--r--. 1 root root 1013 Jul 27 17:07 admin.csr #拷貝至證書(shū)目錄 cp admin*.pem /etc/kubernetes/ssl/8.3 配置kubectl的kubeconfig文件
配置 kubernetes 集群
kubectl config set-cluster kubernetes --certificate-authority=/etc/kubernetes/ssl/ca.pem --embed-certs=true --server=https://192.168.116.123:6443
配置 客戶端認(rèn)證
kubectl config set-credentials admin --client-certificate=/etc/kubernetes/ssl/admin.pem --embed-certs=true --client-key=/etc/kubernetes/ssl/admin-key.pem kubectl config set-context kubernetes --cluster=kubernetes --user=admin kubectl config use-context kubernetes
分發(fā)kubectl config文件
mkdir /root/.kube scp /root/.kube/config root@192.168.116.124:/root/.kube/8.4 生成kubernetes證書(shū)和私鑰。
cd /opt/ssl vi kubernetes-csr.json [root@k8s-master-1 ssl]# cat kubernetes-csr.json { "CN": "kubernetes", "hosts": [ "127.0.0.1", "192.168.116.123", "192.168.116.124", "10.254.0.1", "kubernetes", "kubernetes.default", "kubernetes.default.svc", "kubernetes.default.svc.cluster", "kubernetes.default.svc.cluster.local" ], "key": { "algo": "rsa", "size": 2048 }, "names": [ { "C": "CN", "ST": "ShangHai", "L": "ShangHai", "O": "k8s", "OU": "System" } ] }
這里 hosts 字段中 三個(gè) IP 分別為 127.0.0.1 本機(jī), 192.168.116.x為 Master 的IP, 10.254.0.1 為 kubernetes SVC 的 IP, 一般是 部署網(wǎng)絡(luò)的第一個(gè)IP , 如: 10.254.0.1 , 在啟動(dòng)完成后,我們使用 kubectl get svc , 就可以查看到。
cfssl gencert -ca=/etc/kubernetes/ssl/ca.pem -ca-key=/etc/kubernetes/ssl/ca-key.pem -config=/etc/kubernetes/ssl/config.json -profile=kubernetes kubernetes-csr.json | cfssljson -bare kubernetes
拷貝到目錄
cp -r kubernetes* /etc/kubernetes/ssl/
拷貝到其他Master
scp -r kubernetes* root@192.168.116.124:/etc/kubernetes/ssl/
8.5 配置kube-apiserverkubelet 首次啟動(dòng)時(shí)向 kube-apiserver 發(fā)送 TLS Bootstrapping 請(qǐng)求,kube-apiserver 驗(yàn)證 kubelet 請(qǐng)求中的 token 是否與它配置的 token 一致,如果一致則自動(dòng)為 kubelet生成證書(shū)和秘鑰。
生成token
head -c 16 /dev/urandom | od -An -t x | tr -d " " 結(jié)果:ed7b961401dc857ead33f9fb38ab62bc
創(chuàng)建token.csv文件
[root@k8s-master-1 ssl]# cat token.csv ed7b961401dc857ead33f9fb38ab62bc,kubelet-bootstrap,10001,"system:kubelet-bootstrap"
拷貝至目錄
cp token.csv /etc/kubernetes/8.6 創(chuàng)建kube-apiserver.service文件
開(kāi)啟RBAC
#vi /usr/lib/systemd/system/kube-apiserver.service [Unit] Description=Kubernetes API Server Documentation=https://github.com/GoogleCloudPlatform/kubernetes After=network.target [Service] User=root ExecStart=/usr/bin/kube-apiserver --admission-control=NamespaceLifecycle,LimitRanger,ServiceAccount,DefaultStorageClass,ResourceQuota --advertise-address=192.168.116.123 --allow-privileged=true --apiserver-count=3 --audit-log-maxage=30 --audit-log-maxbackup=3 --audit-log-maxsize=100 --audit-log-path=/var/lib/audit.log --authorization-mode=RBAC --bind-address=192.168.116.123 --client-ca-file=/etc/kubernetes/ssl/ca.pem --enable-swagger-ui=true --etcd-cafile=/etc/kubernetes/ssl/ca.pem --etcd-certfile=/etc/kubernetes/ssl/kubernetes.pem --etcd-keyfile=/etc/kubernetes/ssl/kubernetes-key.pem --etcd-servers=https://192.168.116.123:2379 --event-ttl=1h --kubelet-https=true --insecure-bind-address=192.168.116.123 --runtime-config=rbac.authorization.k8s.io/v1alpha1 --service-account-key-file=/etc/kubernetes/ssl/ca-key.pem --service-cluster-ip-range=10.254.0.0/16 --service-node-port-range=30000-32000 --tls-cert-file=/etc/kubernetes/ssl/kubernetes.pem --tls-private-key-file=/etc/kubernetes/ssl/kubernetes-key.pem --experimental-bootstrap-token-auth --token-auth-file=/etc/kubernetes/token.csv --v=2 Restart=on-failure RestartSec=5 Type=notify LimitNOFILE=65536 [Install] WantedBy=multi-user.target
這里面要注意的是 --service-node-port-range=30000-32000
這個(gè)地方是 映射外部端口時(shí) 的端口范圍,隨機(jī)映射也在這個(gè)范圍內(nèi)映射,指定映射端口必須也在這個(gè)范圍內(nèi)。
systemctl daemon-reload systemctl enable kube-apiserver systemctl start kube-apiserver systemctl status kube-apiserver8.7 配置kube-controller-manager
創(chuàng)建 kube-controller-manager.service 文件
# vi /usr/lib/systemd/system/kube-controller-manager.service [Unit] Description=Kubernetes Controller Manager Documentation=https://github.com/GoogleCloudPlatform/kubernetes [Service] ExecStart=/usr/bin/kube-controller-manager --address=127.0.0.1 --master=http://192.168.116.123:8080 --allocate-node-cidrs=true --service-cluster-ip-range=10.254.0.0/16 --cluster-cidr=10.254.0.0/16 --cluster-name=kubernetes --cluster-signing-cert-file=/etc/kubernetes/ssl/ca.pem --cluster-signing-key-file=/etc/kubernetes/ssl/ca-key.pem --service-account-private-key-file=/etc/kubernetes/ssl/ca-key.pem --root-ca-file=/etc/kubernetes/ssl/ca.pem --leader-elect=true --v=2 Restart=on-failure RestartSec=5 [Install] WantedBy=multi-user.target
systemctl daemon-reload systemctl enable kube-controller-manager systemctl start kube-controller-manager systemctl status kube-controller-manager8.9 配置kube-scheduler
創(chuàng)建 kube-scheduler.service 文件
vi /usr/lib/systemd/system/kube-scheduler.service [Unit] Description=Kubernetes Scheduler Documentation=https://github.com/GoogleCloudPlatform/kubernetes [Service] ExecStart=/usr/bin/kube-scheduler --address=127.0.0.1 --master=http://192.168.116.123:8080 --leader-elect=true --v=2 Restart=on-failure RestartSec=5 [Install] WantedBy=multi-user.target
啟動(dòng)kube-schedular
systemctl daemon-reload systemctl enable kube-scheduler systemctl start kube-scheduler systemctl status kube-scheduler
驗(yàn)證MASTER節(jié)點(diǎn)
kubectl get componentstatuses
其他MASTER節(jié)點(diǎn):證書(shū)包含了所有Master節(jié)點(diǎn)IP,可以拷貝
Token.csv可以拷貝
Apiserver、controller-manager、scheduler的service文件均可以拷貝后更改IP
上傳 kubernetes-client-linux-amd64.tar.gz
tar -zxvf kubernetes-client-linux-amd64.tar.gz cp kubernetes/client/bin/* /usr/local/bin/ chmod a+x /usr/local/bin/kube*
這里說(shuō)明一下,server包里包括了client包里的所有二進(jìn)制程序,這里也可以直接將server包里的相同文件拷貝出來(lái),不需要client這個(gè)包。
9.1 配置kubeletkubelet 啟動(dòng)時(shí)向 kube-apiserver 發(fā)送 TLS bootstrapping 請(qǐng)求,需要先將 bootstrap token 文件中的 kubelet-bootstrap 用戶賦予 system:node-bootstrapper 角色,然后 kubelet 才有權(quán)限創(chuàng)建認(rèn)證請(qǐng)求(certificatesigningrequests)。
先創(chuàng)建認(rèn)證請(qǐng)求 user 為 master 中 token.csv 文件里配置的用戶 只需在一個(gè)node中創(chuàng)建一次就可以
Master節(jié)點(diǎn)執(zhí)行
kubectl create clusterrolebinding kubelet-bootstrap --clusterrole=system:node-bootstrapper --user=kubelet-bootstrap
配置集群
kubectl config set-cluster kubernetes --certificate-authority=/etc/kubernetes/ssl/ca.pem --embed-certs=true --server=https://192.168.116.123:6443 --kubeconfig=bootstrap.kubeconfig
配置客戶端認(rèn)證
kubectl config set-credentials kubelet-bootstrap --token=ed7b961401dc857ead33f9fb38ab62bc --kubeconfig=bootstrap.kubeconfig
配置關(guān)聯(lián)
kubectl config set-context default --cluster=kubernetes --user=kubelet-bootstrap --kubeconfig=bootstrap.kubeconfig
配置默認(rèn)關(guān)聯(lián)
kubectl config use-context default --kubeconfig=bootstrap.kubeconfig
拷貝生成的 bootstrap.kubeconfig 文件
mv bootstrap.kubeconfig /etc/kubernetes/9.2 創(chuàng)建kubelet.service文件
創(chuàng)建kubelet目錄
mkdir /var/lib/kubelet vi /usr/lib/systemd/system/kubelet.service [Unit] Description=Kubernetes Kubelet Documentation=https://github.com/GoogleCloudPlatform/kubernetes After=docker.service Requires=docker.service [Service] WorkingDirectory=/var/lib/kubelet ExecStart=/usr/bin/kubelet --address=192.168.116.123 --hostname-override=192.168.116.123 --pod-infra-container-image=192.168.116.123:80/library/pod-infrastructure:latest --experimental-bootstrap-kubeconfig=/etc/kubernetes/bootstrap.kubeconfig --kubeconfig=/etc/kubernetes/kubelet.kubeconfig --require-kubeconfig --cert-dir=/etc/kubernetes/ssl --cluster_dns=10.254.0.2 --cluster_domain=cluster.local --hairpin-mode promiscuous-bridge --allow-privileged=true --serialize-image-pulls=false --logtostderr=true --v=2 Restart=on-failure RestartSec=5 [Install] WantedBy=multi-user.target
如上配置:
198.15.5.30 為本機(jī)的IP
10.254.0.2 預(yù)分配的 dns 地址
cluster.local. 為 kubernetes 集群的 domain
jicki/pause-amd64:3.0 這個(gè)是 pod 的基礎(chǔ)鏡像,既 gcr 的 gcr.io/google_containers/pause-amd64:3.0 鏡像, 下載下來(lái)修改為自己的倉(cāng)庫(kù)中的比較快。
啟動(dòng)kubelet
systemctl daemon-reload systemctl enable kubelet systemctl start kubelet systemctl status kubelet9.3 配置TLS認(rèn)證。
Master節(jié)點(diǎn) 查看 csr 的名稱
kubectl get csr
增加 認(rèn)證
kubectl certificate approve node-csr-OL4lCAbeWUnCOFyPwBPVG2v4aXNDcfJDYtPFaGL7ApU
然后狀態(tài)就會(huì)變成這樣
9.4 驗(yàn)證Nodeskubectl get nodes
成功以后Node節(jié)點(diǎn)會(huì)自動(dòng)生成配置文件與密鑰
配置文件
ls -ltr /etc/kubernetes/kubelet.kubeconfig
密鑰文件
ls -ltr /etc/kubernetes/ssl/kubelet*9.5 配置kube-proxy
證書(shū)方面由于我們node端沒(méi)有裝 cfssl
我們回到 master 端 機(jī)器 去配置證書(shū),然后拷貝過(guò)來(lái)
cd /opt/ssl vi kube-proxy-csr.json { "CN": "system:kube-proxy", "hosts": [], "key": { "algo": "rsa", "size": 2048 }, "names": [ { "C": "CN", "ST": "ShangHai", "L": "ShangHai", "O": "k8s", "OU": "System" } ] }
生成kube-proxy證書(shū)和私鑰
cfssl gencert -ca=/etc/kubernetes/ssl/ca.pem -ca-key=/etc/kubernetes/ssl/ca-key.pem -config=/etc/kubernetes/ssl/config.json -profile=kubernetes kube-proxy-csr.json | cfssljson -bare kube-proxy
查看生成:
ls -ltr kube-proxy* kube-proxy.csr kube-proxy-csr.json kube-proxy-key.pem kube-proxy.pem
拷貝到目錄:
cp kube-proxy* /etc/kubernetes/ssl/
拷貝到node節(jié)點(diǎn):
scp kube-proxy* root@198.15.5.30:/etc/kubernetes/ssl/
Node節(jié)點(diǎn) 配置集群
kubectl config set-cluster kubernetes --certificate-authority=/etc/kubernetes/ssl/ca.pem --embed-certs=true --server=https://192.168.116.123:6443 --kubeconfig=kube-proxy.kubeconfig
配置客戶端認(rèn)證
kubectl config set-credentials kube-proxy --client-certificate=/etc/kubernetes/ssl/kube-proxy.pem --client-key=/etc/kubernetes/ssl/kube-proxy-key.pem --embed-certs=true --kubeconfig=kube-proxy.kubeconfig
配置關(guān)聯(lián)
kubectl config set-context default --cluster=kubernetes --user=kube-proxy --kubeconfig=kube-proxy.kubeconfig
配置默認(rèn)關(guān)聯(lián)
kubectl config use-context default --kubeconfig=kube-proxy.kubeconfig
拷貝到目錄
mv kube-proxy.kubeconfig /etc/kubernetes/9.4創(chuàng)建kube-proxy.service文件
創(chuàng)建 kube-proxy 目錄
mkdir -p /var/lib/kube-proxy vi /usr/lib/systemd/system/kube-proxy.service [Unit] Description=Kubernetes Kube-Proxy Server Documentation=https://github.com/GoogleCloudPlatform/kubernetes After=network.target [Service] WorkingDirectory=/var/lib/kube-proxy ExecStart=/usr/bin/kube-proxy --bind-address=192.168.116.123 --hostname-override=192.168.116.5.123 --cluster-cidr=10.254.0.0/16 --kubeconfig=/etc/kubernetes/kube-proxy.kubeconfig --logtostderr=true --v=2 Restart=on-failure RestartSec=5 LimitNOFILE=65536 [Install] WantedBy=multi-user.target
啟動(dòng)kube-proxy
systemctl daemon-reload systemctl enable kube-proxy systemctl start kube-proxy systemctl status kube-proxy
其他NODE節(jié)點(diǎn)也按這個(gè)配置。
文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請(qǐng)注明本文地址:http://m.hztianpu.com/yun/27019.html
摘要:拷貝到目錄拷貝到其他配置首次啟動(dòng)時(shí)向發(fā)送請(qǐng)求,驗(yàn)證請(qǐng)求中的是否與它配置的一致,如果一致則自動(dòng)為生成證書(shū)和秘鑰。 緊接上一章 8. MASTER節(jié)點(diǎn)配置 8.1 安裝組件 上傳kubernetes-server-linux-amd64.tar.gz tar -xzvf kubernetes-server-linux-amd64.tar.gz cd kubernetes cp -r ser...
摘要:所有主機(jī)關(guān)閉防火墻關(guān)閉所有節(jié)點(diǎn)主機(jī)防火墻關(guān)閉防火墻開(kāi)機(jī)自啟動(dòng)關(guān)閉防火墻啟動(dòng)驗(yàn)證集群狀態(tài)晚上回去更新第二篇從零開(kāi)始安裝以及的配置以及作用 1.環(huán)境說(shuō)明 主機(jī)名 ip 說(shuō)明 master-123(復(fù)用node) 192.168.116.123 etcd flannel kube-apiserver kube-controller-manager kube-scheduler ku...
摘要:所有主機(jī)關(guān)閉防火墻關(guān)閉所有節(jié)點(diǎn)主機(jī)防火墻關(guān)閉防火墻開(kāi)機(jī)自啟動(dòng)關(guān)閉防火墻啟動(dòng)驗(yàn)證集群狀態(tài)晚上回去更新第二篇從零開(kāi)始安裝以及的配置以及作用 1.環(huán)境說(shuō)明 主機(jī)名 ip 說(shuō)明 master-123(復(fù)用node) 192.168.116.123 etcd flannel kube-apiserver kube-controller-manager kube-scheduler ku...
摘要:安裝配置安裝上傳安裝如果缺少依賴,注解是由于沒(méi)使用,所以必須在里配置這個(gè)參數(shù),才能訪問(wèn)。但是由于國(guó)內(nèi)對(duì)國(guó)外網(wǎng)絡(luò)訪問(wèn)的不可靠以及為了速度上的優(yōu)化和管理上的方便,我們選擇自己搭建一個(gè)私有的倉(cāng)庫(kù),也就是。 5 Flannel網(wǎng)絡(luò) 5.1 準(zhǔn)備工作 上傳二進(jìn)制文件 tar -zxvf flannel-v0.8.0-rc1-linux-amd64.tar.gz cp flanneld...
閱讀 912·2023-04-26 00:13
閱讀 3129·2021-11-23 10:08
閱讀 2588·2021-09-01 10:41
閱讀 2190·2021-08-27 16:25
閱讀 4331·2021-07-30 15:14
閱讀 2468·2019-08-30 15:54
閱讀 925·2019-08-29 16:22
閱讀 2816·2019-08-26 12:13