Windows環境の複数のVirtualBox仮想マシン上に構築したKubernetesクラスタにおいて、特定のノード上のPodと通信ができない状態です。
どなたかお知恵をお貸しいただけると幸いです。
以下環境情報及び状況詳細です。
追加で必要な情報等ありましたら、お申し付けください。
■環境
・ローカルマシン:Windows11
・仮想マシン:VirtualBox
・仮想マシン情報
-構成
→master-virtualbox(master node)
→worker1(worker node)
→worker2(worker node)
-OS:Ubuntu 20.04.3 LTS
■状況詳細
【前提】
Kubernetesのクラスタ構築までは完了している。
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl get nodes
NAME STATUS ROLES AGE VERSION
master-virtualbox Ready control-plane,master 6d17h v1.23.1
worker1 Ready <none> 2d18h v1.23.1
worker2 Ready <none> 4d18h v1.23.1
①Deploymentを作成
apiVersion: apps/v1
kind: Deployment
metadata:
name: sample-deployment
spec:
replicas: 3
selector:
matchLabels:
app: sample-app
template:
metadata:
labels:
app: sample-app
spec:
containers:
- name: nginx-container
image: nginx:1.12
ports:
- containerPort: 80
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl get deployments
NAME READY UP-TO-DATE AVAILABLE AGE
sample-deployment 3/3 3 3 78m
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl get pods -o wide
NAME READY STATUS RESTARTS AGE IP NODE NOMINATED NODE READINESS GATES
sample-deployment-7bd9995cfc-2t7cr 1/1 Running 0 26m 10.244.3.115 worker1 <none> <none>
sample-deployment-7bd9995cfc-ndsb6 1/1 Running 0 26m 10.244.3.116 worker1 <none> <none>
sample-deployment-7bd9995cfc-rtxgq 1/1 Running 0 26m 10.244.2.86 worker2 <none> <none>
②ClusterIPを作成
apiVersion: v1
kind: Service
metadata:
name: sample-clusterip
spec:
type: ClusterIP
ports:
- name: "http-port"
protocol: "TCP"
port: 8080
targetPort: 80
selector:
app: sample-app
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl get services -o wide
NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE SELECTOR
kubernetes ClusterIP 10.96.0.1 <none> 443/TCP 6d18h <none>
sample-clusterip ClusterIP 10.104.171.9 <none> 8080/TCP 82m app=sample-app
③ClusterIP充てにcurl
でHTTP通信が可能か動作確認
kubectl run --image=centos:6 --restart=Never --rm -i testpod -- curl -s http://10.104.171.9:8080
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl run --image=centos:6 --restart=Never --rm -i testpod -- curl -s http://10.104.171.9:8080
pod "testpod" deleted
pod default/testpod terminated (Error)
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl run --image=centos:6 --restart=Never --rm -i testpod -- curl -s http://10.104.171.9:8080
pod "testpod" deleted
pod default/testpod terminated (Error)
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl run --image=centos:6 --restart=Never --rm -i testpod -- curl -s http://10.104.171.9:8080
pod "testpod" deleted
pod default/testpod terminated (Error)
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl run --image=centos:6 --restart=Never --rm -i testpod -- curl -s http://10.104.171.9:8080
pod "testpod" deleted
pod default/testpod terminated (Error)
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl run --image=centos:6 --restart=Never --rm -i testpod -- curl -s http://10.104.171.9:8080
pod "testpod" deleted
pod default/testpod terminated (Error)
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl run --image=centos:6 --restart=Never --rm -i testpod -- curl -s http://10.104.171.9:8080
pod "testpod" deleted
pod default/testpod terminated (Error)
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl run --image=centos:6 --restart=Never --rm -i testpod -- curl -s http://10.104.171.9:8080
pod "testpod" deleted
pod default/testpod terminated (Error)
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl run --image=centos:6 --restart=Never --rm -i testpod -- curl -s http://10.104.171.9:8080
sample-deployment-7bd9995cfc-rtxgq
pod "testpod" deleted
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl run --image=centos:6 --restart=Never --rm -i testpod -- curl -s http://10.104.171.9:8080
sample-deployment-7bd9995cfc-rtxgq
pod "testpod" deleted
root@master-VirtualBox:/etc/kubernetes/sample-manifests/shells# kubectl run --image=centos:6 --restart=Never --rm -i testpod -- curl -s http://10.104.171.9:8080
pod "testpod" deleted
pod default/testpod terminated (Error)
→worker2としか通信できていない。。。
■対策/確認したこと
・PodやNodeに問題が発生しているか確認
kubectl describe pod <Pod名>
kubectl describe node <Node名>
上記のコマンドでエラーがないか確認しましたが、特に問題なく動いていました。
・クラスタ内のPodから通信可能か確認
aplineのイメージでPodを作成し、そこからpingで通信可能か試してみました。
kubectl run -it --rm --restart=Never alpine --image=alpine sh
Pod内で以下を実行
/ # ping 10.244.3.115
PING 10.244.3.115 (10.244.3.115): 56 data bytes
→応答なし
/ # ping 10.244.3.116
PING 10.244.3.116 (10.244.3.116): 56 data bytes
→応答なし
/ # ping 10.244.2.86
PING 10.244.2.86 (10.244.2.86): 56 data bytes
64 bytes from 10.244.2.86: seq=0 ttl=64 time=0.147 ms
64 bytes from 10.244.2.86: seq=1 ttl=64 time=0.123 ms
64 bytes from 10.244.2.86: seq=2 ttl=64 time=0.121 ms
→応答あり
pingのレベルで通信できていないところまで解析したのですが、ここからどのように原因を特定するのかわからず、検索しても方法を見つけることができなかったため、質問させていただいている次第です。
・仮想マシンのCPUを1→2に変更
割り当てているCPU数に不足があるのかと思い、増やしてみましたが状況は変わりませんでした。
以上になります。
どうぞ、よろしくお願いいたします。