[AEWS] # 2주차 eks vpc cni 이해하기 (3)

25년도 AWS EKS Hands-on Study 스터디 정리 내용입니다.

 

최대 파드 갯수 

helm repo add geek-cookbook https://geek-cookbook.github.io/charts/
helm install kube-ops-view geek-cookbook/kube-ops-view --version 1.2.2 --set service.main.type=LoadBalancer --set env.TZ="Asia/Seoul" --namespace kube-system

# 접속 링크 확인
kubectl get svc -n kube-system kube-ops-view -o jsonpath='{.status.loadBalancer.ingress[0].hostname}' | awk '{ print "KUBE-OPS-VIEW URL = http://"$1":8080/#scale=1.5"}

 

 

KubeOps는 쿠버네티스 클러스터의 리소스를 시각적으로 관리할 수 있는 대시보드이다.

 

 

 

레플리카를 늘여서 배포할 수록 화면에 화려한 효과와 함께 네모(파드)가 추가된다.

 

aws ec2 describe-instance-types --filters Name=instance-type,Values=t3.\* \
 --query "InstanceTypes[].{Type: InstanceType, MaxENI: NetworkInfo.MaximumNetworkInterfaces, IPv4addr: NetworkInfo.Ipv4AddressesPerInterface}" \
 --output table
--------------------------------------
|        DescribeInstanceTypes       |
+----------+----------+--------------+
| IPv4addr | MaxENI   |    Type      |
+----------+----------+--------------+
|  15      |  4       |  t3.xlarge   |
|  15      |  4       |  t3.2xlarge  |
|  12      |  3       |  t3.large    |
|  6       |  3       |  t3.medium   |
|  2       |  2       |  t3.nano     |
|  2       |  2       |  t3.micro    |
|  4       |  3       |  t3.small    |
+----------+----------+--------------+

 

aws vpc cni는 파드가 ec2의 eni ip를 할당받도록 동작한다. 각 인스턴스 별로 최대 eni 개수와 eni 가 할당할 수 있는 ip 개수가 정해져 있는데 위 명령어를 통해 이 값을 확인할 수 있다.

실습에서 사용한 워커 노드는 t3.medium 타입이다.

• 랜 카드를 3개를 최대로 가질 수 있다.
• eni 당 할당 가능한 사용 가능한 ip 개수 : 6 (프라이머리 1개 + 세컨더리 5개)
• 전체 사용 가능한 ip 개수 : 6*3=18
• 파드에 할당 가능한 ip 개수 : 17 (노드가 1개 사용)

즉 t3.medium 타입의 인스턴스에서는 최대 파드를 17개 띄울 수 있는 것을 알 수 있다. 하지만 aws 기본 파드를 제외하면 사용자가 띄울 수 있는 파드는 15개이다.

kubectl scale deployment nginx-deployment --replicas=8

kubectl scale deployment nginx-deployment --replicas=15

kubectl scale deployment nginx-deployment --replicas=30

kubectl scale deployment nginx-deployment --replicas=50

 

 

현재 사용 중인 EC2 인스턴스는 t3.medium인데, 이 인스턴스는 각 eni 당 5개의 추가 IP를 할당할 수 있으며, 최대 3개의 eni를 가질 수 있다.

 

kubectl get pod -o wide | grep Pending
nginx-deployment-6c8cb99bb9-6pdcl   0/1     Pending   0          6m46s   <none>          <none>                                             <none>           <none>
nginx-deployment-6c8cb99bb9-9pt62   0/1     Pending   0          6m46s   <none>          <none>                                             <none>           <none>
nginx-deployment-6c8cb99bb9-dlx6v   0/1     Pending   0          6m46s   <none>          <none>                                             <none>           <none>
nginx-deployment-6c8cb99bb9-fgc8x   0/1     Pending   0          6m46s   <none>          <none>                                             <none>           <none>
nginx-deployment-6c8cb99bb9-kf6bl   0/1     Pending   0          6m46s   <none>          <none>                                             <none>           <none>
nginx-deployment-6c8cb99bb9-kg7xh   0/1     Pending   0          6m46s   <none>          <none>                                             <none>           <none>
nginx-deployment-6c8cb99bb9-nptcc   0/1     Pending   0          6m46s   <none>          <none>                                             <none>           <none>
nginx-deployment-6c8cb99bb9-vb5ss   0/1     Pending   0          6m46s   <none>          <none>                                             <none>           <none>
nginx-deployment-6c8cb99bb9-wr8ff   0/1     Pending   0          6m46s   <none>          <none>                                             <none>           <none>
nginx-deployment-6c8cb99bb9-zhb86   0/1     Pending   0          6m46s   <none>          <none>                                             <none>           <none>

레플리카를 50으로 설정하게 되면 ec2의 할당 가능한 ip 개수를 초과하므로 10개의 파드들은 Pending 상태로 됨을 확인할 수 있다.