AWS代理帳號開戶 Amazon EKS 架構詳解:在 AWS 上執行 Kubernetes
# Amazon EKS 架構詳解:在 AWS 上執行 Kubernetes
很多使用者搜尋這個主題,不是想看 Kubernetes 的概念介紹,而是想解決這幾個實際問題:
- 在 AWS 上建立 EKS 叢集時,控制平面、節點、VPC、IAM 到底怎麼配合
- 建叢集時應該怎麼選子網、節點類型、網路模式
- 為什麼節點無法加入叢集、Pod 無法出網、Service 無法被外部訪問
- 怎麼把 EKS 部署成一個便於升級、便於排障、便於維護的生產可用架構
本文不做泛泛而談,直接從架構拆解、建立步驟、配置實踐與問題排查四個部分展開,幫你完成一套可操作的 Amazon EKS 部署方案。
---
## 一、EKS 架構先看懂:你真正要操作的是哪些元件
在 AWS 上執行 Kubernetes,實際上會同時操作以下幾層資源:
1. **EKS 控制平面**
- 由 AWS 託管
- 包含 Kubernetes API Server、etcd、控制器等核心元件
- 使用者無需自己維護主節點 EC2
2. **工作節點(Worker Nodes)**
- 通常是 EC2 節點組(Managed Node Group)
- 也可以使用 Fargate 執行部分無狀態工作負載
- Pod 最終運行在這一層
3. **VPC 網路**
- EKS 叢集依賴 VPC、子網、安全組、路由表、NAT Gateway 等網路資源
- 這一層是最容易出錯的地方
4. **IAM 權限**
- 控制平面角色
- 節點執行角色
- 管理員訪問叢集的身份映射
- IRSA(IAM Roles for Service Accounts)
5. **叢集附加元件**
- VPC CNI
- CoreDNS
- kube-proxy
- AWS Load Balancer Controller
- EBS CSI Driver
如果你要讓 EKS 穩定跑起來,關鍵不是「建立叢集」那一個按鈕,而是這些元件之間的依賴是否正確。
---
## 二、部署前先規劃:避免一開始就踩坑
在建立 EKS 前,先把以下規劃做完。
### 1. 地域與可用區怎麼選
建議原則:
- **優先選擇靠近使用者或業務系統的地域**,降低 API 與業務流量延遲
- **至少使用 2 個可用區**,提高節點容錯能力
- 若需對接 RDS、ElastiCache、內部服務,盡量放在同地域
實際建議:
- 測試環境:2 個 AZ 即可
- 正式環境:2~3 個 AZ
- 若使用 ALB/NLB,子網標籤要提前規劃好
### 2. VPC 與子網規劃
EKS 建議使用:
- **2 個以上公有子網**:放負載平衡器或 NAT Gateway
- **2 個以上私有子網**:放工作節點
常見做法:
- 公有子網:供 ALB / NAT 使用
- 私有子網:供 Node Group 使用
- 路由表中,私有子網透過 NAT Gateway 出網
如果節點放在私有子網,通常更符合生產環境實踐,因為節點不直接暴露公網 IP。
### 3. 節點規格如何選
選型不要只看 vCPU 和記憶體,還要看 Pod 密度、網卡限制、成本與擴容策略。
常見建議:
- 開發測試:t3.medium / t3.large
- 一般業務:m5.large / m6i.large
- 計算型應用:c5 / c6i
- 記憶體型應用:r5 / r6i
如果你要跑很多 Pod,還要注意 EC2 實例可分配的 ENI 和 IP 數量,否則會出現節點資源看起來夠,但 Pod 調度不上去的情況。
---
## 三、建立 EKS 叢集:控制台操作步驟
下面以 AWS Console 為例,按實際操作流程說明。
### 第 1 步:建立或確認 VPC
你可以用以下兩種方式:
- 直接使用 AWS 提供的 EKS/VPC CloudFormation 範本
- 自己手動建立 VPC
手動建立時,至少確認:
- VPC CIDR 例如:`10.0.0.0/16`
- 2 個公有子網,例如:
- `10.0.1.0/24`
- `10.0.2.0/24`
- 2 個私有子網,例如:
- `10.0.11.0/24`
- `10.0.12.0/24`
- Internet Gateway 已掛載
- NAT Gateway 已建立
- 私有子網路由表已指向 NAT
### 第 2 步:建立 EKS 叢集 IAM 角色
在 IAM 中建立供 EKS 使用的角色,並附加必要權限。
AWS代理帳號開戶 通常需要至少包含:
AWS代理帳號開戶 - `AmazonEKSClusterPolicy`
如果你使用控制台精靈,AWS 會提示所需角色。
### 第 3 步:建立 EKS Cluster
AWS代理帳號開戶 進入 EKS 控制台:
- 點擊 **Create cluster**
- 選擇 **Custom configuration** 或快速建立
核心參數:
1. **Cluster name**
- 例如:`prod-eks-cluster`
2. **Kubernetes version**
- 建議選擇目前穩定且支援期較長的版本
- 不要在正式環境一開始就用剛發布版本
3. **Cluster service role**
- 選擇剛建立的 IAM Role
4. **Networking**
- 選擇目標 VPC
- 勾選至少 2 個子網,建議跨 AZ
- 選擇叢集安全組
5. **Cluster endpoint access**
- Public
- Private
- Public and Private
實務建議:
- 測試環境可先用 `Public and Private`
- 正式環境如果有 VPN / Direct Connect / Bastion,優先考慮 Private 或限制 Public CIDR
6. **Logging**
- 建議啟用控制平面日誌輸出到 CloudWatch Logs
- 至少啟用:API、Audit、Authenticator、Controller Manager、Scheduler
### 第 4 步:建立 Managed Node Group
叢集建立完成後,再建立節點組。
關鍵配置:
1. **Node IAM Role**
需具備至少以下策略:
- `AmazonEKSWorkerNodePolicy`
- `AmazonEC2ContainerRegistryReadOnly`
- `AmazonEKS_CNI_Policy`
2. **AMI type**
- Amazon Linux 2
- Bottlerocket
- GPU 型節點則選對應映像
3. **Capacity type**
- On-Demand:穩定
- Spot:節省成本,但要設計中斷容忍
4. **Instance types**
- 先從 1~2 種開始,不要一次混太多
5. **Disk size**
- 預設常常不夠
- 如果有容器映像較大、日誌較多,建議至少 50GB 或更高
AWS代理帳號開戶 6. **Scaling configuration**
- Desired size:初始節點數
- Min size:最小節點數
- Max size:最大節點數
7. **Subnets**
- 建議選私有子網
### 第 5 步:更新本地 kubeconfig
建立完成後,在本機或跳板機執行:
```bash
aws eks update-kubeconfig --region ap-northeast-1 --name prod-eks-cluster
```
驗證連線:
```bash
kubectl get nodes
kubectl get pods -A
```
如果 `kubectl` 無法訪問叢集,通常是 IAM 身份未授權或 endpoint 訪問策略不匹配。
---
## 四、EKS 核心架構詳解:控制平面、節點與網路如何協同
### 1. 控制平面由 AWS 託管,但網路仍需要你配置
很多人以為 EKS 控制平面託管後,就不需要關心網路。實際上你仍需要處理:
- API endpoint 如何被管理員訪問
- 節點是否能與控制平面通信
- Pod 是否能訪問外網
- Service 是否能被內網或外網訪問
### 2. Pod IP 來自 VPC 網段
EKS 預設使用 AWS VPC CNI,Pod 會直接從 VPC 子網獲取 IP。這帶來兩個直接影響:
- **子網 IP 不夠時,Pod 會啟動失敗**
- **節點可承載的 Pod 數量受 ENI/IP 限制影響**
這是 EKS 與很多自建 Kubernetes 網路方案不同的地方,也是部署密集型工作負載時最常見的瓶頸。
### 3. 節點加入叢集依賴 IAM 與 aws-auth
節點能不能加入叢集,不只取決於 EC2 是否啟動成功,還取決於:
- Node IAM Role 是否正確
- 該角色是否被授權映射到 Kubernetes RBAC
- EKS 管理的 Node Group 是否已正確註冊
如果是自管理節點,這一段更容易出錯。
---
## 五、EKS 常用配置實踐
## 1. 安裝 AWS Load Balancer Controller
AWS代理帳號開戶 如果你要用 Ingress 建立 ALB,通常需要部署 AWS Load Balancer Controller。
AWS代理帳號開戶 操作思路:
1. 建立 OIDC Provider
2. 建立 IAM Policy
3. 使用 IRSA 綁定 ServiceAccount
4. 用 Helm 安裝 Controller
常用指令示例:
AWS代理帳號開戶 ```bash
eksctl utils associate-iam-oidc-provider \
--region ap-northeast-1 \
--cluster prod-eks-cluster \
--approve
```
安裝完成後,可用 Ingress 建立 ALB。
常見問題:
- 子網沒有正確標籤
- ServiceAccount 沒綁定 IAM Role
- 安全組未開放 80/443
### 2. 安裝 EBS CSI Driver
如果你的業務需要持久化儲存,例如 MySQL、Jenkins、日誌系統,就要配置 EBS CSI Driver。
AWS代理帳號開戶 檢查點:
- 節點所在 AZ 是否與 EBS 卷匹配
- StorageClass 是否配置正確
- Pod 是否被調度到能掛載該卷的 AZ
### 3. 啟用 Cluster Autoscaler
當節點不足時,自動擴容 Node Group。
適用場景:
- 流量高峰不固定
- 任務型工作負載波動大
- 想避免人工調整節點數
注意:
- Auto Scaling Group 標籤要正確
- Pod 的 requests/limits 要合理
- 若資源請求寫得不準,擴容判斷會失真
---
## 六、網路配置重點:最容易出問題的部分
### 1. 公網與私網訪問怎麼設
常見架構:
- 節點在私有子網
- ALB 在公有子網
- Pod 經 NAT Gateway 訪問外網
- 管理員透過 VPN / Bastion / SSM 管理叢集
這種架構比直接把節點暴露在公網更容易控管。
### 2. 安全組要怎麼開
至少檢查以下方向:
- 控制平面到節點
- 節點到控制平面
- 節點間互通
- ALB 到 NodePort/Pod
- 管理員來源 IP 到 API Server
如果是應用服務無法訪問,先不要急著看 Kubernetes YAML,先看:
- 安全組
- 子網路由
- NACL
- 負載平衡器健康檢查
### 3. 子網標籤配置
EKS 中 ALB/NLB 發現子網時,通常依賴標籤。
常見標籤:
- 公有子網:`kubernetes.io/role/elb=1`
- 私有子網:`kubernetes.io/role/internal-elb=1`
- 叢集關聯標籤:`kubernetes.io/cluster/=shared` 或 `owned`
如果標籤不對,Ingress 建不起來是非常常見的。
---
## 七、實戰部署一個應用:驗證 EKS 是否可用
下面用一個簡單 nginx Deployment 驗證叢集。
### 1. 建立 Deployment
```yaml
apiVersion: apps/v1
kind: Deployment
metadata:
name: nginx-demo
spec:
replicas: 2
selector:
matchLabels:
app: nginx-demo
template:
metadata:
labels:
app: nginx-demo
spec:
containers:
- name: nginx
image: nginx:stable
ports:
- containerPort: 80
```
套用:
```bash
kubectl apply -f deployment.yaml
```
### 2. 建立 Service
```yaml
apiVersion: v1
kind: Service
metadata:
name: nginx-demo-svc
spec:
selector:
app: nginx-demo
ports:
- port: 80
targetPort: 80
type: ClusterIP
```
### 3. 建立 Ingress
如果已安裝 AWS Load Balancer Controller:
```yaml
apiVersion: networking.k8s.io/v1
kind: Ingress
metadata:
name: nginx-demo-ingress
annotations:
kubernetes.io/ingress.class: alb
alb.ingress.kubernetes.io/scheme: internet-facing
alb.ingress.kubernetes.io/target-type: ip
spec:
rules:
- http:
paths:
- path: /
pathType: Prefix
backend:
service:
name: nginx-demo-svc
port:
number: 80
```
檢查:
AWS代理帳號開戶 ```bash
kubectl get pods
kubectl get svc
kubectl get ingress
```
如果 Ingress 一直沒有地址,優先排查:
- Controller 是否正常運行
- IAM 權限是否足夠
- 子網標籤是否正確
- 安全組是否阻擋流量
---
## 八、EKS 升級與維護操作指南
### 1. 升級順序不要搞反
建議順序:
1. 先看叢集版本支援矩陣
2. 升級控制平面
3. 升級 Managed Node Group
4. 升級附加元件
- CoreDNS
- kube-proxy
- VPC CNI
5. 驗證業務 Pod
不要直接跳多個大版本,也不要先升節點再升控制平面。
AWS代理帳號開戶 ### 2. 升級前的檢查清單
- 是否有廢棄 API 仍在使用
- 關鍵應用是否設定 PodDisruptionBudget
- 是否有足夠節點承接滾動升級
- 是否有快照與 YAML 備份
### 3. 節點滾動更新
如果你使用 Managed Node Group,建議透過建立新版本節點組再遷移工作負載的方式執行,風險通常低於直接原地大改。
---
## 九、日誌、監控與性能檢查
### 1. 建議至少接入這些監控
- CloudWatch Container Insights
- Prometheus + Grafana
- ALB/NLB 指標
- 節點 CPU / Memory / Disk
- Pod 重啟次數
- API Server 錯誤率
### 2. 性能測試應看什麼
不要只跑 `kubectl top`,至少要看:
- 節點 CPU 使用率是否長期超過 70%
- 記憶體是否接近驅逐閾值
- 磁碟 IOPS 是否成為瓶頸
- 網路延遲與丟包
- Pod 啟動時間
- Service 響應延遲
### 3. 常用排查命令
AWS代理帳號開戶 ```bash
kubectl get nodes -o wide
kubectl get pods -A -o wide
kubectl describe pod
kubectl logs
kubectl get events --sort-by=.metadata.creationTimestamp
```
如果節點層面有問題,再進一步用:
```bash
journalctl -u kubelet
```
或透過 SSM 進節點檢查容器執行時與系統資源。
---
## 十、EKS 常見故障排查
下面是實際操作中最常見的幾類問題。
### 問題 1:節點無法加入叢集
排查順序:
1. Node IAM Role 是否附加正確策略
2. 子網是否可正常出網
3. 安全組是否允許節點與控制平面通信
4. kubelet 啟動是否正常
5. aws-auth 或節點身份映射是否正常
AWS代理帳號開戶 常見現象:
- EC2 已啟動,但 `kubectl get nodes` 看不到
- 節點顯示 `NotReady`
### 問題 2:Pod 一直 Pending
重點檢查:
- 節點資源是否不足
- 子網 IP 是否耗盡
- PVC 是否綁定失敗
- 節點 taint / Pod toleration 是否匹配
- requests 設定是否過大
### 問題 3:Pod 無法拉取映像
排查:
- 節點是否能訪問 ECR
- Node IAM Role 是否有 ECR 讀取權限
- 私有子網是否配置 NAT
- 是否有 VPC Endpoint 可供 ECR 訪問
### 問題 4:Service 無法從外部訪問
檢查:
- 是 LoadBalancer、NodePort 還是 Ingress
- ALB/NLB 是否建立成功
- 安全組是否放行
- 健康檢查路徑是否正確
- Pod readinessProbe 是否通過
### 問題 5:Ingress 建立失敗
常見根因:
- AWS Load Balancer Controller 未安裝
- IRSA 未配置
- 子網標籤缺失
- annotation 填寫錯誤
### 問題 6:Pod 出不了外網
檢查:
- 私有子網是否有 NAT Gateway 路由
- NACL 是否攔截
- DNS 是否正常
- 安全組是否限制出站
---
## 十一、適合生產環境的 EKS 架構建議
如果你準備把 EKS 用於正式環境,建議參考以下配置:
- 控制平面日誌全部啟用
- 節點使用私有子網
- API Endpoint 限制來源 CIDR 或走 Private Access
- 至少 2 個 AZ
- 應用透過 ALB Ingress 暴露
- 狀態資料使用 EBS / EFS 並做好備份
- 透過 IRSA 分離 Pod 權限,不要共用節點角色
- 接入 Cluster Autoscaler 或 Karpenter
- 建立 CloudWatch 告警
- 例行做版本升級與節點輪替
---
## 十二、操作總結
Amazon EKS 的難點,不在於建立一個 Kubernetes 叢集,而在於把 AWS 網路、IAM、節點、儲存與 Kubernetes 資源正確接起來。
如果你想讓 EKS 少踩坑,請優先抓住這幾個重點:
1. **先規劃 VPC、子網與 NAT,再建叢集**
2. **節點盡量放私有子網**
3. **IAM Role 與 IRSA 要明確拆分**
4. **子網標籤、安全組與路由表是排障第一現場**
5. **升級時按控制平面、節點、附加元件的順序進行**
6. **提前部署日誌與監控,避免出事後無資料可查**
如果你的目標不是「把 EKS 建起來」,而是「讓 EKS 穩定跑業務」,那麼本文這套架構與操作思路,會比只看控制台精靈更有用。
你可以先從一個雙可用區、私有節點、ALB Ingress 的最小實踐架構開始,跑通後再逐步增加自動擴容、持久化儲存、監控告警與版本升級策略。這樣部署,後續維護成本會低很多。


