EKS(EKS)服务指南:入门 · 配置 · 排错 · 代运维 · 部署
快速信息
- 服务类别:容器
- AWS 官方文档
它是什么
EKS(Elastic Kubernetes Service)是 AWS 的托管 Kubernetes 服务,负责运行和维护 Kubernetes 控制面,也就是 API Server、etcd、调度器与控制器管理器。控制面由 AWS 托管在多个可用区中运行,对外暴露一个 API Endpoint;你的业务工作负载则运行在自己 VPC 内的数据面(EC2 节点或 Fargate)上。它在架构中处于「容器编排层」,向下依赖 EC2、VPC、EBS、ELB 等基础设施服务,向上承载业务应用。
与相邻服务的边界值得说清楚:ECS 是 AWS 自有的容器编排,抽象层次更少、与 IAM 和 ALB 的结合更直接;EKS 则提供上游兼容的 Kubernetes API 与生态,适合已有 Kubernetes 技能栈或需要可移植性的团队。EC2 本身只是虚机,kubelet、容器运行时、扩缩容策略都需要有人负责。EKS 恰好只接管了控制面——节点的 AMI 补丁、容量规划、扩缩容仍然由你承担,除非使用 Fargate 或 EKS Auto Mode 这类托管数据面选项。
控制面通过 VPC 内的 ENI 与数据面通信,集群 endpoint 可以配置为公有、私有或二者兼有;鉴权走 IAM,授权走 Kubernetes RBAC,两者之间靠身份映射打通。这是理解 EKS 安全模型的关键分界线。
核心概念
- Cluster:一个 EKS 集群即一个托管控制面加一套关联的网络配置,带有独立的 Kubernetes API Endpoint 和 OIDC 身份提供方。
- 托管节点组:由 EKS 代为创建并滚动更新的 EC2 Auto Scaling 组;也可以用自管节点或 Fargate Profile 提供容量。
- Access Entry / aws-auth:把 IAM 主体(用户、角色)映射为 Kubernetes 身份的机制,决定谁能用 kubectl 做什么。
- IRSA 与 EKS Pod Identity:让 Pod 中的应用以细粒度 IAM 角色访问 S3、DynamoDB 等 AWS 服务,不必把凭证塞进节点或环境变量。
- VPC CNI:EKS 默认网络插件,Pod 直接从子网分配 VPC IP,因此与 EC2 处于同一网络平面,同时也意味着子网 IP 容量会限制 Pod 数量。
典型场景
- 把已有 Kubernetes 负载迁移上云:EKS 提供上游兼容的 API,Helm Chart、Operator、CRD 基本可原样运行,迁移成本主要落在网络与存储接入上。
- 弹性要求高的在线业务:结合 HPA 按 Pod 指标扩容、Karpenter 或 Cluster Autoscaler 按节点容量扩容,高峰加、低谷收。
- 平台团队构建内部多租户容器平台:用 Namespace、RBAC、ResourceQuota、NetworkPolicy 做隔离,用 Access Entry 把各团队 IAM 角色映射进来,控制面交给 AWS。
- 批处理与机器学习任务:用 Spot 实例节点组跑可中断作业,借调度器排队执行,显著降低算力成本。
计费与成本要点
- 控制面按集群按小时计费,与节点数量无关,因此合并大量小集群通常更省钱,代价是隔离性和故障爆炸半径变大。
- 计算成本是账单主体,来自 EC2 实例或 Fargate 按 Pod 申请的 vCPU/内存计费。优化重点是右调 resource request、选用 Graviton 实例、可中断负载混用 Spot。
- 容易被忽略的关联费用:节点根卷与 PVC 的 EBS、Service type=LoadBalancer 创建的 ELB、跨 AZ 流量,以及拉镜像和调 AWS API 走的 NAT Gateway 处理费。
- 省钱思路:为 ECR、S3、CloudWatch Logs 建 VPC Endpoint 绕开 NAT;用 Karpenter 做装箱减少碎片;留意 Kubernetes 版本标准支持期结束后的额外费用,以官方文档为准。
上手步骤
- 准备 IAM 角色:创建集群角色并附加 AmazonEKSClusterPolicy;创建节点角色并附加 AmazonEKSWorkerNodePolicy、AmazonEKS_CNI_Policy、AmazonEC2ContainerRegistryReadOnly。验证:aws iam get-role 查看信任策略与附加策略是否符合预期。
- 创建集群:控制台 EKS 创建集群时选择 Kubernetes 版本、VPC 子网与安全组,或用 eksctl create cluster。验证:aws eks describe-cluster –name 集群名 –query “cluster.status” 返回 ACTIVE。
- 配置 kubeconfig:执行 aws eks update-kubeconfig –name 集群名 –region 区域。验证:kubectl cluster-info 与 kubectl get svc 均正常返回。
- 添加计算容量:创建托管节点组(选实例类型、期望/最小/最大节点数与子网),或为指定 namespace 建 Fargate Profile。验证:kubectl get nodes 全部 Ready。
- 确认 add-on:VPC CNI、CoreDNS、kube-proxy,需要持久卷再加 EBS CSI 驱动。验证:kubectl get pods -n kube-system 全部 Running。
- 授权与联调:通过 Access Entry 或 aws-auth 把其他 IAM 主体映射到 Kubernetes 组,部署一个 Deployment 加 Service。验证:对方执行 kubectl auth can-i –list 有预期权限,且能从集群外访问到服务。
常见问题与排查
Pod 一直 Pending,事件提示无法分配 IP
原因:VPC CNI 从节点所在子网分配 IP,子网可用 IP 不足,或实例的 ENI 与辅助 IP 上限已满,调度到该节点的 Pod 就拿不到地址。
处理:kubectl describe pod 查看事件并定位节点;检查子网剩余 IP 与实例类型上限;改用更大子网、启用 prefix delegation 或 custom networking,或增加节点分散负载。
新节点 NotReady 或根本没有加入集群
原因:常见是节点角色缺少 AmazonEKSWorkerNodePolicy 或 CNI 策略,节点安全组没放通与控制面 443 的通信,或自管节点的角色未在 aws-auth 中映射。
处理:登录节点查看 kubelet 日志与 bootstrap 输出;核对节点角色策略、安全组入站规则(允许控制面安全组访问 kubelet 端口),并检查 Access Entry 中的角色映射。
kubectl 报 Unauthorized 或要求重新登录
原因:kubeconfig 指向错误集群或 token 过期;更常见的是当前 IAM 主体没有被映射成任何 Kubernetes 身份——除集群创建者外,默认都没有权限。
处理:重新执行 aws eks update-kubeconfig,用 aws sts get-caller-identity 确认身份;请管理员通过 Access Entry 或 aws-auth 添加映射,注意 username 与 groups 要和 RBAC 绑定匹配。
Pod 拉不到镜像,或访问 S3 报 AccessDenied
原因:前者多为节点角色缺少 ECR 读取权限,或私有子网没有到 ECR 的网络路径;后者往往是 Pod 复用了节点角色,而节点角色没有对应业务权限。
处理:为节点角色补齐 ECR 相关权限并检查 NAT/VPC Endpoint;为应用配置 IRSA 或 Pod Identity 绑定专用 IAM 角色,而不是持续放大节点角色权限。
最佳实践
- 开启控制面日志(api、audit、authenticator、controllerManager、scheduler)并发送到 CloudWatch Logs,至少在排障期完整保留,成本敏感时可只留 audit。
- 统一用 IRSA 或 Pod Identity 做最小权限,节点角色只保留 kubelet 必需的策略,避免所有 Pod 共享节点权限。
- 集群 endpoint 关闭公有访问或限制 CIDR,节点放在私有子网并配合 VPC Endpoint,既缩小暴露面也省 NAT 流量费。
- 把集群定义写进 IaC(eksctl 配置或 Terraform 模块),并让 add-on 升级和 Kubernetes 版本升级进入常规迭代,在标准支持期内完成升级。
常见问题
EKS 的控制面需要我自己打补丁吗?
不需要。控制面组件由 AWS 托管、跨可用区运行并自动修补;你只需关注节点 AMI、add-on 版本和 Kubernetes 版本升级,具体支持周期以官方文档为准。
节点也由 EKS 托管吗?
取决于形态。托管节点组由 EKS 代管 Auto Scaling 组与滚动更新,但实例层仍可能需要你配合;Fargate 和 EKS Auto Mode 则把节点管理基本托管掉。
EKS 一定要用 EC2 吗?
不是。除 EC2 节点外,EKS 支持 Fargate 按 Pod 提供计算,也可托管节点组与自管节点混用。不同形态在计费、网络与权限能力上有差异,选型前建议对照官方文档。
为什么 Pod 数量会受子网限制?
因为 VPC CNI 给每个 Pod 分配一个 VPC IP,可用地址受子网大小和实例 ENI 上限双重约束。大集群建议规划独立大子网,并考虑 prefix delegation 或 custom networking。
EKS 和 ECS 怎么选?
需要完整 Kubernetes API、Operator 生态与跨环境可移植性,选 EKS;追求更少抽象、与 I