随着应用程序开发向基于容器的方法发展,安排和管理资源的需求变得很重要。 Kubernetes 是提供可靠的容错应用程序工作负荷计划能力的领先平台。 Azure Kubernetes 服务 (AKS) 是一种托管 Kubernetes 产品/服务,可进一步简化基于容器的应用程序部署和管理。
本文介绍了 Kubernetes 核心基础结构组件,例如控制平面、节点和节点池 。 还介绍了 Pod、部署和集等工作负荷资源,以及如何将资源分组到命名空间 。
什么是 Kubernetes?
Kubernetes 是一个快速发展的平台,用于管理基于容器的应用程序及其相关网络和存储组件。 重点关注应用程序工作负荷,而不是底层基础结构组件。 Kubernetes 提供了一种声明性的部署方法,由一组针对管理操作的强大 API 提供支持。
你可以生成和运行可移植的、基于微服务的现代应用程序,这些应用程序可通过 Kubernetes 安排和管理这些应用程序组件的可用性而受益。 由于团队通过采用基于微服务的应用程序而取得进展,因此 Kubernetes 支持无状态和有状态应用程序。
作为开放平台,Kubernetes 可使用首选的编程语言、OS、库或消息总线生成应用程序。 现有的持续集成和持续交付 (CI/CD) 工具可以与 Kubernetes 集成,以计划和部署版本。
Azure Kubernetes 服务 (AKS) 提供托管 Kubernetes 服务,可简化部署和核心管理任务,包括协调升级。 AKS 控制平面由 Azure 平台托管,你只需为运行应用程序的 AKS 节点付费。 AKS 建立在开放源代码 Azure Kubernetes 服务引擎 (aks-engine) 的基础之上。
Kubernetes 群集体系结构
Kubernetes 群集分为两个组件:
- 控制平面 提供应用程序工作负载的核心 Kubernetes 服务和业务流程。
- 运行应用程序工作负荷的 节点。
Kubernetes 控制平面和节点组件
控制面板
创建 AKS 群集时,系统会自动创建和配置控制平面。 并将此控制平面作为提取自用户的 Azure 托管资源提供。 控制平面不产生费用,仅属于 AKS 群集的节点产生费用。 控制平面及其资源仅驻留在创建群集的区域。
控制平面包括以下 Kubernetes 核心组件:
- kube-apiserver - API 服务器,用于公开基础 Kubernetes API。 此组件为管理工具(如
kubectl或 Kubernetes 仪表板)提供交互。 - etcd - 可维护 Kubernetes 群集和配置的状态,高可用性 etcd 是 Kubernetes 中的键值存储。
- kube-scheduler - 创建或缩放应用程序时,计划程序可确定哪些节点可以运行工作负荷并启动这些节点。
- kube-controller-manager - 控制器管理器可监视许多较小的控制器,这些控制器执行 Pod 复制和节点处理等操作。
AKS 提供单租户控制平面、专用 API 服务器、计划程序等。你定义节点的数量和大小,Azure 平台配置控制平面和节点之间的安全通信。 通过 Kubernetes API(例如 kubectl 或 Kubernetes 仪表板)与控制平面进行交互。
这种托管控制平面意味着无需配置高可用性 etcd 存储等组件,但也意味着无法直接访问控制平面。 通过 Azure CLI 或 Azure 门户安排 Kubernetes 升级,先升级控制平面,再升级节点。 要解决可能出现的问题,可以通过 Azure Monitor 日志查看控制平面日志。
如果需要以特定方式配置控制平面或直接访问它,可以使用 aks-engine 部署自己的 Kubernetes 群集。
如需相关的最佳做法,请参阅 AKS 中群集安全性和升级的最佳做法。
节点和节点池
要运行应用程序和支持服务,需要 Kubernetes 节点。 一个 AKS 群集有一个或多个节点,这是运行 Kubernetes 节点组件和容器运行时的 Azure 虚拟机 (VM):
kubelet是 Kubernetes 代理,用于处理来自控制平面的业务流程请求并计划运行请求的容器。- 虚拟网络由每个节点上的 kube-proxy 处理。 代理路由流量并管理服务和 Pod 的 IP 地址。
- 容器运行时是允许容器化应用程序运行并与其他资源(如虚拟网络和存储)进行交互的组件。 在 AKS 中,Moby 用作容器运行时。
Azure 虚拟机和 Kubernetes 节点的支持资源
节点的 Azure VM 大小定义了 CPU 数量、内存大小以及可用存储的大小和类型(如高性能 SSD 或常规 HDD)。 如果预计需要大量 CPU 和内存或高性能存储的应用程序,则相应地规划节点大小。 还可以根据需要横向扩展 AKS 群集中的节点数。
在 AKS 中,群集中节点的 VM 映像当前基于 Ubuntu Linux 或 Windows Server 2019。 创建 AKS 群集或横向扩展节点数时,Azure 平台会创建所请求数量的 VM 并对其进行配置。 无需执行手动配置。 代理节点按标准虚拟机计费,因此,你所使用的 VM 大小的任何折扣 (包括 Azure 预订) 会自动应用。
如果需要使用不同的主机 OS、容器运行时或包含自定义包,可以使用 aks-engine 部署自己的 Kubernetes 群集。 上游 aks-engine 正式在 AKS 群集中受支持之前会发布功能并提供配置选项。 例如,如果要使用 Moby 以外的容器运行时,可以使用 aks-engine 来配置和部署满足当前需求的 Kubernetes 群集。
资源预留
AKS 利用节点资源,以使节点作为群集的一部分发挥作用。 这种用法可能会造成节点的资源总数和在 AKS 中使用时可分配的资源数之间存在差异。 在为用户部署的 Pod 设置请求和限制时,必须注意此信息。
若要查找节点的可分配资源,运行:
kubectl describe node [NODE_NAME]
为了保持节点性能和功能,AKS 在每个节点上预留资源。 随着节点资源的增加,由于需要管理的用户部署的 Pod 数量增加,资源预留也会增加。
Note: 使用容器见解 (OMS) 等 AKS 附加产品将消耗更多节点资源。
保留两种类型的资源:
-
CPU - 预留的 CPU 取决于节点类型和群集配置,这可能会由于运行其他功能而导致可分配的 CPU 较少
主机上的 CPU 核心数 1 2 4 8 16 32 64 Kube 预留 (millicore) 60 100 140 180 260 420 740 -
内存 - AKS 使用的内存包含两个值的和。
-
Kubelet 守护程序安装在所有 Kubernetes 代理节点上,用于管理容器的创建和停止使用。 在 AKS 上,此守护程序默认具有逐出规则 memory.available<750Mi,也就是说一个节点必须始终具有至少 750 Mi 的可分配内存。 主机低于该可用内存阈值时,kubelet 将终止某个正在运行的 pod,以释放主机上的内存并对其进行保护。 当可用内存下降到 750Mi 阈值以下时,会触发此操作。
-
第二个值是为 kubelet 守护程序正常运行而预留(kube 预留)的内存的递减速率。
- 前 4 GB 内存的 25%
- 下一个 4 GB 内存的 20%(最多 8 GB)
- 下一个 8 GB 内存的 10%(最多 16 GB)
- 下一个 112 GB 内存的 6%(最多 128 GB)
- 128 GB 以上任何内存的 2%
-
上述内存和 CPU 分配规则用于保持代理节点正常运行,包括一些对群集运行状况至关重要的托管系统 Pod。 这些分配规则还会使节点报告的可分配内存和 CPU 少于它不属于 Kubernetes 群集时的正常分配量。 上述资源预留无法更改。
例如,如果一个节点提供 7 GB 内存,它会报告 34% 的内存不可分配,包括 750Mi 硬逐出阈值。
0.75 + (0.25*4) + (0.20*3) = 0.75GB + 1GB + 0.6GB = 2.35GB / 7GB = 33.57% reserved
除了 Kubernetes 本身的预留外,基础节点 OS 还预留了一定数量的 CPU 和内存资源以维持 OS 功能的运行。
如需相关的最佳做法,请参阅 AKS 中适用于基本计划程序功能的最佳做法。
节点池
具有相同配置的节点将统一合并成节点池。 Kubernetes 群集包含一个或多个节点池。 创建 AKS 群集时会定义初始节点数和大小,从而创建默认节点池。 AKS 中的此默认节点池包含运行代理节点的基础 VM。
Note: 为确保群集可靠运行,应在默认节点池中至少运行 2(两)个节点。
缩放或升级 AKS 群集时,将对默认节点池执行操作。 还可以选择缩放或升级特定节点池。 对于升级操作,将在节点池中的其他节点上计划正在运行的容器,直到成功升级所有节点。
若要详细了解如何在 AKS 中使用多个节点池,请参阅为 AKS 中的群集创建和管理多个节点池。
节点选择器
在包含多个节点池的 AKS 群集中,可能需要告知 Kubernetes 计划程序要将哪个节点池用于给定的资源。 例如,入口控制器不应在 Windows Server 节点上运行。 可以通过节点选择器定义各种参数(如节点 OS),以控制对 Pod 进行计划的位置。
以下基本示例使用节点选择器 "beta.kubernetes.io/os": linux 来计划 Linux 节点上的 NGINX 实例:
kind: Pod
apiVersion: v1
metadata:
name: nginx
spec:
containers:
- name: myfrontend
image: mcr.microsoft.com/oss/nginx/nginx:1.15.12-alpine
nodeSelector:
"beta.kubernetes.io/os": linux
若要详细了解如何控制对 Pod 进行计划的位置,请参阅有关 AKS 中的高级计划程序功能的最佳做法。
Pod
Kubernetes 使用 Pod 来运行应用程序的实例。 Pod 表示应用程序的单个实例。 Pod 通常与容器存在 1 对 1 映射,但高级方案中一个 Pod 可能包含多个容器。 在同一个节点上共同计划这些多容器 Pod,并允许容器共享相关资源。
创建 Pod 时,可定义资源请求以请求一定数量的 CPU 或内存资源。 Kubernetes 计划程序尝试计划在具有可用资源的节点上运行 Pod,以满足请求。 此外可以指定最大资源限制,防止给定的 Pod 从基础节点消耗过多计算资源。 最佳做法是包括所有 Pod 的资源限制,以帮助 Kubernetes 计划程序了解所需和允许的资源。
有关详细信息,请参阅 Kubernetes Pod 和 Kubernetes Pod 生命周期。
Pod 是逻辑资源,但容器是应用程序工作负荷的运行位置。 Pod 通常是短暂的可支配资源,单独计划的 Pod 会错过 Kubernetes 提供的一些高可用性和冗余功能。 相反,Pod 由 Kubernetes 控制器(例如 Deployment 控制器)进行部署和管理。
部署和 YAML 清单
部署表示由 Kubernetes Deployment 控制器管理的一个或多个相同 Pod。 部署定义要创建的副本 (Pod) 数量,Kubernetes 计划程序确保如果 Pod 或节点出现故障,则在正常节点上安排其他 Pod。
可以更新部署以更改 Pod 的配置、使用的容器映像或附加存储。 Deployment 控制器耗尽并终止给定数量的副本,从新部署定义创建副本,并继续该过程,直至部署中的所有副本都已更新。
AKS 中的大多数无状态应用程序应使用部署模型,而不是计划单个 Pod。 Kubernetes 可以监视部署的运行状况和状态,以确保在群集中运行所需数量的副本。 只计划单个 Pod 时,如果 Pod 出现故障则不会重启;如果当前节点出现故障,则不会在正常节点上重新计划。
如果应用程序需要一定数量的实例才能做出管理决策,你不希望更新进程来中断该功能。 Pod 中断预算可用于定义在更新或节点升级期间部署中可以删除的副本数。 例如,如果部署中有五 (5) 个副本,则可以定义 4 个 Pod 中断,以便一次只允许删除/重新计划一个副本 。 与 Pod 资源限制一样,最佳做法是在需要始终存在最少数量副本的应用程序上定义 Pod 中断预算。
通常使用 kubectl create 或 kubectl apply 来创建和管理部署。 为创建部署,可使用 YAML(YAML 不标记语言)格式定义清单文件。 以下示例创建 NGINX Web 服务器的基本部署。 部署指定要创建的三 (3) 个副本,并要求在容器上打开端口 80 。 还为 CPU 和内存定义了资源请求和限制。
apiVersion: apps/v1
kind: Deployment
metadata:
name: nginx
spec:
replicas: 3
selector:
matchLabels:
app: nginx
template:
metadata:
labels:
app: nginx
spec:
containers:
- name: nginx
image: mcr.microsoft.com/oss/nginx/nginx:1.15.2-alpine
ports:
- containerPort: 80
resources:
requests:
cpu: 250m
memory: 64Mi
limits:
cpu: 500m
memory: 256Mi
通过在 YAML 清单中包含负载均衡器等服务,还可以创建更复杂的应用程序。
有关详细信息,请参阅 Kubernetes 部署。
使用 Helm 进行包管理
在 Kubernetes 中管理应用程序的常用方法是使用 Helm。 可以生成和使用包含应用程序代码打包版本和 Kubernetes YAML 清单的现有公共 Helm chart 来部署资源。 这些 Helm chart 可以存储在本地,通常也可以存储在远程存储库中,例如 Azure 容器注册表 Helm chart 存储库。
若要使用 Helm,请在计算机上安装 Helm 客户端,或使用 Azure Cloud Shell中的 Helm 客户端。 可以使用客户端搜索或创建 Helm chart,然后将其安装到 Kubernetes 群集。 有关详细信息,请参阅在 AKS 中使用 Helm 安装现有应用程序。
StatefulSet 和 DaemonSet
Deployment 控制器使用 Kubernetes 计划程序在具有可用资源的任何可用节点上运行给定数量的副本。 这种使用部署的方法对于无状态应用程序可能已足够,但对于需要持久命名约定或存储的应用程序则不行。 对于群集内需要在每个节点或选定节点上存在副本的应用程序,Deployment 控制器不会查看副本在节点间的分布情况。
以下两种 Kubernetes 资源可以管理这类应用程序:
- StatefulSet - 维护超出单个 Pod 生命周期的应用程序的状态(如存储)。
- DaemonSet - 确保在 Kubernetes 启动进程早期每个节点上都有正在运行的实例。
StatefulSet
现代应用程序开发通常针对无状态应用程序,但 StatefulSet 可用于有状态应用程序(如包含数据库组件的应用程序)。 StatefulSet 是类似于创建和管理一个或多个相同 Pod 的部署。 StatefulSet 中的副本按照正常有序的方法来部署、缩放、升级和终止。 使用 StatefulSet(重新计划副本时),命名约定、网络名称和存储将保持不变。
使用 kind: StatefulSet 以 YAML 格式定义应用程序,然后 StatefulSet 控制器处理所需副本的部署和管理。 数据会写入到由 Azure 托管磁盘或 Azure 文件提供的永久性存储。 使用 StatefulSet,删除 StatefulSet 时,基础持久性存储仍然保持不变。
有关详细信息,请参阅 Kubernetes StatefulSet。
计划 StatefulSet 中的副本,并在 AKS 群集中的任何可用节点上运行这些副本。 如需确保集中至少有一个 Pod 在节点上运行,则可以改用 DaemonSet。
DaemonSet
对于特定的日志集合或监视需求,可能需要在所有或选定的节点上运行给定的 Pod。 DaemonSet 再次用于部署一个或多个相同的 Pod,但 DaemonSet 控制器会确保指定的每个节点都运行 Pod 实例。
在默认的 Kubernetes 计划程序启动之前,DaemonSet 控制器可以在群集启动进程的早期计划节点上的 Pod。 此功能可确保在计划 Deployment 或 StatefulSet 中的传统 Pod 之前启动 DaemonSet 中的 Pod。
与 StatefulSet 一样,系统使用 kind: DaemonSet 将 DaemonSet 定义为 YAML 定义的一部分。
有关详细信息,请参阅 Kubernetes DaemonSet。
Note: 如果使用 虚拟节点外接程序,daemonset 将不会在虚拟节点上创建 pod。
命名空间
Kubernetes 资源(如 Pod 和部署)以逻辑方式分组到命名空间中。 这些分组提供了一种以逻辑方式划分 AKS 群集并限制创建、查看或管理资源访问权限的方法。 例如,可以创建命名空间以分隔业务组。 用户只能与分配的命名空间内的资源进行交互。
Kubernetes 命名空间以逻辑方式划分资源和应用程序
创建 AKS 群集时,以下命名空间可用:
- default - 不提供任何命名空间时,默认情况下在此命名空间中创建 Pod 和部署。 在小型环境中,可以将应用程序直接部署到默认命名空间,而无需创建其他逻辑分隔。 与 Kubernetes API(例如
kubectl get pods)交互时,如果未指定命名空间,则使用默认值。 - kube-system - 此命名空间是核心资源的所在位置,例如 DNS 和代理等网络功能或 Kubernetes 仪表板。 通常不会将应用程序部署到此命名空间中。
- kube-public - 通常不使用此命名空间,但可以用于让资源在整个群集中可见,并可供任何用户查看。
有关详细信息,请参阅 Kubernetes 命名空间。
后续步骤
本文涵盖了一些核心 Kubernetes 组件以及如何将它们应用于 AKS 群集的内容。 有关核心 Kubernetes 和 AKS 概念的详细信息,请参阅以下文章:
历史资料。此文对应 2022-08-12 的中文文档快照,适用产品版本和命令行为以原文为准。
来源与署名:Microsoft 和文档贡献者。固定版本原文。文档采用 CC BY 4.0,示例代码采用 MIT 授权。本站将 Markdown 转为 HTML,规范化链接,移除外部媒体和导航标记。
