logo
Alauda Container Platform
English
简体中文
English
简体中文
logo
Alauda Container Platform
导航

概览

架构
发版日志

安装

概览

安装准备

前提条件
下载
节点预处理
安装
Global Cluster 灾难恢复

升级

概览
升级前准备
升级 global 集群
升级业务集群

用户界面

Web 控制台

概览
访问 Web 控制台
Customizing the Web Console
自定义左侧导航

CLI 工具

ACP CLI (ac)

使用 ACP CLI 入门
配置 ACP CLI
ac 和 kubectl 命令的使用
管理 CLI 配置文件
使用插件扩展 ACP CLI
AC CLI 开发者命令参考
AC CLI 管理员命令参考
violet CLI

配置

功能开关

集群

概览
不可变基础设施

节点管理

概览
向本地集群添加节点
管理节点
节点监控

托管集群

概述

导入集群

概览
导入标准 Kubernetes 集群
导入 OpenShift 集群
导入 Amazon EKS 集群
导入 GKE 集群
导入华为云 CCE 集群(公有云)
导入 Azure AKS 集群
导入阿里云 ACK 集群
导入腾讯云 TKE 集群
注册集群

公有云集群初始化

网络初始化

AWS EKS 集群网络初始化配置
AWS EKS 补充信息
华为云 CCE 集群网络初始化配置
Azure AKS 集群网络初始化配置
Google GKE 集群网络初始化配置

存储初始化

概览
AWS EKS 集群存储初始化配置
华为云 CCE 集群存储初始化配置
Azure AKS 集群存储初始化配置
Google GKE 集群存储初始化配置

如何操作

导入集群的网络配置
获取导入集群信息
信任不安全的镜像仓库
从自定义命名的网卡采集网络数据
创建本地集群
托管控制平面
集群节点规划
etcd 加密

如何操作

为内置镜像仓库添加外部访问地址
选择容器运行时
使用 Manager 策略优化 Pod 性能
更新公共仓库凭证

备份与恢复

概览
安装
备份仓库

备份管理

ETCD 备份
创建应用备份计划
钩子

恢复管理

运行应用恢复任务
镜像仓库替换

网络

操作指南

配置域名
创建证书
配置服务
配置 Ingresses
配置子网
配置 MetalLB
配置 GatewayAPI Gateway
配置 GatewayAPI 路由
配置 ALB
配置 NodeLocal DNSCache
配置 CoreDNS

实用指南

Ingress-Nginx 任务
Envoy Gateway 任务
软数据中心 LB 方案(Alpha)

Kube OVN

了解 Kube-OVN CNI
准备 Kube-OVN Underlay 物理网络
Underlay 和 Overlay 子网的自动互联
集群互联(Alpha)
配置 Egress Gateway
配置 IPPool
配置 Kube-OVN 网络以支持 Pod 多网卡(Alpha)
配置 Endpoint Health Checker

alb

Tasks for ALB

故障排除

如何解决 ARM 环境下的节点间通信问题?
查找错误原因

存储

介绍

核心概念

核心概念
Persistent Volume
访问模式和卷模式

操作指南

创建 CephFS 文件存储类型存储类
创建 CephRBD 块存储类
创建 TopoLVM 本地存储类
创建 NFS 共享存储类
部署 Volume Snapshot 组件
创建 PV
Creating PVCs
使用卷快照

实用指南

通用临时卷
使用 emptyDir
使用本地卷配置持久存储
使用 NFS 配置持久存储
第三方存储能力注解指南

故障排除

从 PVC 扩容失败中恢复

对象存储

介绍
核心概念
安装

操作指南

为 Ceph RGW 创建 BucketClass
为 MinIO 创建 BucketClass
创建 Bucket Request

实用指南

使用 CephObjectStoreUser(Ceph 驱动)控制 COSI 桶的访问权限和配额
机器配置

可扩展性与性能

评估业务集群资源
磁盘配置
评估 Global Cluster 的资源
提升大规模 Kubernetes 集群的稳定性

存储

Ceph 分布式存储

介绍

安装

创建标准型集群
创建 Stretch 类型集群
架构

核心概念

核心概念

操作指南

访问存储服务
存储池管理
节点特定组件部署
添加设备/设备类
监控与告警

实用指南

配置专用集群用于分布式存储
清理分布式存储

灾难恢复

文件存储灾备
块存储灾难恢复
对象存储灾备
更新优化参数
创建 Ceph 对象存储用户
设置存储池配额

MinIO 对象存储

介绍
安装
架构

核心概念

核心概念

操作指南

添加存储池
Monitoring & Alerts

实用指南

数据灾难恢复

TopoLVM 本地存储

介绍
安装

操作指南

设备管理
监控与告警

实用指南

使用 Velero 备份和恢复 TopoLVM 文件系统 PVC
配置条带逻辑卷

网络

概览

网络操作器

MetalLB Operator
Ingress Nginx Operator
Envoy Gateway Operator

ALB Operator

了解 ALB
Auth
为 ALB 部署高可用 VIP
在 ALB 中绑定网卡
ALB 性能选择的决策依据
ALB 中的负载均衡会话亲和策略
L4/L7 超时
HTTP 重定向
CORS
Header Modification
URL 重写
ModSecurity
OTel
TCP/HTTP Keepalive
ALB 与 Ingress-NGINX 注解兼容性
ALB 监控

网络安全

理解网络策略 API
管理员网络策略
网络策略

Ingress 和负载均衡

使用 Envoy Gateway 实现 Ingress 和负载均衡
网络可观测性

安全

Alauda Container Security

安全与合规

合规性

介绍
安装 Alauda Container Platform Compliance with Kyverno

使用指南

私有镜像仓库访问配置
镜像签名验证策略
使用 Secrets 的镜像签名验证策略
镜像仓库验证策略
容器逃逸防护策略
Security Context Enforcement Policy
网络安全策略
Volume Security Policy

API Refiner

介绍
安装 Alauda Container Platform API Refiner
关于 Alauda Container Platform Compliance Service

用户与角色

用户

介绍

操作指南

管理用户角色
创建用户
用户管理

组

介绍

操作指南

管理用户组角色
创建本地用户组
管理本地用户组成员

角色

介绍

操作指南

创建 Kubernetes 角色
RBAC 重构后的角色管理

IDP

介绍

操作指南

LDAP 管理
OIDC 管理

故障排除

删除用户

用户策略

介绍

多租户(项目)

介绍

操作指南

创建项目
管理项目配额
管理项目
管理项目集群
管理项目成员

审计

介绍

遥测

安装

证书

自动化 Kubernetes 证书轮换
cert-manager
OLM 证书
证书监控
轮换平台访问地址的 TLS 证书

虚拟化

虚拟化

概览

介绍
安装

镜像

介绍

操作指南

添加虚拟机镜像
更新/删除虚拟机镜像
更新/删除镜像凭据

实用指南

使用 KubeVirt 基于 ISO 创建 Windows 镜像
使用 KubeVirt 基于 ISO 创建 Linux 镜像
导出虚拟机镜像
权限

虚拟机

介绍

操作指南

创建虚拟机/虚拟机组
虚拟机批量操作
使用 VNC 登录虚拟机
管理密钥对
管理虚拟机
监控与告警
虚拟机快速定位

实用指南

配置 USB 主机直通
虚拟机热迁移
虚拟机恢复
在 KubeVirt 上克隆虚拟机
物理 GPU 直通环境准备
配置虚拟机高可用性
从现有虚拟机创建虚拟机模板

故障排除

Pod 迁移及虚拟机节点异常关闭恢复
热迁移错误信息及解决方案

网络

介绍

操作指南

配置网络

实用指南

通过网络策略控制虚拟机网络请求
配置 SR-IOV
配置虚拟机使用网络绑定模式以支持 IPv6

存储

介绍

操作指南

管理虚拟磁盘

备份与恢复

介绍

操作指南

使用快照
使用 Velero

开发人员

快速开始

Creating a simple application via image

构建应用

Build application architecture

核心概念

应用类型
Custom Applications
工作负载类型
理解参数
理解环境变量
理解启动命令
资源单位说明

命名空间

创建命名空间
导入 Namespace
资源配额
Limit Range
Pod Security Policies
UID/GID 分配
超售比
管理 Namespace 成员
更新命名空间
删除/移除命名空间

创建应用

Creating applications from Image
Creating applications from Chart
通过 YAML 创建应用
Creating applications from Code
Creating applications from Operator Backed
Creating applications by using CLI

应用的操作与维护

Application Rollout

安装 Alauda Container Platform Argo Rollouts
Application Blue Green Deployment
Application Canary Deployment
状态描述

KEDA(Kubernetes Event-driven Autoscaling)

KEDA 概览
Installing KEDA

实用指南

Integrating ACP Monitoring with Prometheus Plugin
在 KEDA 中暂停自动扩缩容
配置 HPA
启动和停止原生应用
配置 VerticalPodAutoscaler (VPA)
配置 CronHPA
更新原生应用
导出应用
更新和删除 Chart 应用
应用版本管理
删除原生应用
处理资源耗尽错误
健康检查

计算组件

Deployments
DaemonSets
StatefulSets
CronJobs
Jobs
Pods
Containers
使用 Helm Chart

配置

Configuring ConfigMap
Configuring Secrets

应用可观测

监控面板
Logs
Events

实用指南

设置定时任务触发规则
添加ImagePullSecrets到ServiceAccount

镜像

镜像概述

实用指南

Creating images
Managing images

镜像仓库

介绍

安装

通过 YAML 安装
通过 Web UI 安装

实用指南

Common CLI Command Operations
Using Alauda Container Platform Registry in Kubernetes Clusters

Source to Image

概览

介绍
架构
发版日志
生命周期策略

安装

Installing Alauda Container Platform Builds

升级

升级 Alauda Container Platform Builds

操作指南

Managing applications created from Code

实用指南

Creating an application from Code

节点隔离策略

介绍
架构

核心概念

Core Concepts

操作指南

创建节点隔离策略
权限
常见问题

Alauda Container Platform GitOps

关于 Alauda Container Platform GitOps

扩展

概览
Operator
集群插件
图表仓库
上架软件包

可观测性

概览

监控

介绍
安装

架构

Monitoring Module Architecture
Monitoring Component Selection Guide
监控组件容量规划
核心概念

操作指南

指标管理
告警管理
通知管理
监控面板管理
探针管理

实用指南

Prometheus 监控数据的备份与恢复
VictoriaMetrics 监控数据的备份与恢复
从自定义命名的网络接口采集网络数据

分布式追踪

介绍
安装
架构
核心概念

操作指南

Query Tracing
查询 Trace 日志

实用指南

Java 应用中追踪的非侵入式集成
业务日志与 TraceID 关联

故障排除

无法查询到所需的Tracing
不完整的追踪数据

日志

关于 Logging Service

事件

介绍
Events

检查

介绍
架构

操作指南

Inspection
Component Health Status

硬件加速器

关于 Alauda Build of Hami
关于 Alauda Build 的 NVIDIA GPU 设备插件

Alauda 服务网格

Service Mesh 1.x
Service Mesh 2.x

Alauda AI

关于 Alauda AI

Alauda DevOps

关于 Alauda DevOps

Alauda 成本管理

关于 Alauda 成本管理

Alauda 原生应用服务

概览

介绍
架构
安装
升级

Alauda Database Service for MySQL

About Alauda Database Service for MySQL-MGR
About Alauda Database Service for MySQL-PXC

Alauda Cache Service for Redis OSS

About Alauda Cache Service for Redis OSS

Alauda Streaming Service for Kafka

About Alauda Streaming Service for Kafka

Alauda Streaming Service for RabbitMQ

About Alauda Streaming Service for RabbitMQ

Alauda support for PostgreSQL

About Alauda support for PostgreSQL

运维管理

介绍

参数模板管理

介绍

操作指南

参数模板管理

备份管理

介绍

操作指南

外部 S3 存储
备份管理

检查管理

介绍

操作指南

创建巡检任务
Exec Inspection Task
更新和删除巡检任务

实用指南

如何设置巡检调度?

检查优化建议

MySQL

MySQL IO 负载优化
MySQL 内存使用优化
MySQL 存储空间优化
MySQL 活跃线程数优化
MySQL 行锁优化

Redis

Redis BigKey
Redis 中的高 CPU 使用率
Redis 中的高内存使用率

Kafka

Kafka 中的高 CPU 利用率
Kafka Rebalance 优化
Kafka 内存使用优化
Kafka 存储空间优化

RabbitMQ

RabbitMQ Mnesia 数据库异常处理

告警管理

介绍

操作指南

与平台能力的关系

升级管理

介绍

操作指南

实例升级

API 参考

概览

介绍
Kubernetes API 使用指南

Advanced APIs

Alert APIs

AlertHistories [v1]
AlertHistoryMessages [v1]
AlertStatus [v2]
SilenceStatus [v2]

Event APIs

Search

GitOps APIs

Core
Application
ApplicationSet

Log APIs

Aggregation
Archive
Context
Search

Monitoring APIs

Indicators [monitoring.alauda.io/v1beta1]
Metrics [monitoring.alauda.io/v1beta1]
Variables [monitoring.alauda.io/v1beta1]

Kubernetes APIs

Alert APIs

AlertTemplate [alerttemplates.aiops.alauda.io/v1beta1]
PrometheusRule [prometheusrules.monitoring.coreos.com/v1]

AutoScaling APIs

HorizontalPodAutoscaler [autoscaling/v2]

Configuration APIs

ConfigMap [v1]
Secret [v1]

Inspection APIs

Inspection [inspections.ait.alauda.io/v1alpha1]

MachineConfiguration APIs

MachineConfig [machineconfiguration.alauda.io/v1alpha1]
MachineConfigPool [machineconfiguration.alauda.io/v1alpha1]
MachineConfiguration [machineconfiguration.alauda.io/v1alpha1]

ModulePlugin APIs

ModuleConfig [moduleconfigs.cluster.alauda.io/v1alpha1]
ModuleInfo [moduleinfoes.cluster.alauda.io/v1alpha1]
ModulePlugin [moduleplugins.cluster.alauda.io/v1alpha1]

Namespace APIs

LimitRange [v1]
Namespace [v1]
ResourceQuota [v1]

Networking APIs

HTTPRoute [httproutes.gateway.networking.k8s.io/v1]
Service [v1]
VpcEgressGateway [vpc-egress-gateways.kubeovn.io/v1]
Vpc [vpcs.kubeovn.io/v1]

Notification APIs

Notification [notifications.ait.alauda.io/v1beta1]
NotificationGroup [notificationgroups.ait.alauda.io/v1beta1]
NotificationTemplate [notificationtemplates.ait.alauda.io/v1beta1]

Operator APIs

Operator [operators.operators.coreos.com/v1]

Workload APIs

Cronjob [batch/v1]
DameonSet [apps/v1]
Deployment [apps/v1]
Job [batch/v1]
Pod [v1]
Replicaset [apps/v1]
ReplicationController [v1]
Statefulset [apps/v1]
📝 在 GitHub 上编辑此页
上一页创建证书
下一页配置 Ingresses

以 PDF 格式查看完整文档

#配置服务

在 Kubernetes 中,Service 是一种用于暴露运行在集群中一个或多个 Pod 上的网络应用的方法。

#目录

#为什么需要 Service

  1. Pod 有自己的 IP,但:

    • Pod IP 不稳定(如果 Pod 被重新创建,IP 会变化)。

    • 直接访问 Pod 变得不可靠。

  2. Service 通过提供以下功能解决了这个问题:

    • 稳定的 IP 和 DNS 名称。

    • 自动负载均衡到匹配的 Pod。

#ClusterIP 类型 Service 示例:

# simple-service.yaml
apiVersion: v1
kind: Service
metadata:
  name: my-service
spec:
  type: ClusterIP
  selector:
    app.kubernetes.io/name: MyApp
  ports:
    - protocol: TCP
      port: 80
      targetPort: 80
  1. 可用的 type 值及其行为包括 ClusterIP、NodePort、LoadBalancer、ExternalName
  2. Service 目标的 Pod 集合通常由你定义的 selector 决定。
  3. Service 端口。
  4. 将 Service 的 targetPort 绑定到 Pod 的 containerPort。此外,也可以引用 Pod 容器下的 port.name。

#Headless 服务

有时你不需要负载均衡和单一的 Service IP。在这种情况下,可以创建所谓的 Headless 服务:

spec:
  clusterIP: None

Headless 服务适用于:

  • 你想发现单个 Pod 的 IP,而不仅仅是单一的服务 IP。

  • 你需要直接连接到每个 Pod(例如,像 Cassandra 或 StatefulSets 这样的数据库)。

  • 你使用 StatefulSets,其中每个 Pod 必须有稳定的 DNS 名称。

#通过 Web 控制台创建服务

  1. 进入 Container Platform。

  2. 在左侧导航栏点击 Network > Services。

  3. 点击 Create Service。

  4. 参考以下说明配置相关参数。

    参数说明
    虚拟 IP 地址如果启用,将为该 Service 分配一个 ClusterIP,可用于集群内的服务发现。
    如果禁用,将创建一个 Headless 服务,通常用于 StatefulSet。
    类型
    • ClusterIP:在集群内部 IP 上暴露 Service。选择此值时,Service 只能从集群内部访问。
    • NodePort:在每个节点的 IP 上通过静态端口(NodePort)暴露 Service。
    • ExternalName:将 Service 映射到 externalName 字段的内容(例如,主机名 api.foo.bar.example)。
    • LoadBalancer:通过外部负载均衡器对外暴露 Service。Kubernetes 本身不直接提供负载均衡组件,你需要自行提供,或者将 Kubernetes 集群与云提供商集成。
    目标组件
    • Workload:Service 会将请求转发到特定的工作负载,匹配标签如 project.cpaas.io/name: projectname 和 service.cpaas.io/name: deployment-name。

    • Virtualization:Service 会将请求转发到特定的虚拟机或虚拟机组。

    • Label Selector:Service 会将请求转发到带有指定标签的某类工作负载,例如 environment: release。
    端口用于配置该 Service 的端口映射。以下示例中,集群内其他 Pod 可以通过虚拟 IP(如果启用)和 TCP 端口 80 调用该 Service;访问请求将被转发到目标组件 Pod 的外部暴露的 TCP 端口 6379 或 redis。
    • 协议:Service 使用的协议,支持的协议包括:TCP、UDP、HTTP、HTTP2、HTTPS、gRPC。
    • Service 端口:Service 在集群内暴露的端口号,即 Port,例如 80。
    • 容器端口:Service 端口映射到的目标端口号(或名称),即 targetPort,例如 6379 或 redis。
    • Service 端口名称:会自动生成,格式为 <protocol>-<service port>-<container port>,例如:tcp-80-6379 或 tcp-80-redis。
    会话亲和性基于源 IP 地址(ClientIP)的会话亲和性。如果启用,来自同一 IP 地址的所有访问请求在负载均衡时会保持在同一服务器上,确保同一客户端的请求被转发到同一服务器处理。
  5. 点击 Create。

#通过 CLI 创建服务

kubectl apply -f simple-service.yaml

基于已有的 deployment 资源 my-app 创建服务。

kubectl expose deployment my-app \
  --port=80 \
  --target-port=8080 \
  --name=test-service \
  --type=NodePort \
  -n p1-1

#示例:集群内访问应用

# access-internal-demo.yaml
apiVersion: apps/v1
kind: Deployment
metadata:
  name: nginx-deployment
spec:
  replicas: 2
  selector:
    matchLabels:
      app: nginx
  template:
    metadata:
      labels:
        app: nginx
    spec:
      containers:
        - name: nginx
          image: nginx:1.25
          ports:
            - containerPort: 80
---
apiVersion: v1
kind: Service
metadata:
  name: nginx-clusterip
spec:
  type: ClusterIP
  selector:
    app: nginx
  ports:
    - port: 80
      targetPort: 80
  1. 应用该 YAML:

    kubectl apply -f access-internal-demo.yaml
  2. 启动另一个 Pod:

    kubectl run test-pod --rm -it --image=busybox -- /bin/sh
  3. 在 test-pod Pod 中访问 nginx-clusterip 服务:

    wget -qO- http://nginx-clusterip
    # 或使用 Kubernetes 自动创建的 DNS 记录:<service-name>.<namespace>.svc.cluster.local
    wget -qO- http://nginx-clusterip.default.svc.cluster.local

你应该能看到包含 “Welcome to nginx!” 字样的 HTML 响应。

#示例:集群外访问应用

# access-external-demo.yaml
apiVersion: apps/v1
kind: Deployment
metadata:
  name: nginx-deployment
spec:
  replicas: 2
  selector:
    matchLabels:
      app: nginx
  template:
    metadata:
      labels:
        app: nginx
    spec:
      containers:
        - name: nginx
          image: nginx:1.25
          ports:
            - containerPort: 80
---
apiVersion: v1
kind: Service
metadata:
  name: nginx-nodeport
spec:
  type: NodePort
  selector:
    app: nginx
  ports:
    - port: 80
      targetPort: 80
      nodePort: 30080
  1. 应用该 YAML:

    kubectl apply -f access-external-demo.yaml
  2. 查看 Pods:

    kubectl get pods -l app=nginx -o wide
  3. curl 访问 Service:

    curl http://{NodeIP}:{nodePort}

你应该能看到包含 “Welcome to nginx!” 字样的 HTML 响应。

当然,也可以通过创建 LoadBalancer 类型的 Service 从集群外访问应用。

注意:请提前配置 LoadBalancer 服务。

# access-external-demo-with-loadbalancer.yaml
apiVersion: apps/v1
kind: Deployment
metadata:
  name: nginx-deployment
spec:
  replicas: 2
  selector:
    matchLabels:
      app: nginx
  template:
    metadata:
      labels:
        app: nginx
    spec:
      containers:
        - name: nginx
          image: nginx:1.25
          ports:
            - containerPort: 80
---
apiVersion: v1
kind: Service
metadata:
  name: nginx-lb-service
spec:
  type: LoadBalancer
  selector:
    app: nginx
  ports:
    - port: 80
      targetPort: 80
  1. 应用该 YAML:

    kubectl apply -f access-external-demo-with-loadbalancer.yaml
  2. 获取外部 IP 地址:

    kubectl get svc nginx-lb-service
    NAME            TYPE           CLUSTER-IP       EXTERNAL-IP     PORT(S)        AGE
    nginx-service   LoadBalancer   10.0.2.57        34.122.45.100   80:30005/TCP   30s

    EXTERNAL-IP 即为你从浏览器访问的地址。

    curl http://34.122.45.100

你应该能看到包含 “Welcome to nginx!” 字样的 HTML 响应。

如果 EXTERNAL-IP 显示为 pending,说明 LoadBalancer 服务尚未在集群中部署。

#示例:ExternalName 类型的 Service

apiVersion: v1
kind: Service
metadata:
  name: my-external-service
  namespace: default
spec:
  type: ExternalName
  externalName: example.com
  1. 应用该 YAML:

    kubectl apply -f external-service.yaml
  2. 尝试在集群内的 Pod 中解析:

    kubectl run test-pod --rm -it --image=busybox -- sh

    然后执行:

    nslookup my-external-service.default.svc.cluster.local

你会看到它解析为 example.com。

#LoadBalancer 类型 Service 注解

#AWS EKS 集群

有关 EKS LoadBalancer Service 注解的详细说明,请参阅 Annotation Usage Documentation 。

KeyValue说明
service.beta.kubernetes.io/aws-load-balancer-typeexternal: 使用官方 AWS LoadBalancer Controller。指定 LoadBalancer 类型的控制器。

注意:请提前联系平台管理员部署 AWS LoadBalancer Controller。
service.beta.kubernetes.io/aws-load-balancer-nlb-target-type
  • instance:流量通过 NodePort 发送到 Pod。
  • ip:流量直接路由到 Pod(集群必须使用 Amazon VPC CNI)。
指定流量如何到达 Pod。
service.beta.kubernetes.io/aws-load-balancer-scheme
  • internal:私有网络。
  • internet-facing:公网网络。
指定使用私有网络还是公网网络。
service.beta.kubernetes.io/aws-load-balancer-ip-address-type
  • IPv4
  • dualstack
指定支持的 IP 地址栈。

#华为云 CCE 集群

有关 CCE LoadBalancer Service 注解的详细说明,请参阅 Annotation Usage Documentation 。

KeyValue说明
kubernetes.io/elb.id填写云负载均衡器的 ID,必须使用已有的云负载均衡器。
kubernetes.io/elb.autocreate示例:{"type":"public","bandwidth_name":"cce-bandwidth-1551163379627","bandwidth_chargemode":"bandwidth","bandwidth_size":5,"bandwidth_sharetype":"PER","eip_type":"5_bgp","available_zone":["cn-north-4b"],"l4_flavor_name":"L4_flavor.elb.s1.small"}

注意:请先阅读 填写说明,并根据需要调整示例参数。
新建云负载均衡器。
kubernetes.io/elb.subnet-id集群所在子网的 ID。当 Kubernetes 版本为 1.11.7-r0 或更低时,创建新云负载均衡器时必须填写此字段。
kubernetes.io/elb.class
  • union:共享负载均衡。
  • performance:独享负载均衡,仅支持 Kubernetes 1.17 及以上版本。
指定新建云负载均衡器的类型,详情请参考 独享与共享弹性负载均衡的区别。
kubernetes.io/elb.enterpriseID指定新建云负载均衡器所属的企业项目。

#Azure AKS 集群

有关 AKS LoadBalancer Service 注解的详细说明,请参阅 Annotation Usage Documentation 。

KeyValue说明
service.beta.kubernetes.io/azure-load-balancer-internal
  • true:私有网络。
  • false:公网网络。
指定使用私有网络还是公网网络。

#Google GKE 集群

有关 GKE LoadBalancer Service 注解的详细说明,请参阅 Annotation Usage Documentation 。

KeyValue说明
networking.gke.io/load-balancer-typeInternal指定使用私有网络。
cloud.google.com/l4-rbsenabled默认为公网。如果配置此参数,流量将直接路由到 Pod。

#示例:使用 MetalLB BGP 和 Local Traffic Policy 的 LoadBalancer

本示例演示如何使用 MetalLB BGP 模式配置 LoadBalancer 类型的 Service,并设置 externalTrafficPolicy: Local,实现无额外网络跳转的主动-主动负载均衡。

#优势

  • 主动-主动负载均衡:流量同时分布到多个节点
  • 无额外网络跳转:直接路由到 Pod,无需节点中转转发
  • 更好性能:externalTrafficPolicy: Local 保留源 IP,降低延迟
  • 高可用性:BGP 路由公告确保流量到达健康节点

#前提条件

配置 LoadBalancer Service 前,请确保:

  1. 已部署 MetalLB:参见 创建外部 IP 地址池 了解安装方法
  2. 已配置 BGP Peer:参见 创建 BGP Peers 了解 BGP 配置
  3. 外部 IP 地址池:配置带有 BGPAdvertisement 的 IPAddressPool

#步骤

使用 externalTrafficPolicy: Local 部署带 LoadBalancer 的应用:

# nginx-loadbalancer-local-demo.yaml
apiVersion: apps/v1
kind: Deployment
metadata:
  name: nginx-deployment
spec:
  replicas: 3
  selector:
    matchLabels:
      app: nginx
  template:
    metadata:
      labels:
        app: nginx
    spec:
      containers:
        - name: nginx
          image: nginx:1.25
          ports:
            - containerPort: 80
---
apiVersion: v1
kind: Service
metadata:
  name: nginx-loadbalancer-local
spec:
  type: LoadBalancer
  externalTrafficPolicy: Local
  selector:
    app: nginx
  ports:
    - port: 80
      targetPort: 80

#关键配置点

#externalTrafficPolicy: Local

externalTrafficPolicy: Local 设置带来多项好处:

  • 保留源 IP:客户端源 IP 得以保留,便于日志记录和安全策略
  • 直接路由 Pod:流量直接到达 Pod,无需节点级转发

#使用 BGP 的 LoadBalancer

使用 MetalLB BGP 模式时:

  • 路由由 BGPAdvertisement 中 nodeSelectors 指定的节点发布
  • BGP Peer 接收路由公告并进行流量路由
  • BGPPeer 和 BGPAdvertisement 的节点选择器需匹配,确保路由一致性

#部署步骤

  1. 部署应用:

    kubectl apply -f nginx-loadbalancer-local-demo.yaml
  2. 验证 LoadBalancer Service:

    kubectl get svc nginx-loadbalancer-local

    预期输出:

    NAME                     TYPE           CLUSTER-IP      EXTERNAL-IP   PORT(S)        AGE
    nginx-loadbalancer-local LoadBalancer   10.0.2.57       4.4.4.3       80:30005/TCP   30s
  3. 测试服务:

    curl http://4.4.4.3

#验证

  • 监控服务端点:kubectl get endpoints nginx-loadbalancer-local
  • 检查服务状态:kubectl describe svc nginx-loadbalancer-local