引言

随着企业数字化转型加速，单一云厂商的锁定风险和可用性瓶颈日益凸显。2025年，多云Kubernetes（K8s）已成为高可用架构的主流选择。本文基于天亿互联多年云服务经验，手把手教你构建跨云K8s集群，实现故障自动转移与流量调度。

一、多云K8s高可用架构核心组件

要实现多云高可用，需以下核心组件：

  • 多集群联邦（KubeFed）：统一管理多个集群，分发应用与配置。
  • 跨云网络（Cilium + Submariner）：打通Pod IP，实现跨集群服务发现。
  • 存储复制（Rook Ceph / Velero）：数据跨云同步，确保灾难恢复。
  • 全局负载均衡（GSLB）：基于DNS或Anycast路由用户流量。

二、部署步骤

步骤1：准备多云环境

在AWS（us-east-1）、阿里云（cn-hangzhou）、腾讯云（ap-guangzhou）各创建一个K8s集群（版本≥1.28），并确保网络互通（使用VPN或专线）。

步骤2：安装KubeFed

# 安装kubefedctl工具
wget https://github.com/kubernetes-sigs/kubefed/releases/latest/download/kubefedctl-linux-amd64
chmod +x kubefedctl && sudo mv kubefedctl /usr/local/bin/

# 初始化联邦控制平面（以主集群为例）
kubefedctl init --host-cluster-context=aws-cluster --kubefed-namespace=kube-fed

# 注册其他集群
kubefedctl join aliyun-cluster --host-cluster-context=aws-cluster --kubefed-namespace=kube-fed
kubefedctl join tencent-cluster --host-cluster-context=aws-cluster --kubefed-namespace=kube-fed

步骤3：配置跨云网络

使用Submariner实现集群间Pod网络互通。在每朵云上安装Submariner，并设置全局netid。

# 在AWS集群安装broker
subctl deploy-broker --kubeconfig aws.kubeconfig

# 在阿里云和腾讯云集群加入broker
subctl join --kubeconfig aliyun.kubeconfig broker-info.subm --clusterid aliyun-cluster
subctl join --kubeconfig tencent.kubeconfig broker-info.subm --clusterid tencent-cluster

验证连通性：subctl show connections 查看所有集群状态。

步骤4：部署应用并实现联邦

# 创建联邦命名空间
kubectl --context=aws-cluster create ns demo
kubectl create -f - <

步骤5：配置存储复制

使用Velero定时备份PV数据到云对象存储，并在目标集群恢复。

# 在AWS安装Velero
velero install --provider aws --bucket velero-backup --secret-file credentials-aws --backup-location-config region=us-east-1

# 创建每日备份计划
velero schedule create daily-backup --schedule="0 2 * * *" --include-namespaces demo

步骤6：设置GSLB全局负载均衡

使用云解析服务（如阿里云DNS/腾讯云DNSPod）配置加权轮询，将流量分发到多集群Ingress。

# 示例：DNS记录权重配置（以阿里云为例）
# 记录类型: A, 记录值: 1.2.3.4 (aws ingress), 权重: 50
# 记录类型: A, 记录值: 5.6.7.8 (aliyun ingress), 权重: 30
# 记录类型: A, 记录值: 9.10.11.12 (tencent ingress), 权重: 20

三、故障切换与演练

模拟AWS集群宕机，观察流量自动切至其他集群，并验证数据恢复。

# 模拟故障：删除AWS集群所有节点
export KUBECONFIG=aws.kubeconfig
kubectl delete node --all

# 监控全局负载均衡，10分钟后流量应全部指向阿里云和腾讯云

四、性能优化与成本控制

  • 利用KubeFed的副本调度策略，按需分配各集群副本数。
  • 使用Cluster Autoscaler各云实例组，根据CPU/内存自动扩缩容。
  • 通过Spot实例（抢占式）降低成本，但需保证关键业务有On-Demand实例兜底。

总结

通过上述步骤，你已成功搭建多云K8s高可用集群。天亿互联建议定期进行混沌工程演练，验证系统韧性。如需进一步优化，可联系我们获取定制化方案。