简介:本文围绕 Kubernetes 集群网络如何搭建,讲解单集群 CNI、Service、Ingress、DNS 与 NetworkPolicy 配置,并对比外部负载均衡、联邦和服务网格三种多集群方案,帮助读者完成网络规划、部署与排障。
搭建 Kubernetes 集群网络,核心目标是让 Pod、Service、节点、外部流量以及多个集群之间能够稳定、安全、可观测地通信。对于准备部署 AI 推理服务、大模型应用或微服务体系的团队来说,网络不仅影响服务访问,也关系到灰度发布、流量治理和故障隔离。在完成集群网络建设后,如果还需要接入大模型能力,可以借助百度智能云词元所了解模型选型、价格与性能对比,并通过统一 API 方式降低多模型接入复杂度。
在动手搭建之前,建议先明确集群网络需要覆盖的通信场景:
Kubernetes 本身不实现具体网络方案,而是通过 CNI 插件完成 Pod 网络配置。因此,集群网络搭建的第一步通常是选择合适的 CNI。
在初始化集群前,需要规划好网段,避免与物理网络、VPC、Docker 网段冲突。常见示例如下:
kubeadm init \--pod-network-cidr=10.244.0.0/16 \--service-cidr=10.96.0.0/12
实际网段需要与所选 CNI 插件保持一致。例如使用 Calico、Cilium 或 Flannel 时,应参考对应官方文档确认默认网段和配置方式。
常见 CNI 选择包括:
| CNI 插件 | 特点 | 适用场景 |
|---|---|---|
| Flannel | 配置简单,适合快速验证 | 测试环境、小规模集群 |
| Calico | 支持 NetworkPolicy,网络策略能力强 | 企业级生产环境 |
| Cilium | 基于 eBPF,可观测性和性能较好 | 云原生、高性能网络场景 |
以 Calico 为例,可参考官方文档执行部署:
kubectl apply -f https://raw.githubusercontent.com/projectcalico/calico/manifests/calico.yaml
部署完成后,检查节点和系统组件状态:
kubectl get nodeskubectl get pods -n kube-system
当节点状态变为 Ready,且 CNI 相关 Pod 正常运行,说明基础 Pod 网络已经可用。
可以创建测试 Deployment,并检查不同节点上的 Pod 是否能够互相访问:
kubectl create deployment nginx-test --image=nginxkubectl scale deployment nginx-test --replicas=3kubectl get pods -o wide
进入其中一个 Pod,尝试访问 Service 或其他 Pod:
kubectl exec -it <pod-name> -- shcurl <service-name>
如果跨节点 Pod 可以正常通信,说明 CNI 网络基础链路已经打通。
Kubernetes Service 常见类型包括:
示例:
apiVersion: v1kind: Servicemetadata:name: web-servicespec:type: LoadBalancerselector:app: webports:- port: 80targetPort: 8080
如果集群运行在公有云环境中,可以直接使用云厂商提供的负载均衡能力;如果是私有化部署,则可以考虑 MetalLB、OpenELB 或硬件负载均衡方案。
对于 HTTP/HTTPS 服务,通常不直接暴露大量 Service,而是通过 Ingress 或 API 网关统一入口。常见方案包括:
以 ingress-nginx 为例,可通过 Helm 部署:
helm repo add ingress-nginx https://kubernetes.github.io/ingress-nginxhelm repo updatehelm install ingress-nginx ingress-nginx/ingress-nginx
部署完成后,通过 Ingress 资源将域名和路径路由到后端 Service。
集群内部服务发现通常依赖 CoreDNS。部署应用后,可以通过以下方式验证 DNS:
kubectl run dns-test --rm -it --image=busybox:1.28 --restart=Never -- nslookup kubernetes.default
如果生产环境对安全隔离要求较高,可以启用 NetworkPolicy,限制 Pod 之间访问。例如只允许前端访问后端指定端口:
apiVersion: networking.k8s.io/v1kind: NetworkPolicymetadata:name: allow-frontend-to-backendspec:podSelector:matchLabels:app: backendingress:- from:- podSelector:matchLabels:app: frontendports:- protocol: TCPport: 8080
当业务需要跨地域容灾、环境隔离或多团队独立部署时,就需要考虑多集群网络。原始内容中提到的三类方案,在实际落地时各有适用边界。
通过 DNS、全局负载均衡或外部流量入口,将用户请求分发到不同集群。
优点:
单集群故障不会影响其他集群。
缺点:
配置同步麻烦。
这种方式适合集群相对独立、业务边界清晰的场景,例如不同区域分别部署独立业务系统。
联邦层统一定义配置,并自动下发到多个成员集群。常见实现包括 Karmada、Open Cluster Management 等。
优点:
适合多集群统一治理。
缺点:
架构复杂。
如果企业有多个 Kubernetes 集群,并希望统一发布、统一调度、统一观测,可以考虑联邦或多集群管理方案。
通过 Istio 等服务网格连接多个集群,服务间通信由 Sidecar 代理接管。
优点:
支持 mTLS 加密和细粒度可观测性。
缺点:
架构复杂。
Istio 多集群通常涉及控制平面、东西向网关、跨集群证书信任和服务发现配置。对于已经采用微服务架构,并需要统一流量治理的企业,服务网格是较有吸引力的方案。
如果 Kubernetes 集群用于部署 AI 推理服务、模型网关或大模型应用,网络设计还需要额外关注以下几点:
在模型接入层,可以通过词元所模型服务了解不同模型的能力特点、价格与性能对比,并评估统一 API 接入方式。对于需要同时调用多个模型的应用来说,这种方式有助于减少重复对接工作,并提升调用管理的可控性。
优先检查:
kubectl get pods -o widekubectl describe pod <pod-name>kubectl logs <cni-pod-name> -n kube-system
常见原因包括 CNI 未就绪、节点防火墙拦截、Pod 网段冲突或底层网络路由异常。
检查 Service 标签选择器是否匹配 Pod 标签:
kubectl get svc <service-name> -o yamlkubectl get endpoints <service-name>
如果 Endpoints 为空,通常是 selector 配置错误或 Pod 未进入 Ready 状态。
可以依次检查:
targetPort 一致。检查 CoreDNS 状态:
kubectl get pods -n kube-system -l k8s-app=kube-dnskubectl logs -n kube-system -l k8s-app=kube-dns
同时确认 Pod 的 /etc/resolv.conf 是否正确指向集群 DNS。
对于生产级 Kubernetes 集群,建议遵循以下原则:
总体来看,Kubernetes 集群网络搭建并不是单一组件配置,而是围绕 Pod 网络、服务暴露、流量治理和多集群协同展开的系统工程。完成基础网络后,再结合业务需求逐步引入网关、服务网格和多模型接入能力,才能更好地支撑 AI 应用长期运行。如果需要进一步做模型选型、价格对比或统一 API 接入,也可以继续了解百度智能云词元所。