阿里云Kubernetes容器服务 - 快速部署虚拟节点virtual-nodes

本文涉及的产品
容器镜像服务 ACR,镜像仓库100个 不限时长
简介: 容器和Serverless的多样结合 随着容器和Serverless概念的普及,阿里云容器服务团队和弹性计算团队合作推出了多个Serverless容器产品和解决方案,包括Serverless Kubernetes、弹性容器实例ECI、virtual-nodes addon功能。

容器和Serverless的多样结合

随着容器和Serverless概念的普及,阿里云容器服务团队和弹性计算团队合作推出了多个Serverless容器产品和解决方案,包括Serverless Kubernetes、弹性容器实例ECI、virtual-nodes addon功能。这些不同的产品为用户提供了丰富的无服务器容器应用场景支持。

Serverless Kubernetes

阿里云容器服务的Serverless Kubernetes已经公测一段时间,用户无需管理服务器,同时能够正常使用kubernetes各种API操作,包括创建pod、service、ingress、job等。无服务器的最大价值不仅是免去了服务器运维的负担,更为应用提供了强大的弹性扩容能力,弹性不再受限于集群的节点规模,而且应用仅按资源使用量付费。

image

Kubernetes Virtual Nodes

为了进一步优化容器服务的使用体验和提供更多场景的丰富支持,我们推出了virtual-nodes功能,为用户的kubernetes集群提供极致的弹性扩容的能力。

image

如上图所示,virtual-nodes为经典kubernetes集群添加了虚拟节点,集群中真实worker节点和虚拟节点同时存在,通过虚拟节点动态创建ECI容器实例。ECI的pod与真实节点上的pod互联互通,都运行在同一个用户vpc网络中。

通过virtual-nodes,用户无需创建的新的集群,在原有的kubernetes集群中就可以获得“无限”的弹性能力,用户无需创建出很多真实worker节点就可以享受到“无限”的计算容量。virtual-nodes可应用在大数据计算、基因计算、视频渲染、混合云等典型计算场景,对于在线应用的短时间扩容同样适用。

通过virtual-nodes,我们给基于有限节点的kubernetes集群赋予了"无限"扩容的能力

我们如何使用virtual-nodes呢?让我们先了解下背后的实现原理。

弹性容器实例ECI和Virutal Kubelet

弹性容器实例ECI

弹性容器实例是阿里云弹性计算团队最新推出的一款敏捷安全的Serverless容器运行时服务。弹性容器实例具备如下特点:

  • 无需管理基础设施即可运行容器
  • 灵活按需使用,按秒计费
  • 借助安全沙箱技术确保应用安全

更多信息请参考产品页:https://www.aliyun.com/product/eci

与Serverless Kubernetes容器服务不同的是,ECI不提供原生的kubernetes API,比如无法使用kubectl操作pod/service/ingress/job资源。但通过virtual kubelet创新性的把kubernetes和ECI连接在了一起,实现了通过kubernetes API动态创建ECI实例。

Virtual Kubelet

Virtual Kubelet最初是微软Azure发起的开源项目,目标是让公有云的弹性容器实例类产品能与kubernetes更好的集成,实现kubernetes的serverless能力。在实现上VK提供了一种机制可以与多家不同的provider集成,目前已支持Azure的ACI、AWS的fargate、华为的CCI。VK也被应用在IoT Edge场景。近期我们也提交了ECI的provider并已被合并:https://github.com/virtual-kubelet/virtual-kubelet/tree/master/providers/alicloud

image

Virutal Kubelet向kubernetes APIServer注册了一个虚拟节点,持续监听pod变化事件,并动态创建ECI实例。

Virutal Kubelet通过虚拟节点的方式创新性的连接了Kubernetes与ECI,Virutal Kubelet和ECI是virtual nodes的技术基础设施。

下面将介绍如何在阿里云容器服务中部署virtual nodes。

在阿里云托管kubernetes集群中部署virtual nodes

1. 开通ECI

ECI目前正在公测,需要填写邀测申请开通服务:https://page.aliyun.com/form/act171611821/index.htm

2. 创建托管Kubernetes集群

进入容器服务控制台创建托管Kubernetes集群
https://cs.console.aliyun.com/#/k8s/cluster/create/managed

image

集群创建成功后,可以在集群管理或节点页面查看vswitchid、securitygroup信息。

3. 使用kubectl一键部署virtual nodes

请替换alicloud-virtual-kubelet.yaml文件中的ECI_VSWITCH、ECI_SECURITY_GROUP、ECI_ACCESS_KEY、ECI_SECRET_KEY环境变量

# cat alicloud-virtual-nodes-eci.yaml
apiVersion: v1
kind: ServiceAccount
metadata:
  name: alicloud-virtual-nodes-eci
  namespace: kube-system
---
apiVersion: rbac.authorization.k8s.io/v1beta1
kind: ClusterRoleBinding
metadata:
  name: alicloud-virtual-nodes-eci
  namespace: kube-system
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: ClusterRole
  name: cluster-admin
subjects:
  - kind: ServiceAccount
    name: alicloud-virtual-nodes-eci
    namespace: kube-system
---
apiVersion: apps/v1beta2
kind: Deployment
metadata:
  name: alicloud-virtual-nodes-eci
  namespace: kube-system
  labels:
    app: alicloud-virtual-nodes-eci
spec:
  replicas: 1
  selector:
    matchLabels:
      app: alicloud-virtual-nodes-eci
  template:
    metadata:
      labels:
        app: alicloud-virtual-nodes-eci
    spec:
      serviceAccount: alicloud-virtual-nodes-eci
      containers:
      - name: alicloud-virtual-kubelet
        image: registry.cn-hangzhou.aliyuncs.com/acs/virtual-nodes-eci:v1.0.0.1-aliyun
        imagePullPolicy: Always
        args: ["--provider", "alibabacloud"]
        env:
        - name: KUBELET_PORT
          value: "10250"
        - name: VKUBELET_POD_IP
          valueFrom:
            fieldRef:
              fieldPath: status.podIP
        - name: VKUBELET_TAINT_KEY
          value: "virtual-kubelet.io/provider"
        - name: VKUBELET_TAINT_VALUE
          value: "alibabacloud"
        - name: VKUBELET_TAINT_EFFECT
          value: "NoSchedule"
        - name: ECI_REGION
          value: "cn-hangzhou"
        - name: ECI_VSWITCH
          value: "xxx"
        - name: ECI_SECURITY_GROUP
          value: "xxx"
        - name: ECI_ACCESS_KEY
          value: "xxx"
        - name: ECI_SECRET_KEY
          value: "xxx"

执行yaml文件,然后查看pod和节点状态,可以发现,集群中已经添加了一个新的virtual node虚拟节点

# kubectl apply -f ./alicloud-virtual-nodes-eci.yaml
serviceaccount "alicloud-virtual-nodes-eci" created
clusterrolebinding "alicloud-virtual-nodes-eci" created
deployment "alicloud-virtual-nodes-eci" created
# kubectl -n kube-system get pod|grep virtual-nodes
alicloud-virtual-nodes-eci-54b748489c-gkcmn          1/1       Running   0          53s
# kubectl get node
NAME                                 STATUS    ROLES     AGE       VERSION
cn-hangzhou.i-bp19cyop0b1skne04djt   Ready     <none>    10m       v1.11.2
cn-hangzhou.i-bp19cyop0b1skne04dju   Ready     <none>    10m       v1.11.2
cn-hangzhou.i-bp19cyop0b1skne04djv   Ready     <none>    10m       v1.11.2
virtual-kubelet                      Ready     agent     55s       v1.11.2

通过控制台,同样可以看到virtual-kubelet虚拟节点的存在。
image

4. 部署Pod到虚拟节点上

虚拟节点已经存在,我们需要为即将运行的pod设置nodeSelector和tolerations,让pod调度到virtual-kubelet虚拟节点上。

# cat nginx.yaml
apiVersion: v1
kind: Pod
metadata:
  name: nginx
spec:
  containers:
  - image: nginx
    imagePullPolicy: Always
    name: nginx
  nodeSelector:
    kubernetes.io/role: agent
    beta.kubernetes.io/os: linux
    type: virtual-kubelet
  tolerations:
  - key: virtual-kubelet.io/provider
    operator: Exists
# kubectl get pod
NAME      READY     STATUS    RESTARTS   AGE
nginx     1/1       Running   0          1m

我们可以看到,nginx pod被调度到虚拟节点中,没有运行在集群中任何一个worker节点之上。通过这种virtual nodes的方式,实现了容器应用的无服务器化部署和弹性扩容,用户无需再为集群的节点规格选择和容量规划而烦劳。

总结

通过上面的步骤,我们可以快速部署virtual node,但上述配置过程还是略显繁琐,用户需要配置AK和集群的vswitch/安全组信息,未来我们将会在阿里云容器服务控制台支持一键部署virtual-nodes插件,让用户免于虚拟节点配置的过程,轻松让k8s集群拥有强大的弹性扩容能力。请持续关注阿里云容器服务最新产品动态。

参考链接:
申请ECI使用:https://page.aliyun.com/form/act171611821/index.htm
ECI控制台https://www.aliyun.com/product/eci
Virtual Kubelet Provier for ECI: https://github.com/virtual-kubelet/virtual-kubelet/tree/master/providers/alicloud
创建托管Kubernetes集群:https://cs.console.aliyun.com/#/k8s/cluster/create/managed
创建Serverless Kubernetes集群https://cs.console.aliyun.com/#/k8s/cluster/create/serverless
Serverless Kubernetes示例:https://github.com/AliyunContainerService/serverless-k8s-examples

相关实践学习
巧用云服务器ECS制作节日贺卡
本场景带您体验如何在一台CentOS 7操作系统的ECS实例上,通过搭建web服务器,上传源码到web容器,制作节日贺卡网页。
容器应用与集群管理
欢迎来到《容器应用与集群管理》课程,本课程是“云原生容器Clouder认证“系列中的第二阶段。课程将向您介绍与容器集群相关的概念和技术,这些概念和技术可以帮助您了解阿里云容器服务ACK/ACK Serverless的使用。同时,本课程也会向您介绍可以采取的工具、方法和可操作步骤,以帮助您了解如何基于容器服务ACK Serverless构建和管理企业级应用。 学习完本课程后,您将能够: 掌握容器集群、容器编排的基本概念 掌握Kubernetes的基础概念及核心思想 掌握阿里云容器服务ACK/ACK Serverless概念及使用方法 基于容器服务ACK Serverless搭建和管理企业级网站应用
目录
相关文章
|
5天前
|
人工智能 Kubernetes 异构计算
大道至简-基于ACK的Deepseek满血版分布式推理部署实战
本教程演示如何在ACK中多机分布式部署DeepSeek R1满血版。
|
5天前
|
存储 Kubernetes 对象存储
部署DeepSeek但GPU不足,ACK One注册集群助力解决IDC GPU资源不足
借助阿里云ACK One注册集群,充分利用阿里云强大ACS GPU算力,实现DeepSeek推理模型高效部署。
|
10天前
|
存储 Kubernetes 测试技术
企业级LLM推理部署新范式:基于ACK的DeepSeek蒸馏模型生产环境落地指南
本教程演示如何在ACK中使用vLLM框架快速部署DeepSeek R1模型推理服务。
|
11天前
|
存储 人工智能 弹性计算
NVIDIA NIM on ACK:优化生成式AI模型的部署与管理
本文结合NVIDIA NIM和阿里云容器服务,提出了基于ACK的完整服务化管理方案,用于优化生成式AI模型的部署和管理。
|
2月前
|
Ubuntu Linux 开发工具
docker 是什么?docker初认识之如何部署docker-优雅草后续将会把产品发布部署至docker容器中-因此会出相关系列文章-优雅草央千澈
Docker 是一个开源的容器化平台,允许开发者将应用程序及其依赖项打包成标准化单元(容器),确保在任何支持 Docker 的操作系统上一致运行。容器共享主机内核,提供轻量级、高效的执行环境。本文介绍如何在 Ubuntu 上安装 Docker,并通过简单步骤验证安装成功。后续文章将探讨使用 Docker 部署开源项目。优雅草央千澈 源、安装 Docker 包、验证安装 - 适用场景:开发、测试、生产环境 通过以上步骤,您可以在 Ubuntu 系统上成功安装并运行 Docker,为后续的应用部署打下基础。
96 8
docker 是什么?docker初认识之如何部署docker-优雅草后续将会把产品发布部署至docker容器中-因此会出相关系列文章-优雅草央千澈
|
2月前
|
存储 Kubernetes 容器
K8S部署nexus
该配置文件定义了Nexus 3的Kubernetes部署,包括PersistentVolumeClaim、Deployment和服务。PVC请求20Gi存储,使用NFS存储类。Deployment配置了一个Nexus 3容器,内存限制为6G,CPU为1000m,并挂载数据卷。Service类型为NodePort,通过30520端口对外提供服务。所有资源位于`nexus`命名空间中。
|
6天前
|
Ubuntu API 网络虚拟化
ubuntu22 编译安装docker,和docker容器方式安装 deepseek
本脚本适用于Ubuntu 22.04,主要功能包括编译安装Docker和安装DeepSeek模型。首先通过Apt源配置安装Docker,确保网络稳定(建议使用VPN)。接着下载并配置Docker二进制文件,创建Docker用户组并设置守护进程。随后拉取Debian 12镜像,安装系统必备工具,配置Ollama模型管理器,并最终部署和运行DeepSeek模型,提供API接口进行交互测试。
131 15
|
1月前
|
Ubuntu NoSQL Linux
《docker基础篇:3.Docker常用命令》包括帮助启动类命令、镜像命令、有镜像才能创建容器,这是根本前提(下载一个CentOS或者ubuntu镜像演示)、容器命令、小总结
《docker基础篇:3.Docker常用命令》包括帮助启动类命令、镜像命令、有镜像才能创建容器,这是根本前提(下载一个CentOS或者ubuntu镜像演示)、容器命令、小总结
160 6
《docker基础篇:3.Docker常用命令》包括帮助启动类命令、镜像命令、有镜像才能创建容器,这是根本前提(下载一个CentOS或者ubuntu镜像演示)、容器命令、小总结
|
1月前
|
Kubernetes Linux 虚拟化
入门级容器技术解析:Docker和K8s的区别与关系
本文介绍了容器技术的发展历程及其重要组成部分Docker和Kubernetes。从传统物理机到虚拟机,再到容器化,每一步都旨在更高效地利用服务器资源并简化应用部署。容器技术通过隔离环境、减少依赖冲突和提高可移植性,解决了传统部署方式中的诸多问题。Docker作为容器化平台,专注于创建和管理容器;而Kubernetes则是一个强大的容器编排系统,用于自动化部署、扩展和管理容器化应用。两者相辅相成,共同推动了现代云原生应用的快速发展。
209 11
|
2月前
|
存储 Kubernetes 开发者
容器化时代的领航者:Docker 和 Kubernetes 云原生时代的黄金搭档
Docker 是一种开源的应用容器引擎,允许开发者将应用程序及其依赖打包成可移植的镜像,并在任何支持 Docker 的平台上运行。其核心概念包括镜像、容器和仓库。镜像是只读的文件系统,容器是镜像的运行实例,仓库用于存储和分发镜像。Kubernetes(k8s)则是容器集群管理系统,提供自动化部署、扩展和维护等功能,支持服务发现、负载均衡、自动伸缩等特性。两者结合使用,可以实现高效的容器化应用管理和运维。Docker 主要用于单主机上的容器管理,而 Kubernetes 则专注于跨多主机的容器编排与调度。尽管 k8s 逐渐减少了对 Docker 作为容器运行时的支持,但 Doc
178 5
容器化时代的领航者:Docker 和 Kubernetes 云原生时代的黄金搭档

热门文章

最新文章

相关产品

  • 容器计算服务
  • 容器服务Kubernetes版