【案例学习】两年打造150,000个容器,看PAYPAL的Docker实践之路

简介: PayPal最初使用Docker只是为了创建一种单一的、一致的应用程序打包格式,但随着对Docker容器格式和操作的深入理解,PayPal为开发人员学习和使用容器打开了全新的大门

背景介绍

PayPal(贝宝)是美国eBay公司的全资子公司。1998年12月由Peter Thiel及Max Levchin建立,总部位于美国加利福尼亚州圣荷西市。PayPal致力于使金融服务大众化,让人们与企业能够参与到全球经济的繁荣发展中。PayPal开放式的数字支付平台让2.18亿用户相信他们能够以一种全新且强大的方式进行交易。为了实现这一目标,PayPal建立了全球性服务网络,确保用户可以随时、随地使用PayPal。如果PayPal的服务器出现故障,那么这种影响会波及到许多只依靠PayPal进行支付解决方案的小型企业客户。

案例简介

PayPal借助于Docker 企业版来帮助他们提高运营效率(构建、测试、部署周期的速度提高50%)。与此同时,他们通过Docker的动态部署能力和基础设施的独立性提高了其应用程序的可用性。为了提高安全性,PayPal利用Docker的自动化和细粒度的控制来把控资源的访问情况。除了运营方面的好处之外,PayPal还利用Docker进行创新,并尝试新的工具和框架,由于之前PayPal应用程序的复杂性导致这些工具和框架的创新难以引入。

PayPal的容器打开方式

虽然PayPal可能不是一家“老”公司,但他们在17年的时间里,建立了一个全球性的支付平台,其中包括数百个甚至数千个应用程序和服务。由于缺乏标准化导致构建、测试、部署和运行这些应用程序需要用到不同的工具和流程,对于开发团队来说,他们被锁定在一套有限的工具和框架中很难添加全新的东西,因此他们便将压力强加给测试和运营团队,使他们能够找到部署和运行每一个新堆栈的方法。测试和运营团队将这些堆栈部署到多个体系架构和多个云的应用程序,它们每一个都有不同的设备和程序集,这无疑导致了部署和维护的周转时间变慢。

paypal_

PayPal最初使用Docker只是为了创建一种单一的、一致的应用程序打包格式,但随着对Docker容器格式和操作的深入理解,PayPal为开发人员学习和使用容器打开了全新的大门。由于Docker提供了运输和运行应用程序的标准方法,开发人员可以自由地尝试新的编程方法和框架,而运营和支持团队则不必担心这些复杂性。随着开发人员加入Docker供给链,PayPal认识到其应用程序的构建、测试、部署的周期提高了50%以上。使用Docker,每个开发人员、测试人员、运营人员和自动化工具都能够使用相同的配置运行相同的应用程序。对于系统管理员来说,还有额外的好处。过去升级操作系统需要一年的时间才能完成,现在只需简单的为容器镜像更新Dockerfile文件就可以了。由于这些好消息在PayPal内部传播,原本不属于该试点项目的其他团队也开始尝试采用Docker作为自己的用例,而PayPal的Docker试点团队也帮助他们顺利的开展了工作。

分阶段执行的计划

Phase 1: 应用容器化的研究

5

在这个阶段,组建核心容器技术专家团队,找到各技术栈的有威望的资深老程序员,大家开始研究 Docker 所有的技术细节和最佳实践。

比如,我们在支付过程中遇到了一个bug,就立刻联系Docker公司并成为合作伙伴,共同探讨获得开源项目之外的建议,立刻在随后的版本中迭代使用。
6
9
10

Phase 2:开发人员介入

11

经过上一个 phase 的经验积累和典型case实践,这时开始让各个开发人员放开手脚接触 Docker,并且我们开始了各种相关工具的开发并开始延伸建设 DevOps 平台。

曾经,Paypal的一个小小升级最终耗费了一年时间才落地,因为它牵扯到了整个工具链的支持升级。但是现在,我们可以针对性地之去改变真正需要改变的。

12
13_nodejs

Phase 3:迁移到CaaS平台

在这个阶段,我们才开始容器编排系统的使用,并着手解决网络、存储等一切事情。我们不希望每次迁移到新的云时,都将一切重来一遍。

15

同时,在这个阶段我们才真正开始讨论如何提高效率。要知道,在第一阶段讨论这个是没有意义的,因为彼时一切还在VM中。如下图中运维的ROI评定结果显示,减少了25%的生产环境 vCpu 和50%的测试环境vCpu。

16

在这个阶段,我们开始真正地想要创建一个统一的平台,去完成我们15年来的各种不同工具所做的任务。我们希望运维同学可以在这个标准化平台上实现监控、管理等运维任务。

而对于开发者,不需要每次都构建基础架构环境,不需要单独的容错系统,通过编排工具快速完成以前耗时过长的任务,并且他们可以确信应用的成千上百的实例正在运行。

17

写在最后

18

上面这张图,就是Paypal如何有条不紊地进行容器化落地。

从第一阶段开始,在不到两年的时间里,PayPal已经把超过700个应用程序移植到Docker上,运行在15万个容器中。在此过程中,PayPal在构建、测试和部署Docker化应用程序方面的生产力提高了50%。过去升级操作系统需要花费一年的时间,而现在只需在开发、测试和生产过程中通过变更Dockerfile就可以完成。开发人员可以自由探索新兴技术,而运营人员和管理人员也可以使用同一套操作过程来应对全部的应用程序。

在最后阶段,PayPal已经开始在所有云平台上推出一个完整的容器即服务(CaaS)平台。在这个阶段,他们关注提高效率。到目前为止,迁移到新的Docker CaaS平台的应用程序已经减少了资源消耗,提高了安全性和可用性,并使PayPal能够为所有环境提供一个单一平台来运行、监控和操作。

paypal_2

PayPal实施Docker的过程是其他组织效仿的伟大蓝图。着眼于采取可管理的步骤,建立一个可以咨询和协助其他团队的内部专家团队,制定明确的目标和衡量成果是实现大幅度改善运营和发展转型的关键。

目录
相关文章
|
9月前
|
Kubernetes Docker Python
Docker 与 Kubernetes 容器化部署核心技术及企业级应用实践全方案解析
本文详解Docker与Kubernetes容器化技术,涵盖概念原理、环境搭建、镜像构建、应用部署及监控扩展,助你掌握企业级容器化方案,提升应用开发与运维效率。
1268 108
|
8月前
|
弹性计算 关系型数据库 微服务
基于 Docker 与 Kubernetes(K3s)的微服务:阿里云生产环境扩容实践
在微服务架构中,如何实现“稳定扩容”与“成本可控”是企业面临的核心挑战。本文结合 Python FastAPI 微服务实战,详解如何基于阿里云基础设施,利用 Docker 封装服务、K3s 实现容器编排,构建生产级微服务架构。内容涵盖容器构建、集群部署、自动扩缩容、可观测性等关键环节,适配阿里云资源特性与服务生态,助力企业打造低成本、高可靠、易扩展的微服务解决方案。
2327 10
|
8月前
|
缓存 安全 Linux
优化Docker镜像大小的多阶段构建实践
优化Docker镜像大小的多阶段构建实践
525 99
|
11月前
|
存储 容器
46.[HarmonyOS NEXT RelativeContainer案例三] 打造自适应容器:内容驱动的智能尺寸调整技术
在HarmonyOS NEXT的UI开发中,创建能够根据内容自动调整尺寸的容器是实现灵活布局的关键。RelativeContainer结合自适应尺寸设置,可以实现内容驱动的智能尺寸调整,使UI更加灵活且易于维护。本教程将详细讲解如何创建自适应尺寸的RelativeContainer,帮助你掌握这一实用技术。
332 5
|
7月前
|
NoSQL 算法 Redis
【Docker】(3)学习Docker中 镜像与容器数据卷、映射关系!手把手带你安装 MySql主从同步 和 Redis三主三从集群!并且进行主从切换与扩容操作,还有分析 哈希分区 等知识点!
Union文件系统(UnionFS)是一种**分层、轻量级并且高性能的文件系统**,它支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a single virtual filesystem) Union 文件系统是 Docker 镜像的基础。 镜像可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像。
835 6
|
10月前
|
Cloud Native 中间件 调度
云原生信息提取系统:容器化流程与CI/CD集成实践
本文介绍如何通过工程化手段解决数据提取任务中的稳定性与部署难题。结合 Scrapy、Docker、代理中间件与 CI/CD 工具,构建可自动运行、持续迭代的云原生信息提取系统,实现结构化数据采集与标准化交付。
1064 1
云原生信息提取系统:容器化流程与CI/CD集成实践
|
Ubuntu 关系型数据库 MySQL
容器技术实践:在Ubuntu上使用Docker安装MySQL的步骤。
通过以上的操作,你已经步入了Docker和MySQL的世界,享受了容器技术给你带来的便利。这个旅程中你可能会遇到各种挑战,但是只要你沿着我们划定的路线行进,你就一定可以达到目的地。这就是Ubuntu、Docker和MySQL的灵魂所在,它们为你开辟了一条通往新探索的道路,带你亲身感受到了技术的力量。欢迎在Ubuntu的广阔大海中探索,用Docker技术引领你的航行,随时准备感受新技术带来的震撼和乐趣。
520 16
|
监控 Kubernetes Cloud Native
基于阿里云容器服务Kubernetes版(ACK)的微服务架构设计与实践
本文介绍了如何基于阿里云容器服务Kubernetes版(ACK)设计和实现微服务架构。首先概述了微服务架构的优势与挑战,如模块化、可扩展性及技术多样性。接着详细描述了ACK的核心功能,包括集群管理、应用管理、网络与安全、监控与日志等。在设计基于ACK的微服务架构时,需考虑服务拆分、通信、发现与负载均衡、配置管理、监控与日志以及CI/CD等方面。通过一个电商应用案例,展示了用户服务、商品服务、订单服务和支付服务的具体部署步骤。最后总结了ACK为微服务架构提供的强大支持,帮助应对各种挑战,构建高效可靠的云原生应用。
|
存储 Ubuntu 关系型数据库
《docker基础篇:7.Docker容器数据卷》包括坑、回顾下上一讲的知识点,参数V、是什么、更干嘛、数据卷案例
《docker基础篇:7.Docker容器数据卷》包括坑、回顾下上一讲的知识点,参数V、是什么、更干嘛、数据卷案例
289 13
|
监控 Cloud Native Java
基于阿里云容器服务(ACK)的微服务架构设计与实践
本文介绍如何利用阿里云容器服务Kubernetes版(ACK)构建高可用、可扩展的微服务架构。通过电商平台案例,展示基于Java(Spring Boot)、Docker、Nacos等技术的开发、容器化、部署流程,涵盖服务注册、API网关、监控日志及性能优化实践,帮助企业实现云原生转型。