《阿里云存储手册》——产品技术内核——盘古

简介: 《阿里云存储手册》——产品技术内核——盘古

阿里云存储产品技术内核飞天盘古



飞天盘古是阿里云自研的分布式存储系统,采用分布式系统先进的容错架构和柔性平台设计, 具备弹性伸缩、自动负载均衡等能力,大幅提高存储系统的可靠性和安全性。 在云存储技术演进的过程中,飞天盘古引领行业从毫秒级存储向微秒存储的时代演进,推动存 储软件与闪存硬件的协同设计。与业界厂商共同提出NVMe ZNS 国际技术标准(NVMe2.0), 是目前云计算业内最为先进的软硬一体深度融合的分布式存储系统。目前已经围绕飞天盘古系 统获得发明专利超过190件。2018年,面向人工智能、科学计算、深度学习等未来存储场景, 阿里云分布式存储系统飞天盘古2.0正式发布,相比上一代系统,整体IOPS性能提升50%。 同时推出基于飞天盘古2.0的ESSD高性能云盘,IOPS从2万提升到了100万,性能提升高达50 倍。


image.png

飞天盘古2.0进一步优化了全栈系统架构,全 面升级了通用的飞天盘古基础核心层,包含 单机存储引擎、多副本协议、元数据管理、 磁盘管理、数据放置策略、数据校验、纠删 码等基础组件,形成核心技术优势。 经过十二年的技术演进,阿里巴巴实现了统 一存储的目标。以“飞天盘古”系统做为统一 的底座, 通过标准化、服务化和开放化的方式建立了完整的存储产品和服务体系,统一服务内部和外部 的客户。



相关文章
|
存储 缓存 固态存储
ZNS SSD前途是否一片光明?
ZNS SSD虽然有很大的优势,想要创出一片天地,依然需要多方面的努力。期待ZNS SSD可以早日实现美好的愿景。
|
存储 调度 块存储
阿里云连续两年斩获全球存储顶会FAST最佳论文
阿里云连续两年斩获全球存储顶会FAST最佳论文
1151 0
|
资源调度 分布式计算 安全
伏羲—阿里云分布式调度系统
在12月12日的云栖社区在线培训上,“飞天”分布式系统核心开发人员陶阳宇分享了《伏羲-阿里云分布式调度系统》。他主要从伏羲系统架构、任务调度、资源调度、容错机制、规模挑战、安全与性能隔离方面介绍了伏羲分布式系统架构和设计理念。
23233 0
|
存储 资源调度 分布式计算
LC3|视角 开源大数据生态下的高性能分布式文件系统
## 背景介绍 盘古是阿里云自主研发的高可靠、高可用、高性能分布式文件系统,距今已经有将近10年的历史。盘古1.0作为阿里云的统一存储核心,稳定高效的支撑着阿里云ECS、NAS、OSS、OTS、ODPS、ADS等多条业务线的迅猛发展。但最近几年,基于如下两方面的原因,盘古还是重新设计实现了第二代存储引擎盘古2.0,其不只为阿里云,也为集团、蚂蚁金服的多种业务提供了更佳优异的存储服务 #
3439 0
|
11月前
|
存储 运维 安全
盘古分布式存储系统的稳定性实践
本文介绍了阿里云飞天盘古分布式存储系统的稳定性实践。盘古作为阿里云的核心组件,支撑了阿里巴巴集团的众多业务,确保数据高可靠性、系统高可用性和安全生产运维是其关键目标。文章详细探讨了数据不丢不错、系统高可用性的实现方法,以及通过故障演练、自动化发布和健康检查等手段保障生产安全。总结指出,稳定性是一项系统工程,需要持续迭代演进,盘古经过十年以上的线上锤炼,积累了丰富的实践经验。
866 7
|
存储 Cloud Native 块存储
EBS深度解析:云原生时代企业级块存储
企业上云的策略,从 Cloud-Hosting 转向 Serverless 架构。块存储作为企业应用上云的核心存储产品,将通过 Serverless 化来加速新的计算范式全面落地。在本话题中,我们将会介绍阿里云块存储企业级能力的创新,深入解析背后的技术细节,分享对未来趋势的判断。
948 3
|
存储 调度 块存储
十二年磨一剑:三代架构演进,打造高性能、低成本的块存储!
上周,全球计算机存储顶会USENIX FAST 2024 在美国加州圣克拉拉召开,继去年获得国内首个FAST最佳论文奖后,凭借在分布式块存储上的创新,阿里云新作再次斩获FAST大会最佳论文奖。这也是国内唯一一家连续两年获得FAST最佳论文奖的科技公司。
106887 105
|
存储 人工智能 安全
CPFS深度解析:并行文件存储加速AI创新
在生成式AI的大潮中,并行文件系统作为高性能数据底座,为AI算力提供高吞吐、低延迟的数据存储服务。在本话题中,我们将介绍阿里云并行文件存储CPFS针对AI智算场景而提供的产品能力演进与更新,深入讲解在性能、成本、稳定、安全等方面的技术创新。
1114 0
|
存储 分布式计算 Hadoop
ChunkServer 原理与架构详解
【8月更文第30天】在分布式文件系统中,ChunkServer 是一个重要的组件,负责存储文件系统中的数据块(chunks)。ChunkServer 的设计和实现对于确保数据的高可用性、一致性和持久性至关重要。本文将深入探讨 ChunkServer 的核心原理和内部架构设计,并通过代码示例来说明其实现细节。
634 1