新数据时代:业务驱动的存储“双模式”

简介: 截然相反的两个数字,将数据与这个时代之间的“割裂”体现得淋漓尽致。

截然相反的两个数字,将数据与这个时代之间的割裂体现得淋漓尽致。

 

第一个数字是数据在不断变大。根据IDC的预测,全球数据总量预计2020年将达到44ZB,到2025年更将达到175ZB。而从企业的角度看,很多企业每年的数据增长量达到40%~60%,部分企业的数据量甚至呈指数式的增长。

 

而另一个数字则来自于麦肯锡的报告显示,目前大部分的企业对于自己所拥有数据的利用率还不足5%

 

一面是不断膨胀和爆发的数据量,另一面则是低于5%,甚至还在变得更低的数据使用率。这似乎为企业的数字化转型蒙上了一层阴影。企业在新的数据时代,应该怎样面对数据价值与应用之间的鸿沟?

326日,浪潮面向云数智应用,推出新一代数据中心级高端存储平台和新一代数据中心级分布式存储平台,在新数据时代,也许我们可以从中找到确切的答案。

 

新数据时代催生新存储

 

其实在去年,浪潮就提出了新数据时代的理念。浪潮的观点认为,在新数据时代里,数据不再只是物理世界的记录者,而是成为了新的生产资料,并逐渐发展出价值闭环。

 

的确,随着云计算、大数据、AIIoT5G等新技术的快速发展,使得新应用层出不穷,会产生新的数据形态、新的部署环境、新的应用模式、新的价值需求,这已成为所有行业的普世需求,所以定义这个变化为新数据时代是非常合理的。

 

在我看来,新数据时代的主要驱动力是企业从过去的业务驱动转向数据驱动。所以,企业必须要关注到数据发生着什么变化。

 

一方面,是数据量在无限放大,如前文所述,到2025年的175ZB数据量从今天的眼光看是非常惊人的。另一方面则是,数据类型的多样化。比如诸如文本、图片、音频和视频等非结构化数据的大量衍生,推动分布式存储和对象存储的需求出现了爆发式增长。

 

而从存储的角度,未来几年的快速增长也是可以预期的。根据IDC发布的报告,2018年中国外部存储市场2018年整体出货量为15.2万台,同比增长15.0%。其中,浪潮存储的成绩尤为亮眼,在2018年出货量13880台,增速26.8%居中国第一。

 

不难发现,新数据时代既增加了数据处理的难度,也为存储行业提出了很多新的课题,与此同时,也让传统存储的生存空间不断被压缩,新数据时代,本质上就是属于新存储的时代。

如浪潮集团副总裁胡雷均所说,我们处在一个不确定性的时代,唯一确定的就是不确定性。新数据时代各个行业用户提出了更多不确定的、场景化的需求,需要新的存储模式。

 

新存储将遵循业务为导向

 

行业里一直有存储危机论的存在,这种观点认为,存储在大规模数据中心中的地位在降低,也许存储相比于计算处于一个相对的低谷,但数据作为未来智能世界的核心元素,存储行业也必然会随着新存储时代的确立而迎来发展的高峰期。

 

过去的企业级存储主要有两大类:分别是NAS(网络接入存储)和SAN(存储区域网络)。这两大传统企业存储都有一个共同的特征,就是只能垂直扩展,它在管理、成本、容量和性能方面满足不了海量非结构化数据的存储需求。

 

客观说,云、数、智带来的极致容量、极速性能、极简架构、智能管理等方面的技术挑战,对传统存储来说几乎是不可承受之重,而这恰是新存储可以获得高速发展的机会。所以我们看到了多元化的存储类型出现,比如越来越多的应用现在都基于闪存实现,块存储、文件存储和对象存储新一代存储技术层出不穷,再有超融合、海量、AI等技术都在改变着传统存储。浪潮存储产品线总经理李辉认为,智慧应用驱动人类进入新数据时代,新数据时代为数据带来四大特征:新数据形态、新部署环境、新应用模式、新价值需求。在此基础之上,存储其实也发生一些改变。

 

首先是快。比如AI、工业互联、数据挖掘、实时分析、在线交易,这些新型应用对存储的性能提出了更高的要求,存储必须要保持微秒级的响应、低时延。

 

其次是高性能。这要求存储系统不仅要满足大量数据的海量存储需求,同时单节点需要支持极高的容量,以及支持多节点的线性扩展。很多传统应用,包括一些新型应用对性能的要求也变得越来越高。例如,某些核心应用已经要求百万级的IOPSTB级带宽这样级别的性能。

 

所以,业务为导向将是新存储的核心价值,这也将让存储数据中心的地位得到质的飞跃。

 

如李辉所说,依据云存智用 运筹新数据的新理念,浪潮存储将在数据中心放大存储能力,为用户带来新价值,从而帮助用户应对新数据时代应用对存储带来的新挑战。

 

正是基于对业务导向的理解,浪潮基于一套架构,为数据中心打造了两套全新的存储平台。数据中心级高端存储平台AS18000 G5与数据中心级分布式存储平台AS13000G5,帮助用户建设云化数据中心,应对智能应用挑战。

 

浪潮存储采用了同一套软件来满足不同客户的需求。针对不同场景,根据客户的不同需求,可以配置成大容量型和高性能型。这就是我所提到的,根据业务的侧重性来进行选择。

 

新存储的双模式

 

新存储时代,所谓的其实并不代表将完全颠覆甚至取代,如果站在客户的角度看,它们过去的基础设施投资依然存在价值。这才是浪潮之所以在一套架构下,推出两种存储平台的原因:以客户的业务走向为基点。

 

比如,数据中心级高端存储平台AS18000G5,定位为关键应用云,覆盖包括在线数据处理。浪潮发现,大量企业拥有自己的数据中心,公有云数据中心占的比例目前并不高,以可靠性为核心需求高端存储依然有很强的生命力。

 

浪潮也发现,在以金融为代表的核心机构开始使用全闪存,这意味着关键业务的闪存时代正在来临。所以,浪潮的AS18000G5HF18000G5,强调了对闪存的应用,分别为混闪存储和全闪存储两个系统平台。

 

以数据中心级高端存储平台AS18000G5为例,它采用全互联48控,IOPS提升至1500万,延迟降低至0.2 ms,容量最高达282PB,同时采取了融合存储:一套存储,可提供文件//对象,三种存储协议。最重要的是在稳定性上,它从电源到风扇、到存储系统和机柜,都是可以冗余的,堪称五星级的高可靠。

 

而数据中心级分布式存储平台AS13000G5的定位是弹性融合云。这是典型的面向未来云智应用的存储平台,并拥有5+X的技术优势。

 

在软件层面,它支持5种服务协议(文件、对象、块、HDFS、数据库协议),和X种融合平台;而在硬件层面,它支持5种硬件形态(机架式、高密式、机柜式、多节点式、边缘式),同时,X代表了多种硬件配置(x86机型、openpower机型、ARM机型、GPUAI等多种配置选型),可实现容量按需扩展、性能按需供给、服务按需定义。

 

我们知道,高端存储所支持的关键应用市场是稳增长的,从IDC的数据看,一直保持了5%10%的增长。而分布式存储刚刚打开闸门,是下一代存储发展趋势。所以,浪潮遵循业务驱动为核心,在一套架构之下,既延续了高端存储的应用空间,也为分布式存储的到来做足了准备。


相关文章
|
2月前
|
JavaScript 搜索推荐 前端开发
从提示工程转向 上下文工程,6种让LLM在生产环境中稳定输出的技术
本文系统阐述“上下文工程”(Context Engineering)——生产级AI系统的核心能力。它不依赖提示词优化,而是通过选择性检索、上下文压缩、层次化布局、动态查询重构、记忆注入与工具感知六大技术,精准控制模型在运行时“看到什么、何时看、如何看”,从而根治幻觉、提升准确率、降低Token消耗,让小模型也能稳定输出高质量结果。
331 16
从提示工程转向 上下文工程,6种让LLM在生产环境中稳定输出的技术
|
6月前
|
人工智能 自然语言处理 算法
数字人|数字人平台推荐与选择指南
数字人企业正引领未来产业变革,像衍科技依托顶尖科研实力,构建全链条技术壁垒,推动虚拟人在多场景落地。从技术突破到商业转化,数字人已迈入价值创造新阶段,重塑行业格局。
|
12月前
|
人工智能 运维 JavaScript
当AI学会了自我升级,天网还会远吗?
文章通过一个模拟侦探游戏的例子展示了AI如何通过“自我升级”和动态执行代码的能力来解决复杂问题。
425 33
当AI学会了自我升级,天网还会远吗?
|
C语言 开发者
【C语言】数学函数详解
在C语言中,数学函数是由标准库 `math.h` 提供的。使用这些函数时,需要包含 `#include <math.h>` 头文件。以下是一些常用的数学函数的详细讲解,包括函数原型、参数说明、返回值说明以及示例代码和表格汇总。
670 6
|
8月前
|
机器学习/深度学习 安全 Java
Java 大视界 -- Java 大数据在智能金融反洗钱监测与交易异常分析中的应用(224)
本文探讨 Java 大数据在智能金融反洗钱监测与交易异常分析中的应用,介绍其在数据处理、机器学习建模、实战案例及安全隐私等方面的技术方案与挑战,展现 Java 在金融风控中的强大能力。
|
10月前
|
存储 数据采集 文字识别
美团商家电话采集工具,可提取美团商户联系方式、地址、手机号、评分【autojs脚本版】
这是一款基于安卓无障碍服务的美团商家数据采集工具,包含主流程控制、页面解析、电话提取和工具函数四大模块。通过控件层级定位与OCR技术实现数据抓取,支持自动翻页及异常处理,最终以CSV格式存储结果。
客观评价模型与主观DMOS分数拟合的分享与实用性探讨
本文深入探讨了视频质量的主客观评价方法,指出客观评价方法旨在精确描述人眼的主观感受。文章介绍了微帧在日常训练中使用的拟合方法,通过映射函数将客观指标与主观评价DMOS分数进行非线性拟合,以提高评价的准确性、一致性、稳定性和单调性。具体讨论了SSIM、PSNR和VMAF等常见客观指标的拟合公式,并总结了拟合方法在分析质量差异、统一客观指标和指导参数设置方面的实用价值。
|
Ubuntu Oracle Java
百度搜索:蓝易云【Ubuntu安装Java环境】
现在,你已经成功在Ubuntu上安装了Java环境。你可以在终端中运行Java程序或编译Java源代码。请注意,Ubuntu默认安装的是OpenJDK,如果需要Oracle JDK等其他Java版本,可以参考相应的安装文档。
256 3
|
Web App开发 运维 安全
1Panel:一个现代化、开源的 Linux 服务器运维管理面板
1Panel:一个现代化、开源的 Linux 服务器运维管理面板
755 0