数据中台如何建设,如何选型?

本文涉及的产品
阿里云百炼推荐规格 ADB PostgreSQL,4核16GB 100GB 1个月
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: 数据中台往往是伴随企业数字化经营战略进行规划的,是企业企业战略中的重要部分,数据中台建设包含团队搭建、设备采购、平台开发/采购等,预期百万级至千万级启动资金以及每年数百万的持续投入,所以如何建设、如何选型成为数据中台建设首先要考虑的事项。

如果是数据中台或者大数据从0到1的组织,或者没有太多落地经验的组织,首先要考虑如何避免如下的坑:
image.png
1.目标不明确、期望值过高、成本收益不清晰

家里到底有多少数据?大数据能实现什么样的目标?投入大概有多少?

是不是上了大数据就可以看到财务指标的提升?

我见过总共几个G的数据,买套BI就能解决还要花费几百万上大数据平台的案例,

也见过花费了几百万打造大数据平台只产出了一张大屏的案例。

2.缺乏战略规划和持续投入

对大部分企业型组织来说,大数据往往是伴随数字化经营战略进行规划的,要跟企业战略保持一致。

数据团队的建设包含团队搭建、设备采购、平台建设、预期百万级至千万级启动资金,每年数百万的持续投入,如果没有长远的规划和持续的投入很容易就会陷入半途而废的境地。

关于数据中台, 这个概念本身可能目前还有争论,我个人认为数据中台最核心的价值是把数据真正的纳入到业务闭环当中,实现业务数据化+数据业务化,而不仅仅停留在数据看板、分析报告上。

关于如何选型,建议参考下面的步骤:

先对自身的信息系统、数据资源进行调研,对数据量、数据类型、数据价值进行分析。
从组织各个层面挖掘潜在的数据需求(营销、预测、查询、数据交换等),对经营指标体系和业务流程进行分析,考虑如何利用数据中台将数据融入到业务闭环当中。
案例分析,寻找同行业数据中台的实施案例,但是需要仔细鉴别宣传中给出的各种数字,结合自身的业务判断是否符合自身的要求。
路径选择,自研还是采购,开源还是商用产品,私有部署还是公有云,如果考虑最低成本的,可以全部采用开源解决方案进行组合,比如
数据中台架构里面包括数据采集、数据存储、数据计算、数据治理、数据服务五大部分,前三个大家都差不多,更多的是技术指标,最值得关注的是数据治理和数据服务两部分:
1)数据治理主要包括数据标准、数据质量和数据安全三部分,这三部分功能各家厂商的产品设计各有差异。也有一些针对行业特殊的设计,特别是数据标准,有些行业经验比较丰富的厂商通常会提供相应的经过实践检验的模板。
2)数据服务主要包括数据目录、标签工厂、数据分析、数据服务接口、算法模型等,各家厂商的支持程度以及设计差异也较大,有一些产品会内置一些针对行业的一些功能。
产品实施,一般采购产品的话会配套一个实施的项目,会把一些基础的数仓规划设计、数据采集、数据标准实现出来,并结合产品完成一套符合客户的数据开发流程、数据开发规范、数据运维规范。

相关实践学习
阿里云百炼xAnalyticDB PostgreSQL构建AIGC应用
通过该实验体验在阿里云百炼中构建企业专属知识库构建及应用全流程。同时体验使用ADB-PG向量检索引擎提供专属安全存储,保障企业数据隐私安全。
AnalyticDB PostgreSQL 企业智能数据中台:一站式管理数据服务资产
企业在数据仓库之上可构建丰富的数据服务用以支持数据应用及业务场景;ADB PG推出全新企业智能数据平台,用以帮助用户一站式的管理企业数据服务资产,包括创建, 管理,探索, 监控等; 助力企业在现有平台之上快速构建起数据服务资产体系
目录
相关文章
|
6月前
|
SQL 存储 数据采集
数据中台建设方法论
数据中台建设方法论
|
机器学习/深度学习 消息中间件 算法
如何设计数据中台
如何设计数据中台
666 0
|
4月前
|
数据采集 机器学习/深度学习 数据可视化
从零到一建设数据中台 - 数据服务开发
从零到一建设数据中台 - 数据服务开发
82 0
|
4月前
|
存储 SQL 分布式计算
从零到一建设数据中台 - 关键技术汇总
从零到一建设数据中台 - 关键技术汇总
98 0
|
存储 SQL 分布式计算
数据中台实战(11)-数据中台的数据安全解决方案
数据中台实战(11)-数据中台的数据安全解决方案
409 1
|
数据采集 供应链 数据可视化
数据中台实战(02)-什么企业适合建设数据中台?
数据中台实战(02)-什么企业适合建设数据中台?
113 0
|
存储 数据采集 分布式计算
我在数据中台建设和落地的一些经验总结
数据治理是数字化建设中非常重要的一环。在进行数据治理时,我们需要根据不同的业务场景和需求,选择最适合的数据治理方案,包括选择不同的组件组装和数据存储方式等。对于轻量级数据管理平台和重量级数据管理平台,我们可以针对具体情况进行选择,权衡成本与效益,以满足客户实际需求。在整个数据治理过程中,我们还需要注重客户成本的管理,确保项目的落地和实际效果,并且不断优化数据治理流程,需要积极参与业务需求分析和技术选型,确保数据治理方案符合客户需求和行业标准。
|
人工智能 大数据 BI
政务数据中台解决方案
助力“数据赋能政务“,深入政务场景构建数字化管理工具,支撑政府决策科学化、社会治理精准化、公共服务高效化!
3713 0
政务数据中台解决方案
|
存储 数据采集 分布式计算
什么是OneData?阿里数据中台实施方法论解读
什么是OneData?阿里数据中台实施方法论解读
10746 2
什么是OneData?阿里数据中台实施方法论解读
|
数据采集 机器学习/深度学习 运维
《数据中台架构:企业数据化最佳实践》:感受数据中台建设五步法
《数据中台架构:企业数据化最佳实践》:感受数据中台建设五步法
1225 0
《数据中台架构:企业数据化最佳实践》:感受数据中台建设五步法