1
条回答
写回答
写回答
-
推荐回答Lambda实时数仓也是业界相对通用的解决方案，数据采集之后根据业务需求分为实时层与离线层，分别进行实时处理和离线处理。处理结果在数据服务层对接数据应用之前会进行数据的合并，从而实现实时数据与离线数据同时服务于在线数据应用和数据产品。离线层处理：采集数据归并到离线数仓之后，首先会统一到ODS层。对ODS层的数据进行简单数据清洗，构建DWD层（明细层）。在数据建模的过程中，为了提高数据分析效率以及进行业务分层，会对DWD层的数据进行进一步的加工和处理，相当于预计算。预计算结果在对接数据服务之前还会转储到一些离线存储系统中。 实时层处理：逻辑与离线层类似，但是更加讲究时效性。实时层同样是对上游数据库或者系统的数据进行实时数据的订阅和消费。消费数据之后会将其写到实时的DWD层或DWS层。实时计算引擎提供的是计算能力，最终处理结果需要写到一些实时存储中，例如KV Store等。以上内容摘自《阿里云实时数仓Hologres最佳实践合集》电子书，点击https://developer.aliyun.com/topic/download?id=996 可下载完整版
2022-09-26 23:36:04赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
本技术圈将为大家分析有关阿里云产品Hologres的最新产品动态、技术解读等，也欢迎大家加入钉钉群--实时数仓Hologres交流群32314975
热门讨论
热门文章
CCO是什么？
2828
Hologres delete 分区表的数据 ，需要一个一个分区挨个删除？
203
有hologres官方的同学可以帮忙看下这个问题吗？
779
update主键报错Feature not supported: UPDATE with shard
8038
Hologres org.postgresql.util.尝试连线已失败什么原因？
833
Hologres函数不存在，什么原因？
66
有人知道server busy是什么情况吗？
4816
Hologres如何查看分区表？
383
Hologres登录实例失败怎么解决？
75
请问Hologres这个报错是什么原因？
252
展开全部
【云栖实录】Hologres3.0全新升级：一体化实时湖仓平台
808
基于hologres搭建轻量OLAP分析平台解决方案评测
381
Hologres揭秘:深度解析高效率分布式查询引擎
10937
10亿+/秒！看阿里如何搞定实时数仓高吞吐实时写入与更新
5256
森马基于MaxCompute+Hologres+DataWorks构建数据中台
1372
Hologres+Flink企业级实时数仓核心能力介绍
77099
一站式实时数仓Hologres整体能力介绍—2024实时数仓Hologres公开课 01
129293
钱大妈数据中台建设最佳实践
8047
技术揭秘：从双11看实时数仓Hologres高可用设计与实践
4192
数仓架构“瘦身”，Hologres 5000CU时免费试用
7949
展开全部
