企业的实时数据一般存储在大数据引擎中,实时数据通常会产生许多非结构化的日志数据,这类日志数据以及企业的离线数据可以使用通过Elasticsearch全托管方式提供的冷热存储方案进行存储。基于该功能,DataWorks为您提供了整库离线同步数据至Elasticsearch的解决方案,轻松助力企业同步整库数据至Elasticsearch中。同时,您可以查看创建的同步任务详情,监控任务的运行状况,提高自动化运维管理效率。整库离线同步任务可以将业务库数据全量或增量同步至ElasticSearch中,用于做数据检索、数据分析或后续进行数据开发。其优势如下:整库级别同步。 无需逐个创建表级别的数据同步任务,支持直接创建库级别的同步任务,选择目标库的部分或全部表数据进行同步。同步方式多样。 支持全量、增量以及全量和增量相结合的方式同步数据。同时,支持对同步任务进行周期性调度配置。配置操作简单。 您无需进行创建同步任务、创建数据库、创建表、创建相互依赖以及执行参数对齐等复杂操作,通过简单的产品配置向导,即可完成对应功能的配置。成本较低,自动化运维管理效率较高。 https://help.aliyun.com/document_detail/198908.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。