DataWorks前是odps到达梦,现在直接修改数去向到的达梦,这种是模式的问题还是这平台本身对齐数据库数据来源才会有数据过滤操作?
odps reader仅支持按分区过滤 如果有其他过滤的需求 建议先在源端处理好再同步,按这个操作可以 临时表也是odps的临时表 ,不会减少源端数据https://help.aliyun.com/zh/dataworks/user-guide/supported-data-source-types-and-read-and-write-operations ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
DataWorks中的数据过滤操作主要是为了在数据同步过程中根据设定的规则筛选数据。如果您之前是从ODPS同步到达梦,现在直接修改数据同步的去向仍为达梦,这个过程涉及的不是模式问题,而是数据集成和数据过滤配置的更新。在DataWorks中,可以通过数据集成任务配置数据过滤转换,确保只有满足特定条件的数据被同步到目标数据库。请确保在修改数据源后,相应的数据过滤规则也已正确配置,以保证数据同步的准确性和一致性。 DataWorks-配置数据过滤转换的步骤(DataWorks产品信息)
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。