Dataphin中逻辑表的数据重复了 怎么去删除？
"Dataphin中逻辑表的数据重复了 怎么去删除？我大概是物理表的数据 cvs文件倒了两次 这种情况 怎么处理？物理表这里不能覆盖导入吗？
这里上传的数据：
导入时候最好能有选择 是新增还是覆盖？"
写回答
-
意中人就是我呀！"逻辑表数据来源于物理表，确保物理表数据不重复就行了；重新再给逻辑表该分区补数据，会覆盖写入数据。清表再导入数据，或者找下你们数据库同学看下。执行下sql，先truncate清空表数据，再重新导入。底座引擎是MaxCompute吗？参考MaxCompute的语法就行。
https://help.aliyun.com/zh/maxcompute/user-guide/sql-references/?spm=a2c4g.11186623.0.0.704a7636TDXsmm。
此群整理至钉群“Dataphin公共云答疑群”。"2023-12-05 22:57:32赞同 展开评论 打赏 -
面对过去，不要迷离；面对未来，不必彷徨；活在今天，你只要把自己完全展示给别人看。在Dataphin中处理逻辑表数据重复的问题，你可以首先尝试使用数据质量管理功能。在Dataphin首页，单击顶部菜单栏的"资产"，然后进入"添加监控对象"对话框。在此，你可以配置质量规则以帮助你检测并处理重复的数据。
如果你的数据是物理表中的数据，并且你曾经两次从CSV文件导入，你可以考虑先在开发环境中删除这些重复的数据，然后再将这些更改同步到生产环境。注意，直接在生产环境中修改数据可能会带来一些不可预见的风险，因此在操作之前请确保你明白所做的更改以及可能的影响。
2023-12-05 20:24:22赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
