开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

同步dataworks数据时,报错的问题有哪些?

同步dataworks数据时,报错的问题有哪些?

展开
收起
wenti 2023-02-27 18:45:56 206 0
2 条回答
写回答
取消 提交回答
  • 问题场景:离线同步工具同步PostgreSQL数据时,报错如下:org.postgresql.util.PSQLException: FATAL: terminating connection due to conflict with recovery可能原因:出现该情况的原因是从数据库中拉取数据的时间较长,请增加max_standby_archive_delay和max_standby_streaming_delay的参数值,详情请参见Standby Server Events https://help.aliyun.com/document_detail/146663.html——该回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-02-27 21:53:35
    赞同 展开评论 打赏
  • 从事java行业9年至今,热爱技术,热爱以博文记录日常工作,csdn博主,座右铭是:让技术不再枯燥,让每一位技术人爱上技术

    同步DataWorks数据常见问题及解决方法,可以通过点击以下问题分类的链接,查看常见问题描述及其解决方式:

    离线同步任务运维常见问题:脏数据问题、离线任务执行失败、离线任务运行时间长、切换资源组等。

    非插件报错原因及解决方案:乱码问题、SSRF攻击、源表表结构更新、列表包含关键字等。

    具体插件报错原因及解决方案:MongoDB、OSS、DataHub、Lindorm、ES等数据源问题。

    离线同步场景及解决方案:读写MaxCompute、Loghub、Kafka、ES等数据源时的常见问题,以及分库分表、索引机制、字符格式等问题。

    报错信息及解决方案:各类报错信息的解读及对应解决方案。

    2023-02-27 20:36:43
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks全链路数据质量解决方案-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载