开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

DataWorks是否支持本地MySQL可以同步至MaxCompute ,要做什么配置?

DataWorks是否支持本地MySQL可以同步至MaxCompute ,要做什么配置?

展开
收起
真的很搞笑 2023-10-29 17:46:02 47 0
3 条回答
写回答
取消 提交回答
  • 是的,DataWorks支持将本地MySQL数据同步至MaxCompute。以下是一种可能的配置步骤:

    1. 在DataWorks数据开发界面,使用Di节点配置数据集成同步任务。
    2. 在“数据来源”部分,配置MySQL数据库。
    3. 在“数据去向”部分,配置ODPS实例里的一张同名表,列字段应与MySQL保持一致。
    4. 重点配置数据过滤的条件。例如,你可以配置col3 >='$ {bizdate} 00:00:00',其中bizdate是一个变量,表示业务日期。
    5. 保存并运行这个同步任务,就可以将MySQL中的数据增量同步到MaxCompute中了。
    2023-10-30 15:34:19
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    DataWorks支持本地MySQL同步至MaxCompute,并且不需要特殊的配置。只需要按照正常的MySQL数据源添加过程即可。请按照以下步骤进行配置:

    1. 添加MySQL数据源:登录DataWorks控制台,在数据源菜单中添加MySQL数据源。
    2. 设置参数:设置相应的参数,如主机名/IP地址、端口、用户、密码等。
    3. 同步数据:创建新的同步任务,指定目标表,并开始运行。
    2023-10-30 14:44:40
    赞同 展开评论 打赏
  • 支持的 本地mysql和dw集成资源组需要做一下网络打通,【网络打通解决方案】 >选择网络连通方案文档
    step1:选择网络打通方式
    image.png

    step2:在配置资源组与网络连通文档中搜索对应的场景,并参考案例图示打通。

    云企业网使用场景示例,请参见云企业网。
    高速通道使用场景示例,请参见高速通道。
    VPN网关使用场景示例,请参见VPN网关。
    https://help.aliyun.com/zh/dataworks/user-guide/supported-data-source-types-and-read-and-write-operations,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-10-29 22:34:40
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    Data+AI时代大数据平台应该如何建设 立即下载
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载

    相关镜像