DataWorks中PyODPS这个组件是否可以直接调用spark?

问题1:DataWorks中PyODPS这个组件是否可以直接调用spark? 问题2:如果想用odps py可以实现吗,使用odps spark节点 怎么用第三方包

展开
收起
真的很搞笑 2023-06-11 08:27:28 71 分享 版权
1 条回答
写回答
取消 提交回答
  • 需要使用odps spark节点 调用,可以参考看下 https://github.com/aliyun/MaxCompute-Spark/wiki/06.-%E5%BC%95%E7%94%A8%E5%A4%96%E9%83%A8%E6%96%87%E4%BB%B6%E9%97%AE%E9%A2%98,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-06-11 08:38:38
    赞同 展开评论

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

还有其他疑问?
咨询AI助理