开发者社区> 问答> 正文

这些odps下的jar已经加进入了,然后界面上创建任务运行后还是提示the value of spa

这些odps下的jar已经加进入了,然后界面上创建任务运行后还是提示the value of spark.sql.catalogimplementation should be one of hive in-memory but was odps,怎么回事?1089问.png 1089问问.png 1089问问问.png 1089问问问问.png

展开
收起
游客3oewgrzrf6o5c 2022-07-07 14:43:35 321 0
1 条回答
写回答
取消 提交回答
  • 看下spark版本是2.3还是2.4; 加一下参数试试spark.sql.catalogImplementation Spark 2.3版本需要设置为odps,这个参数在代码中。Spark 2.4版本会改为hive,为了便于作业迁移,建议不要将该配置写在代码中(此答案整理自MaxCompute开发者社区2群)1089答.png

    2022-07-07 16:07:07
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载