开发者社区> 问答> 正文

这些odps下的jar已经加进入了,然后界面上创建任务运行后还是提示the value of spa

这些odps下的jar已经加进入了,然后界面上创建任务运行后还是提示the value of spark.sql.catalogimplementation should be one of hive in-memory but was odps,怎么回事?1089问.png 1089问问.png 1089问问问.png 1089问问问问.png

展开
收起
游客3oewgrzrf6o5c 2022-07-07 14:43:35 311 0
1 条回答
写回答
取消 提交回答
  • 看下spark版本是2.3还是2.4; 加一下参数试试spark.sql.catalogImplementation Spark 2.3版本需要设置为odps,这个参数在代码中。Spark 2.4版本会改为hive,为了便于作业迁移,建议不要将该配置写在代码中(此答案整理自MaxCompute开发者社区2群)1089答.png

    2022-07-07 16:07:07
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Data+AI时代大数据平台应该如何建设 立即下载
大数据AI一体化的解读 立即下载
极氪大数据 Serverless 应用实践 立即下载