开发者社区> 问答> 正文

线上运行时SparkSession代码中参数写到Spark节点的作用是什么呢?

线上运行时SparkSession代码中参数写到Spark节点的作用是什么呢?

展开
收起
bnbajjyhyjfty 2021-12-11 21:30:42 806 0
1 条回答
写回答
取消 提交回答
  • Spark on MaxCompute在读MaxCompute表时,会被提示此项目不存在,如果确定项目的确存在,需要指定运行时端点的信息。通过运行时端点信息连接对应ODPS的元数据库,查询对应元数据是否来自对应的表,并查询项目是否存在

    2021-12-11 21:31:08
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载