开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 正文

阿里云E-MapReduce如何讓 spark 任務的 dataframe可以出現在日志之內?

阿里云E-MapReduce想請問我要如何讓 spark 任務的 dataframe.show 或是 stdout 可以出現在日志之內?
因為我的 cluster 在任務執行完畢之後就會釋放,所以無法進到 cluster 去看 log。想知道要做什麼設定才能讓這些內容直接出現在日志裡面,感謝。

展开
收起
真的很搞笑 2024-07-31 13:03:26 36 0
0 条回答
写回答
取消 提交回答

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

相关产品

  • 开源大数据平台 E-MapReduce
  • 相关电子书

    更多
    Hybrid Cloud and Apache Spark 立即下载
    Scalable Deep Learning on Spark 立即下载
    Comparison of Spark SQL with Hive 立即下载