开发者社区> 问答> 正文

MaxCompute Spark中出现日志中文乱码可以添加那种配置来解决呢?

MaxCompute Spark中出现日志中文乱码可以添加那种配置来解决呢?

展开
收起
bnbajjyhyjfty 2021-12-12 18:57:27 1064 0
1 条回答
写回答
取消 提交回答
  • spark.executorextraJavaOptions=-Dfileencoding=UTF-8-Dsunjnuencoding=UTF-8

    spark.driver.extraJavaOptions=-Dfileencoding=UTF-8-Dsun.jnuencoding=UTF-8

    如果是pyspark作业需要设置下如下两个参数: spark.yarnappMasterEnvPYTHONIOENCODING=utf8

    sparkexecutorEnvPYTHONIOENCODING=utf8

    2021-12-12 18:58:30
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
PostgresChina2018_赖思超_PostgreSQL10_hash索引的WAL日志修改版final 立即下载
Kubernetes下日志实时采集、存储与计算实践 立即下载
日志数据采集与分析对接 立即下载