开发者社区> 问答> 正文

MaxCompute Spark中利用Logview排查问题该如何做?

MaxCompute Spark中利用Logview排查问题该如何做?

展开
收起
bnbajjyhyjfty 2021-12-12 16:38:30 796 0
1 条回答
写回答
取消 提交回答
  • 拿到Logview,一般首先看Driver的报错,Driver会包含一些关键性的错误如果Driver中出现个中类或者方法找不到的问题,一般是jar包打包的问题 如果Driver中出现连接外部VPC或者OSS出现Timeout,这种情况一般要去排查一下参数配置 如果Driver中出现连接不到Executor,或者找不到Chunk等错误,通常是Executor已经提前退出,需要进一步查看Executor的报错,可能存在OOM 根据EndTime做排序,结束时间越早,越容易是发生问题的Executor节点 根据Latency做排序,Latency代表了Executor的存活的时间,存活时间越短的,越有可能是根因所在

    2021-12-12 16:38:54
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Data+AI时代大数据平台应该如何建设 立即下载
大数据AI一体化的解读 立即下载
极氪大数据 Serverless 应用实践 立即下载