开发者社区> 问答> 正文

MapReduce中的Task运行缓慢的原因有哪些?

MapReduce中的Task运行缓慢的原因有哪些?

展开
收起
游客daliwbfb2wo66 2021-12-04 21:46:43 299 0
1 条回答
写回答
取消 提交回答
  • 1.通常由于硬件损坏、软件Bug或者配置错误导致

    2.单个task运行缓慢会显著影响整体作业运行时间

    3.推测执行:在另外一个节点上启动相同的任务,谁先完成就kill掉另外一个节点 上的任务

    4.无法启动推测执行的情况:写入数据库

    2021-12-04 23:24:58
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Spark优化实践 立即下载
HBase in Practise- 性能、监控和问题排查 立即下载
HBase in Practise: 性能、监控和问题排查 立即下载