开发者社区> 问答> 正文

优化器动态性的缺失,可能带来什么问题?

优化器动态性的缺失,可能带来什么问题?

展开
收起
曦情兮 2022-05-09 22:36:17 278 0
1 条回答
写回答
取消 提交回答
  • 物理资源的浪费:比如计算节点事先选择的资源类型的不合理,或者大量的计算被消耗用于处理后继会被丢弃的无效数据。 作业的严重长尾:比如中间数据分布倾斜或不合理编排,导致一个 stage 上计算节点需要处理的数据量极端化。 作业的不稳定:比如由于优化器静态计划的错判,导致不合理的执行计划无法完成。

    2022-05-10 13:04:35
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
基于Spark的面向十亿级别特征的 大规模机器学习 立即下载
基于Spark的面向十亿级别特征的大规模机器学习 立即下载
面向索引、模型、检索联合优化的下一代推荐技术 立即下载