开发者社区> 问答> 正文

RSS和原生的External Shuffle Service(ESS)在Spark3.2.0开启

RSS和原生的External Shuffle Service(ESS)在Spark3.2.0开启AQE的性能对比测试是在什么硬件环境下进行的?

展开
收起
不吃核桃 2024-08-19 15:50:58 31 0
1 条回答
写回答
取消 提交回答
  • RSS和原生的External Shuffle Service(ESS)在Spark3.2.0开启AQE的性能对比测试是在header机器组为1x ecs.g5.4xlarge,worker机器组为8x ecs.d2c.24xlarge,96 CPU,352 GB,12x 3700GB HDD的硬件环境下进行的。

    2024-08-19 20:23:14
    赞同 2 展开评论 打赏
问答分类:
问答标签:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载