开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

什么是以 project 为粒度的多集群业务排布算法?

已解决

什么是以 project 为粒度的多集群业务排布算法?

展开
收起
游客lmkkns5ck6auu 2022-08-10 10:44:13 329 0
1 条回答
写回答
取消 提交回答
  • 推荐回答

    随着上层业务的不断发展,业务的资源需求和数据需求也在不断变化。比如一个集群的跨中心依赖增长迅速,无法完全通过数据缓存来转化为本地读取,这就会造成大量的跨数据中心流量。因此我们需要定期对业务的排布进行分析,根据业务对计算资源、数据资源的需求情况,以及集群、机房的规划,通过业务的迁移来降低跨中心依赖以及均衡各集群压力。

    以某个时刻业务迁移的收益分析为例:横轴为迁移的 project 数量,纵轴为带宽减少比例,可以看出大约移动 60 个 project 就可以减少约 30% 的带宽消耗。统计了不同排布下(迁移 0 个、20 个、50 project)的最优带宽消耗,横轴为冗余存储,纵轴为带宽。

    以上内容摘自《“伏羲”神算》电子书,点击https://developer.aliyun.com/topic/download?id=873

    2022-08-10 17:38:00
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关电子书

更多
数据+算法定义新世界 立即下载
袋鼠云基于实时计算的反黄牛算法 立即下载
Alink:基于Apache Flink的算法平台 立即下载