开发者社区> 问答> 正文

FLINK是如何做到heap内存管理?

我们公司现在也在研究flink,流计算方面的框架,我们现在用的是基于postgres内核的pipelineDB,不过有很多问题。
阿里的blink会open source?

展开
收起
桑木乐 2016-07-19 21:38:26 3693 0
1 条回答
写回答
取消 提交回答
  • 离线计算存储团队blink项目开发人员

    如果是batch job需要sort这种排序需求的,内存排序会使用框架的内存管理,这样效率更高,不会OOM, 网络shuffle过程上下游之间的数据传输buffer也是基于内存管理实现的,这样一是保证内存可控,同时也实现了流控反压机制,这里的内存管理可以使用heap也可以使用non-heap都是可配置的

    2019-07-17 19:58:39
    赞同 1 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载