开发者社区> 问答> 正文

Flink中的数据传输模式是怎么样的?

Flink中的数据传输模式是怎么样的?

展开
收起
茶什i 2019-11-21 10:51:30 1171 0
1 条回答
写回答
取消 提交回答
  • 在一个运行的application中,它的tasks在持续交换数据。TaskManager负责做数据传输。

    TaskManager的网络组件首先从缓冲buffer中收集records,然后再发送。也就是说,records并不是一个接一个的发送,而是先放入缓冲,然后再以batch的形式发送。这个技术可以高效使用网络资源,并达到高吞吐。类似于网络或磁盘 I/O 协议中使用的缓冲技术。

    2019-11-21 10:51:44
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
蚂蚁聚宝虫洞项目技术方案介绍 ——云与端之间数据传输的桥梁 立即下载