请问下flink实时写maxcompute，会有限流吗？比如每秒最多不能超过多少条数据量之类的
请问下flink实时写maxcompute，会有限流吗？比如每秒最多不能超过多少条数据量之类的
写回答
-
我看文档上没有对这个限制，可以看下 https://help.aliyun.com/document_detail/202161.html?spm=a2c4g.51656.0.0.73fc697fd1hYhT#section-gwl-ggg-j8f，此回答整理自钉群“MaxCompute开发者社区2群”
2023-05-02 14:43:07赞同 展开评论 打赏 -
十年摸盘键，代码未曾试。 今日码示君，谁有上云事。实时计算Flink版内置插件支持通过批量数据通道写入MaxCompute，受到批量数据通道并发数及存储文件数影响，内置版本插件会有性能瓶颈。MaxCompute提供了使用流式数据通道的Flink插件，支持使用Flink在高并发、高QPS场景下写入MaxCompute。
该功能的使用限制如下： 本插件仅支持Blink 3.2.1及以上版本。 MaxCompute中的聚簇表不支持作为MaxCompute结果表。
实时计算Flink版可以调用MaxCompute SDK中的接口将数据写入缓冲区，当缓冲区的大小超过指定的大小（默认为1 MB）或每隔指定的时间间隔时，将数据上传至MaxCompute结果表中。
说明 建议Flink同步MaxCompute并发数大于32或Flush间隔小于60秒的场景下，使用MaxCompute自定义插件。其他场景可以随意选择Flink内置插件和MaxCompute自定义插件。
2023-05-01 13:06:17赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
MaxCompute（原ODPS）是一项面向分析的大数据计算服务，它以Serverless架构提供快速、全托管的在线数据仓库服务，消除传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您经济并高效的分析处理海量数据。
热门讨论
热门文章
相关课程
更多
相关文章
相关电子书
更多
