开发者社区> 问答> 正文

我用flinkcdc 读取mysql数据。 数据量并不大。一天大概1W条数据。 但是带宽特别高。

我用flinkcdc 读取mysql数据。 数据量并不大。一天大概1W条数据。 但是带宽特别高。 一共同步27张表。 27个insert 语句。 我怎么排查这块问题??

展开
收起
真的很搞笑 2023-04-19 21:43:31 336 0
1 条回答
写回答
取消 提交回答
  • 随心分享,欢迎友善交流讨论:)

    如果Flink CDC同步MySQL的数据量不大,但是带宽占用较高,有可能是以下几个原因导致的:

    同步频率过高:如果Flink CDC同步MySQL的频率过高,会导致带宽占用较高。您可以检查一下同步频率是否过高,可以适当降低同步频率来解决问题。

    网络延迟较高:如果Flink CDC和MySQL服务器之间的网络延迟较高,会导致同步数据的速度变慢,从而占用更多的带宽。您可以检查一下网络延迟,如果网络延迟较高,可以考虑优化网络设置或增加带宽。

    数据类型较大:如果同步的数据类型较大,例如BLOB或CLOB类型的数据,会导致同步数据量较大,从而占用更多的带宽。您可以检查一下同步的数据类型,如果数据类型较大,可以考虑优化数据结构或者选择合适的数据存储方式。

    另外,您可以通过监控系统资源占用情况,例如CPU、内存、网络带宽等,来确定问题所在,并进行进一步排查和分析。

    2023-04-21 10:45:51
    赞同 展开评论 打赏
来源圈子
更多
收录在圈子:
实时计算 Flink 版(Alibaba Cloud Realtime Compute for Apache Flink,Powered by Ververica)是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统,由 Apache Flink 创始团队官方出品,拥有全球统一商业化品牌,完全兼容开源 Flink API,提供丰富的企业级增值功能。
问答排行榜
最热
最新

相关电子书

更多
搭建电商项目架构连接MySQL 立即下载
搭建4层电商项目架构,实战连接MySQL 立即下载
PolarDB MySQL引擎重磅功能及产品能力盛大发布 立即下载

相关镜像