开发者社区大数据与机器学习实时计算 Flink 正文

16核单机16g内存 mysql一张表5万条数据， 40多个字段 cdc2.3流写入 hudi

16核单机16g内存 mysql一张表5万条数据， 40多个字段 cdc2.3流写入 hudi 预估1条4条。请教大神该怎么优化？

展开

收起

十一0204 2023-04-05 09:15:20 237 版权

1 条回答

写回答

取消提交回答

意中人jswy

意中人就是我呀！

有这么大内存，C++也可以内存只申请不释放，每晚定时重启也是可以的。此回答整理自钉群“Flink CDC 社区”

2023-04-05 10:51:16

赞同展开评论

问答分类：

关系型数据库 MySQL 云数据库 RDS MySQL 版

问答标签：

云数据库 RDS MySQL 版数据云数据库 RDS MySQL 版内存云数据库 RDS MySQL 版字段内存数据云数据库 RDS MySQL 版数据字段

问答地址：

开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答

相关问答

实时计算 Flink版

RDS MySQL内存管理

从单机 MySQL 迁移到 PolarDB-X 2.1 版本的第一步是什么？

Flink CDC3.0.1版本读取mysql700w的一个表内存一直占满退出怎么解决啊？

在 MySQL 中监控多表并使用 SQL 写入 Hudi 表时，如何简化为单 job 同步整库？

如何更准确地判断RDS MySQL实例的内存是否不足？

在RDS MySQL实例升级CPU与内存配置时，会涉及底层数据迁移吗？

如何更准确地判断RDS MySQL实例的内存是否不足？

在RDS MySQL实例升级CPU与内存配置时，会涉及底层数据迁移吗？

RDS MySQL 本地盘实例升级CPU与内存时，本地资源可用是指什么？

OceanBase数据库， 4.3 群集跑要600多秒，MySQL 8.0 单机只18秒是什么原因？

大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问

收录在圈子:

阿里云实时计算Flink

199210

+ 订阅

实时计算 Flink 版（Alibaba Cloud Realtime Compute for Apache Flink，Powered by Ververica）是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统，由 Apache Flink 创始团队官方出品，拥有全球统一商业化品牌，完全兼容开源 Flink API，提供丰富的企业级增值功能。