我在用flink cdc的从oracle同步历史数据到doris，请教一下存量数据是先全部拉到内存，
我在用flink cdc的从oracle同步历史数据到doris，请教一下存量数据是先全部拉到内存，拉完后再从内存存入doris吗？小数据量的时候没有问题，当我拉一个大表（2千万数据量，2个G大小）历史数据的时候，跑3-5分钟就报错了，怀疑是不是资源问题。有大佬指点一下吗。
展开
收起
问答分类：
相关产品：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
热门讨论
热门文章
flink 1.15 大家jdk是啥版本？
1232
FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
3035
Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行
1479
dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
2005
MaxCompute中执行SQL报错ODPS-0130071
23825
数据来源：com.alibaba.fastjson.JSONException: syntax er
4942
请问flink cdc sql中如何将一个json格式字符串转换成格式？
304
Maxcompute中如何处理ODPS-0130071:Semantic analysis exce
791
请教一下DataWorks，doris和starRocks 选型，选哪个？
1081
flink 1.18必须配套JDK11吗 1.8是不是不行了呢？
1518
展开全部
阿里封神谈hadoop生态学习之路
49394
大数据环境下该如何优雅地设计数据分层
40467
阿里云MaxCompute（大数据）公开数据集---带你玩转人工智能
24581
6年双11，DataV的数据可视化之道
21024
Flink SQL 功能解密系列 —— 维表 JOIN 与异步优化
27665
如何轮播 DataV 大屏
18882
【大数据干货】数据进入阿里云数加-大数据计算服务MaxCompute（原ODPS）的N种方式
16299
搜索双链路实时计算体系@双11实战
15538
流计算精品翻译: The Dataflow Model
19188
基础平面地图——区域热力层使用教程
14497
展开全部
