开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

PolarDB Writer脚本开发介绍大家有吗?

PolarDB Writer脚本开发介绍大家有吗?

展开
收起
爱喝咖啡嘿 2022-12-19 12:18:13 228 0
1 条回答
写回答
取消 提交回答
  • 通过脚本模式开发的详情请参见通过脚本模式配置任务。脚本配置样例如下,详情请参见上述参数说明。{"type": "job","steps": [{"parameter": {},"name": "Reader","category": "reader"},{"parameter": {"postSql": [],//导入后完成语句。"datasource": "test_005",//数据源名称。"column": [//目标列名。"id","name","age","sex","salary","interest"],"writeMode": "insert",//写入模式。"batchSize": 256,//一次性批量提交的记录数大小。"encoding": "UTF-8",//编码格式。"table": "PolarDB_person_copy",//目标表名。"preSql": []//导入前准备语句。},"name": "Writer","category": "writer"}],"version": "2.0",//版本号。"order": {"hops": [{"from": "Reader","to": "Writer"}]},"setting": {"errorLimit": {//错误记录数。"record": ""},"speed": {"throttle":true,//当throttle值为flase时,mbps参数不生效,表示不限流;当throttle值为true时,表示限流。"concurrent":6, //作业并发数。"mbps":"12"//限流}}} https://help.aliyun.com/document_detail/137782.html——此答案整理自钉群“DataWorks交流群(答疑@机器人)”

    2022-12-19 16:22:03
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

热门讨论

热门文章

相关电子书

更多
云栖大会:开源 PolarDB 架构演进、关键技术与社区建设 立即下载
2023云栖大会:和客户一起玩转PolarDB新特性 立即下载
2023云栖大会:PolarDB for AI 立即下载