DataWorks百问百答39:VPC网络下adb pg实例引擎如何绑定dataworks工作空间执行任务?

本文涉及的产品
大数据开发治理平台DataWorks,Serverless资源组抵扣包300CU*H
简介: VPC网络下adb pg实例引擎绑定dataworks工作空间任务执行执行指导

1.案例前提:adb for pg实例和dataworks在同region。(不在同region需要走高速通道或者配置vpn打通网络。)
以下是adb for pg数据源和独享调度资源组打通案例的操作流程(数据集成任务、数据源和dataworks独享数据集成资源组打通网络步骤基本一致)


步骤
①:查看已购买的adb for pg实例(或者新购adb for pg实例),例如:地域可用区为:杭州 可用区I
购买步骤:dataworks39-14.png
dataworks39-13.png

查看实例网络环境步骤举例:
点开adb for pg实例跳转到实例基本信息界面(如下两图),可以看到该实例的网络信息等概况dataworks39-12.png

dataworks39-11.png

②.创建杭州region的dataworks工作空间并购买独享调度资源组(已有工作空间并且已经购买过改地域的独享调度资源组的可以免去购买/开通步骤。如需执行数据集成任务需要购买数据集成独享资源组)并选择可用区为I(同可用区可以免去加自定义路由的步骤,简化了一个步骤。当然可以购买同地域不通可用区的资源组,若此则需要自定义添加一下路由打通不通可用区的网络)
dataworks39-10.png

③购买独享调度资源组后需要将资源组绑定索要使用的工作空间
dataworks39-9.png

dataworks39-8.png

④资源组绑定好工作空间后,打通和adb pg的网络。
在独享调度资源组界面新增绑定,绑定adb pg实例的网络信息(对应信息均可在adb pg实例界面查看到。未找到对应的vpc信息说明adb pg实例网络有问题或者不在同可用区/没有交换机需要创建交换机)
dataworks39-7.png

dataworks39-6.png

⑤绑定好专有网路信息后,需要将独享调度资源组的eip 和弹性网卡ip两处信息添加到adb pg白名单中。
dataworks39-5.png
dataworks39-4.png

⑥网络问题基本处理好了。然后在工作空间配置中添加绑定adb pg实例并选择刚刚添加的独享调度资源组进行连通性测试。adb pg引擎添加绑定好后,会默认有一个不可编辑的同名数据源。这是后就可以到数据开发界面在adb pg引擎下创建相应的节点进行任务配置了。
dataworks39-3.png

数据源形式如下:
dataworks39-2.png



配置任务:dataworks39-1.png

注:数据集成独享资源组的网络打通方式参见步骤:①②③④⑤

DataWorks百问百答历史记录 请点击这里查看>>

更多DataWorks技术和产品信息,欢迎加入【DataWorks钉钉交流群】

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
一站式大数据开发治理平台DataWorks初级课程
DataWorks 从 2009 年开始,十ー年里一直支持阿里巴巴集团内部数据中台的建设,2019 年双 11 稳定支撑每日千万级的任务调度。每天阿里巴巴内部有数万名数据和算法工程师正在使用DataWorks,承了阿里巴巴 99%的据业务构建。本课程主要介绍了阿里巴巴大数据技术发展历程与 DataWorks 几大模块的基本能力。 课程目标  通过讲师的详细讲解与实际演示,学员可以一边学习一边进行实际操作,可以深入了解DataWorks各大模块的使用方式和具体功能,让学员对DataWorks数据集成、开发、分析、运维、安全、治理等方面有深刻的了解,加深对阿里云大数据产品体系的理解与认识。 适合人群  企业数据仓库开发人员  大数据平台开发人员  数据分析师  大数据运维人员  对于大数据平台、数据中台产品感兴趣的开发者
相关文章
|
1天前
|
DataWorks
|
16天前
|
SQL 分布式计算 DataWorks
如何让DataWorks调度依赖一个非DataWorks的任务结点,如数据上传任务?
如何让DataWorks调度依赖一个非DataWorks的任务结点,如数据上传任务?创建一个表的空分区,然后通过DataWorks去检查这个分区。
42 7
|
4月前
|
SQL 机器学习/深度学习 分布式计算
dataworks节点任务
在DataWorks中,你可以通过拖拽节点以及连线来构建复杂的工作流,这样可以方便地管理多个任务之间的依赖关系。此外,DataWorks还提供了调度功能,使得这些任务可以在设定的时间自动执行。这对于构建自动化、定时的数据处理管道非常有用。
93 5
|
8月前
|
Shell Android开发
Android系统 adb shell push/pull 禁止特定文件
Android系统 adb shell push/pull 禁止特定文件
666 1
|
8月前
|
Android开发 Python
Python封装ADB获取Android设备wifi地址的方法
Python封装ADB获取Android设备wifi地址的方法
185 0
|
开发工具 Android开发
Mac 安卓(Android) 配置adb路径
Mac 安卓(Android) 配置adb路径
938 0
|
5月前
|
Shell Linux 开发工具
"开发者的救星:揭秘如何用adb神器征服Android设备,开启高效调试之旅!"
【8月更文挑战第20天】Android Debug Bridge (adb) 是 Android 开发者必备工具,用于实现计算机与 Android 设备间通讯,执行调试及命令操作。adb 提供了丰富的命令行接口,覆盖从基础设备管理到复杂系统操作的需求。本文详细介绍 adb 的安装配置流程,并列举实用命令示例,包括设备连接管理、应用安装调试、文件系统访问等基础功能,以及端口转发、日志查看等高级技巧。此外,还提供了常见问题的故障排除指南,帮助开发者快速解决问题。掌握 adb 将极大提升 Android 开发效率,助力项目顺利推进。
139 0
|
8月前
|
Shell Android开发
ADB更改Android设备屏幕显示方向
ADB更改Android设备屏幕显示方向
415 5
|
8月前
|
Java Android开发
Android 对adb命令的拦截
Android 对adb命令的拦截
122 2
|
7月前
|
Shell 开发工具 Android开发

热门文章

最新文章

相关产品

  • 大数据开发治理平台 DataWorks