在DataWorks中,要建立连接数据源的协议,首先需要登录DataWorks控制台并进入项目。在左侧导航栏中选择“数据源”,在数据源页面中,选择您要连接的数据源类型。之后,您需要填写数据源的连接信息,这些信息包括数据源名称、访问地址、用户名、密码等。
对于某些特殊的数据源,例如HBase和Redis,可能需要特定的配置。比如,配置HBase数据源时,需要选择连接串模式添加数据源,并需注意仅支持Hbase 1.4.9版本和特殊认证方式为无认证。如果添加的是Redis数据源且没有公网IP,则需要保证数据源和DataWorks工作空间地域一致,通过新增调度资源完成数据源的打通。
在配置完成后,DataWorks将通过您配置的账号及数据源地址访问并读取数据源数据,因此您需要确保数据源基本信息、账号密码无误且有权限操作数据源。
在DataWorks中建立连接数据源的协议,需要按照以下步骤进行:
完成上述步骤后,即可在DataWorks中建立连接数据源的协议。在后续的数据加工和处理过程中,可以使用该协议来连接到数据源,并对其进行读取和写入操作。
在DataWorks中建立连接数据源的协议,请参考以下步骤:
进入数据源管理页面。登录DataWorks控制台。在左侧导航栏,单击工作空间列表。选择工作空间所在地域后,单击相应工作空间后的进入数据集成。在左侧导航栏,单击数据源 > 数据源列表,进入工作空间管理 > 数据源管理页面。在数据源管理页面,单击右上角的新增数据源。在新增数据源对话框中,选择数据源类型为Kafka。在新增Kafka数据源对话框中,配置各项参数。配置数据源的基本信息。Kafka数据源包括阿里云实例模式和连接串模式两种类型。以新增阿里云实例模式类型的数据源为例,配置数据源的基本信息。
参数 描述
数据源类型 当前选择的数据源类型为阿里云实例模式。
数据源名称 数据源名称必须以字母、数字、下划线()组合,且不能以数字和下划线()开头。
数据源描述 对数据源进行简单描述,不得超过80个字符。
适用环境
地区 选择需要同步的Kafka实例所在的地域。
实例ID 输入需要同步的Kafka实例ID。您可以登录Kafka管控台,进入实例列表页面,获取实例ID。以新增连接串模式类型的数据源为例,配置数据源的基本信息。参数 描述
数据源类型 当前选择的数据源类型为连接串模式。
数据源名称 数据源名称必须以字母、数字、下划线()组合,且不能以数字和下划线()开头。
数据源描述 对数据源进行简单描述,不得超过80个字符。
适用环境
Kafka集群地址 Kafka集群Broker的IP地址和端口,即Kafka实例的接入点信息。您可以登录Kafka管控台,进入实例列表页面,单击实例名称,在实例详情页获取接入点信息。 多个Broker地址之间使用逗号(,)分隔,示例为10.0.0.1:9092,10.0.0.2:9092。配置数据源的认证信息。第三方认证机制用于用户和服务的强身份验证,通过该机制,可以有效的避免不受信任的程序或服务来获取数据访问权限,提高数据同步过程中访问数据资源的安全性。DataWorks在配置Kafka数据
https://help.aliyun.com/document_detail/210937.html
,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。