开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

大佬,Dataworks我们dw可以连接星环的hive作为数据源吗?

问题1:大佬,Dataworks我们dw可以连接星环的hive作为数据源吗?
问题2:星环是在hive 的基础上二开的,也可以吗

展开
收起
真的很搞笑 2023-07-12 08:11:09 169 0
3 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    是的,阿里云DataWorks可以连接星环的Hive作为数据源。具体步骤如下:
    在阿里云DataWorks中创建Hive数据源。在创建数据源时,需要填写Hive的连接信息,例如Hive Server2地址、端口号、用户名、密码等。
    配置Hive数据源的高级参数。在高级参数中,可以设置Hive的JDBC驱动程序、JDBC URL等参数,以确保连接的正确性和稳定性。
    在数据集成任务中,选择刚创建的Hive数据源,并进行相应的数据同步和数据处理操作。

    2023-07-30 20:48:18
    赞同 展开评论 打赏
  • 是的,您可以在DataWorks中连接星环的Hive作为数据源。

    DataWorks提供了多种方式用于连接和操作外部数据源,包括Hive、MySQL、MaxCompute等。对于连接星环的Hive作为数据源,您可以按照以下步骤进行配置:

    1. 在DataWorks控制台中,进入项目空间,并创建一个数据集。
    2. 在数据集配置中选择"Hive"作为数据源类型。
    3. 配置Hive的连接信息,包括Hive Metastore的地址、端口号、用户名和密码等。
    4. 进行连接测试,确保配置正确无误。
    5. 完成配置后,您就可以在DataWorks中使用该数据集来读取和写入星环的Hive表数据了。
    2023-07-12 19:40:26
    赞同 展开评论 打赏
  • 回答1:可以看下hive数据源目前支持的版本 符合就没问题https://help.aliyun.com/document_detail/611601.html?spm=a2c4g.611909.0.i2【网络打通解决方案】 >选择网络连通方案文档
    step1:选择网络打通方式

    image.png

    step2:在配置资源组与网络连通文档中搜索对应的场景,并参考案例图示打通。

    云企业网使用场景示例,请参见云企业网。
    高速通道使用场景示例,请参见高速通道。
    VPN网关使用场景示例,请参见VPN网关。
    --- 【网络不通排查案例】 >数据集成:打通网络如何排查安全组问题?@机器人 安全组问题 > ---
    回答2:二次开发的应该没有测试过 可以用连接串模式试一下,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-07-12 09:56:42
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    Hive Bucketing in Apache Spark 立即下载
    spark替代HIVE实现ETL作业 立即下载
    2019大数据技术公开课第五季—Hive迁移到MaxCompute最佳实践 立即下载

    相关实验场景

    更多