开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

trino 默认使用 hive catalog 去查询, 程序中使用Hadoop catalog 写

trino 默认使用 hive catalog 去查询, 程序中使用Hadoop catalog 写到iceberg的数据 无法查询,tirno 查询页面提示找不到元数据地址,由于Hadoop catalog不需要指定的。需要在trino服务里加个rest catalog类型试下。请问有trino实操经验的的老师回答一下?

展开
收起
十一0204 2023-04-10 20:45:18 614 0
1 条回答
写回答
取消 提交回答
  • 资深技术专家,全网粉丝10W+。主攻技术开发,擅长分享、写文、测评。

    在Trino(之前称为Presto SQL)中,默认使用Hive Metastore作为元数据存储,用于查询Hive表。如果您的程序中使用了Hadoop Catalog写入到Iceberg表,但在Trino查询页面上提示找不到元数据地址,可能是因为Trino没有配置对应的Rest Catalog来解析Iceberg表。

    为了使Trino能够查询Iceberg表,您需要在Trino服务中添加一个Rest Catalog。Rest Catalog是Trino的一个插件,用于与其他服务集成,通过REST API来获取元数据信息。在Trino的配置文件中添加Rest Catalog的配置,然后在Trino查询时使用Rest Catalog的标识符即可。

    2023-07-30 23:33:57
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
spark替代HIVE实现ETL作业 立即下载
2019大数据技术公开课第五季—Hive迁移到MaxCompute最佳实践 立即下载
自建Hadoop数据如何托管到MaxCompute 立即下载

相关实验场景

更多