CDP 组件依赖关系

简介: 本文主要介绍了 Cloudera Manager 部署中各种服务之间存在的服务依赖关系。

下表列出了Cloudera Manager部署中各种服务之间存在的服务依赖关系。


为生产环境配置CDP Runtime时,请确保启用Kerberos进行用户身份验证。当Cloudera在启用了Kerberos的用户进行身份验证的群集上运行时,它们支持Ranger和Atlas等安全服务。


表1.服务依赖性

服务

依赖

可选依赖

ADLS Connector



Atlas

HDFS

HBase

Kafka (仅依赖Kafka broker角色)

Solr

Ranger

Cruise Control

Kafka

Zookeeper


Data Context Connector



HBase

HDFS

ZooKeeper

Atlas

Ranger

HDFS


ADLS Connector 或
S3 Connector
KMS, Thales KMS, Key Trustee, or Luna KMS

Ranger

ZooKeeper

Hive

HDFS

Atlas

HBase

Kudu

Ranger

Spark on YARN

YARN

ZooKeeper

Hive-on-Tez

HDFS

Hive

Tez

Atlas

HBase

Ranger

YARN

ZooKeeper

Hue

HDFS

Hive

Atlas

HBase

Hive-on-Tez

Impala

Oozie

Solr

ZooKeeper

Impala

HDFS

Hive

Atlas

HBase

Kudu

Ranger

YARN

ZooKeeper

Kafka

ZooKeeper

HDFS

Ranger

Key-Value Store Indexer

HBase

Solr

Ranger

Kudu


Ranger

Livy

Spark-on-YARN

YARN

Hive

Oozie

YARN

Hive

Spark on YARN

ZooKeeper

Ozone


HDFS

Ranger

Ranger

HBase

HDFS

Kafka

Solr


S3 Connector



Schema Registry


HDFS

Ranger

Solr

HDFS

ZooKeeper

Ranger

Spark on YARN

YARN

Atlas

HBase

Streams Messaging Manager

Kafka

Ranger

Schema Registry

Zookeeper

Streams Replication Manager


Kafka

Tez

YARN


YARN

HDFS

ZooKeeper

Ranger

Zeppelin

HDFS

Spark-on-YARN

YARN

Livy

ZooKeeper







点击链接参与阿里云CDP限时免费测试啦~

https://survey.aliyun.com/apps/zhiliao/owtTaIQU3


钉钉扫描下方二维码加入阿里云 Cloudera 企业数据云交流群一起参与讨论吧!

d0ac74ecbea740db9424e2c277fae75d.jpg

相关文章
|
SQL 关系型数据库 MySQL
远程访问GitLab内置的PostgreSQL数据库
业务系统需要接入GitLab,业务系统以及GitLab都有一套各自的用户系统,需要实现同一套账户密码的话需要将数据同步给GitLab(主要是密码),然而由于GitLab安全策略,通过api进行同步GitLab用户数据并不满足需求,所以需要能直接访问GitLab数据库进行数据修改。
远程访问GitLab内置的PostgreSQL数据库
|
4月前
|
消息中间件 SQL 前端开发
如何开发人事及OA管理系统的考勤管理板块?(附架构图+流程图+代码参考)
考勤系统是企业HR管理的核心模块,涉及打卡、请假、加班、补卡等多项功能,支持多场景打卡方式,并与薪酬、绩效紧密关联。系统需具备数据自动统计、异常提醒、审批流程集成等功能,有效减少人工错误,提升管理效率。
|
9月前
|
数据采集 人工智能 自然语言处理
代理IP与AI的碰撞:网络安全新防线解码
在数字化战争升级的背景下,代理IP与人工智能(AI)正重塑网络安全规则。代理IP作为“隐形斗篷”,提供身份伪装、流量清洗、数据加速和合规审计等功能;AI加持使其进化为动态路由优化、威胁狩猎和隐私保护的战略工具。两者协同作战,在智能风控、跨境电商、汽车安全测试等场景中展现巨大价值。尽管面临动态IP隐患、注入攻击风险和法律合规难题,但通过技术创新可有效应对。未来,认知安全融合、量子代理网络和数字孪生防御将引领技术趋势,为企业带来效率革命、安全进化和战略赋能。掌握这一技术共生关系,是赢得数字时代生存权的关键。
247 0
|
存储 Cloud Native API
Docker镜像管理:为什么Harbor是首选
Docker镜像管理:为什么Harbor是首选
|
测试技术 API Python
Python中requests、aiohttp、httpx性能对比
这篇文章对比了Python中三个流行的HTTP客户端库:requests、aiohttp和httpx,在发送HTTP请求时的性能,并提供了测试代码和结果,以帮助选择适合不同应用场景的库。
1250 2
|
NoSQL MongoDB
MongoTemplate 存在不更新 不存在则插入
MongoTemplate 存在不更新 不存在则插入的方法 【非存在更新 不存在插入的逻辑】
3573 0
|
存储 安全 IDE
Linux网络服务——PXE网络批量装机+Kickstart无人值守安装(上)
1 系统安装介绍 1.1 系统装机的三种引导方式 硬盘 光驱 网络
577 0
|
域名解析 弹性计算 应用服务中间件
基于nginx反向代理实现OSS固定域名IP访问
本文基于阿里云OSS手册:https://help.aliyun.com/zh/oss/use-cases/use-an-ecs-instance-that-runs-centos-to-configure-a-reverse-proxy-for-access-to-oss,继续深入讨论如何利用nginx反向代理,实现固定的IP/域名访问OSS bucket。官方文档能够解决大部分的反向代理固定IP访问oss bucket的场景,但是对于必须使用域名作为endpoint的系统,会出现signatrue鉴权问题。本文继续在官方文档的基础上,将反向代理需要域名作为endpoint的场景补齐方案。
|
SQL 安全 大数据
《CDP企业数据云平台从入门到实践》——Cloudera CDP 产品介绍 (1)
《CDP企业数据云平台从入门到实践》——Cloudera CDP 产品介绍 (1)
997 0