数据资产中心Apache Atlas部署初体验

简介: 数据资产中心Apache Atlas部署初体验

1   部署环境

1.   服务器

a)   CENTOS7

b)   JDK1.8

       i.     配置javajavac命令到环境变量

      ii.      配置JAVA_HOME环境变量

2.   客户端

a)   Chrome 79以上版本

 

2   安装介质与环境准备

介质使用集群版本Atlas2.0.0_dist_cdh/ apache-atlas-2.0.0-bin.tar.gz

完成CDH6.2.0环境安装,并安装服务【HBASE】、【ZooKeeper】、【Kafka】、【Solr

通过相关页面证明服务已经正常启动

 image.png

image.png

 image.png

image.png

 

3   配置过程

CDHNODE1CM节点进行安装

上传至服务器apache-atlas-2.0.0-bin.tar.gz/opt/atlas目录下

cd /opt/atlas

tar -zxvf apache-atlas-2.0.0-bin.tar.gz

cd /opt/atlas/apache-atlas-2.0.0

 

然后结合自己的环境做如下配置

image.png

image.png

配置HBASE_CONF_DIR环境变量

vim /etc/profile

export HBASE_CONF_DIR=/etc/hbase/conf

 

配置SOLR

执行如下命令

solrctl instancedir --create atlas /opt/atlas/apache-atlas-2.0.0/conf/solr

solrctl collection --create vertex_index -s 1 -c atlas -r 1

solrctl collection --create edge_index -s 1 -c atlas -r 1

solrctl collection --create fulltext_index -s 1 -c atlas -r 1

 

4   启动方法

/opt/atlas/apache-atlas-2.0.0/bin/atlas_start.py

经过等待,访问localhost:28000即可

image.png

image.png

5   关闭方法

/opt/atlas/apache-atlas-2.0.0/bin/atlas_stop.py

6   导入初始化数据

/opt/atlas/apache-atlas-2.0.0/bin/atlas_stop.py/quick_start.py

账密:admin/admin

此为演示数据,正式部署不需要导入

7   日志位置

/opt/atlas/apache-atlas-2.0.0/logs/application.log

8   部署异常处理

如果发现启动失败,换句话说显示已启动后,但是localhost:28000无法访问

这个时候重新启动,一定要手动清除HBASE中的apache_atlas_janusapache_atlas_entity_audit两个表,否则这两个表会留存错的配置信息,导致新的配置信息无法生效

image.png

image.png

9   健康检查

访问如下地址进行测试

http://部署服务器ip:28000

 image.png


 

目录
相关文章
|
存储 人工智能 数据处理
Apache Doris 2025 Roadmap:构建 GenAI 时代实时高效统一的数据底座
秉承“以场景驱动创新” 的核心理念,持续深耕三大核心场景的关键能力,并对大模型 GenAI 场景的融合应用进行重点投入,为智能时代构建实时、高效、统一的数据底座。
604 10
Apache Doris 2025 Roadmap:构建 GenAI 时代实时高效统一的数据底座
|
存储 运维 监控
从 ClickHouse 到 Apache Doris:在网易云音乐日增万亿日志数据场景下的落地
日志数据已成为企业洞察系统状态、监控网络安全及分析业务动态的宝贵资源。网易云音乐引入 Apache Doris 作为日志库新方案,替换了 ClickHouse。解决了 ClickHouse 运维复杂、不支持倒排索引的问题。目前已经稳定运行 3 个季度,规模达到 50 台服务器, 倒排索引将全文检索性能提升7倍,2PB 数据,每天新增日志量超过万亿条,峰值写入吞吐 6GB/s 。
993 5
从 ClickHouse 到 Apache Doris:在网易云音乐日增万亿日志数据场景下的落地
|
存储 SQL 数据挖掘
数据无界、湖仓无界, Apache Doris 湖仓一体解决方案全面解读(上篇)
湖仓一体架构融合了数据湖的低成本、高扩展性,以及数据仓库的高性能、强数据治理能力,高效应对大数据时代的挑战。为助力企业实现湖仓一体的建设,Apache Doris 提出了数据无界和湖仓无界核心理念,并结合自身特性,助力企业加速从 0 到 1 构建湖仓体系,降低转型过程中的风险和成本。本文将对湖仓一体演进及 Apache Doris 湖仓一体方案进行介绍。
1299 1
数据无界、湖仓无界, Apache Doris 湖仓一体解决方案全面解读(上篇)
|
存储 消息中间件 人工智能
AI大模型独角兽 MiniMax 基于阿里云数据库 SelectDB 版内核 Apache Doris 升级日志系统,PB 数据秒级查询响应
早期 MiniMax 基于 Grafana Loki 构建了日志系统,在资源消耗、写入性能及系统稳定性上都面临巨大的挑战。为此 MiniMax 开始寻找全新的日志系统方案,并基于阿里云数据库 SelectDB 版内核 Apache Doris 升级了日志系统,新系统已接入 MiniMax 内部所有业务线日志数据,数据规模为 PB 级, 整体可用性达到 99.9% 以上,10 亿级日志数据的检索速度可实现秒级响应。
1060 14
AI大模型独角兽 MiniMax 基于阿里云数据库 SelectDB 版内核 Apache Doris 升级日志系统,PB 数据秒级查询响应
|
数据处理 Apache 数据库
将 Python UDF 部署到 Apache IoTDB 的详细步骤与注意事项
【10月更文挑战第21天】将 Python UDF 部署到 Apache IoTDB 中需要一系列的步骤和注意事项。通过仔细的准备、正确的部署和测试,你可以成功地将自定义的 Python UDF 应用到 Apache IoTDB 中,为数据处理和分析提供更灵活和强大的支持。在实际操作过程中,要根据具体情况进行调整和优化,以确保实现最佳的效果。还可以结合具体的代码示例和实际部署经验,进一步深入了解和掌握这一过程。
262 2
|
SQL 消息中间件 大数据
大数据-159 Apache Kylin 构建Cube 准备和测试数据(一)
大数据-159 Apache Kylin 构建Cube 准备和测试数据(一)
398 1
|
SQL 大数据 Apache
大数据-159 Apache Kylin 构建Cube 准备和测试数据(二)
大数据-159 Apache Kylin 构建Cube 准备和测试数据(二)
236 1
|
分布式计算 监控 大数据
大数据-148 Apache Kudu 从 Flink 下沉数据到 Kudu
大数据-148 Apache Kudu 从 Flink 下沉数据到 Kudu
343 1
|
存储 大数据 数据挖掘
【数据新纪元】Apache Doris:重塑实时分析性能,解锁大数据处理新速度,引爆数据价值潜能!
【9月更文挑战第5天】Apache Doris以其卓越的性能、灵活的架构和高效的数据处理能力,正在重塑实时分析的性能极限,解锁大数据处理的新速度,引爆数据价值的无限潜能。在未来的发展中,我们有理由相信Apache Doris将继续引领数据处理的潮流,为企业提供更快速、更准确、更智能的数据洞察和决策支持。让我们携手并进,共同探索数据新纪元的无限可能!
527 11
|
Linux Apache 数据安全/隐私保护
kali向Apache上部署网页
kali向Apache上部署网页
411 5

推荐镜像

更多