windows下安装hadoop

简介: 一直想玩一下hadoop,看到hadoop早就支持了windows,就参考网上的文档自己搭了一套,还在学习中,如有错误,欢迎指正。

安装hadoop

  1. 安装好java
  2. 下载并解压hadoop-2.7.4.tar.gz
  3. 创建HADOOP_HOME环境变量
  4. 下载hadoop.dll和winutils,下载地址如下:windows环境下hadoop依赖。下载完毕后放到hadoop安装目录的bin文件夹下
  5. 到hadoop安装目录,创建data文件夹,然后在data下分别创建datanode、namenode两个文件夹
  6. 配置基本已经完成,如果你想改访问路径,可以到etc/hadoop目录下的core-site.xml文件修改:
<configuration>
 <property>
   <name>fs.defaultFS</name>
   <value>hdfs://localhost:9000</value>
 </property>
</configuration>

运行hadoop

  1. 切换到etc/hadoop目录,运行hadoop-env.cmd
  2. 切换到bin目录然后,格式化HDFS文件系统,执行命令:hdfs namenode -format
  3. 到这里,你的hadoop就可以正常使用了。可以查看一下版本,bin目录执行 hadoop version
  4. 启动 cd到hadoop的sbin目录,运行start-all.cmd
  5. 在浏览器中输入 http:\localhost:50070打开hadoop的web管理网页即可。

参考文档:windows下部署Hadoop2.7.4

目录
相关文章
|
17天前
|
Windows
Windows操作系统部署安装Kerberos客户端
详细介绍了在Windows操作系统上部署安装Kerberos客户端的完整过程,包括下载安装包、安装步骤、自定义安装路径、修改环境变量、配置hosts文件和Kerberos配置文件,以及安装后的验证步骤。
31 3
Windows操作系统部署安装Kerberos客户端
|
8天前
|
SQL JavaScript 数据库
sqlite在Windows环境下安装、使用、node.js连接
sqlite在Windows环境下安装、使用、node.js连接
|
2天前
|
iOS开发 MacOS Windows
Mac air使用Boot Camp安装win10 ,拷贝 Windows 文件时出错
Mac air使用Boot Camp安装win10 ,拷贝 Windows 文件时出错
|
27天前
|
缓存 NoSQL Linux
【Azure Redis 缓存】Windows和Linux系统本地安装Redis, 加载dump.rdb中数据以及通过AOF日志文件追加数据
【Azure Redis 缓存】Windows和Linux系统本地安装Redis, 加载dump.rdb中数据以及通过AOF日志文件追加数据
【Azure Redis 缓存】Windows和Linux系统本地安装Redis, 加载dump.rdb中数据以及通过AOF日志文件追加数据
|
16天前
|
网络安全 虚拟化 Windows
windows 11安装openSSH server 遇到的"kex_exchange_identification: read: Connection reset"问题
windows 11安装openSSH server 遇到的"kex_exchange_identification: read: Connection reset"问题
|
22天前
|
分布式计算 资源调度 Hadoop
centos7二进制安装Hadoop3
centos7二进制安装Hadoop3
|
23天前
|
Ubuntu Linux 虚拟化
安装Windows Linux 子系统的方法:适用于windows 11 版本
本文提供了在Windows 11系统上安装Linux子系统(WSL)的详细步骤,包括启用子系统和虚拟化功能、从Microsoft Store安装Linux发行版、设置WSL默认版本、安装WSL2补丁,以及完成Ubuntu的首次安装设置。
65 2
|
22天前
|
API Docker Windows
2024 Ollama 一站式解决在Windows系统安装、使用、定制服务与实战案例
这篇文章是一份关于Ollama工具的一站式使用指南,涵盖了在Windows系统上安装、使用和定制服务,以及实战案例。
2024 Ollama 一站式解决在Windows系统安装、使用、定制服务与实战案例
|
1月前
|
分布式计算 Ubuntu Hadoop
在Ubuntu 16.04上如何在独立模式下安装Hadoop
在Ubuntu 16.04上如何在独立模式下安装Hadoop
19 1
|
23天前
|
网络安全 Windows
windows安装ssh服务
windows安装ssh服务
21 0