开发者社区> 问答> 正文

HDFS的重要特性有哪些?

HDFS的重要特性有哪些?

展开
收起
游客fbdr25iajcjto 2021-12-04 17:25:38 303 0
1 条回答
写回答
取消 提交回答
  • 1.HDFS 中的文件在物理上是分块存储(block),块的大小可以通过配置参数(dfs.blocksize)来规定,默认大小在 hadoop2.x 版本中是 128M,老版本中是 64M,hadoop3.x版本中是256M。

    2.HDFS 文件系统会给客户端提供一个统一的抽象目录树,客户端通过路径来访问文件,形如:

    hdfs://namenode:port/dir-a/dir-b/dir-c/file.data

    hdfs://hadoop02:9000/soft/hadoop-2.6.5-centos-6.7.tar.gz

    3.目录结构及文件分块位置信息(元数据)的管理由 namenode 节点承担,namenode 是 HDFS 集群主节点,负责维护整个 hdfs 文件系统的目录树,以及每一个路径(文件)所对应的 block 块信息(block 的 id,及所在的 datanode 服务器)。

    4.文件的各个 block 的存储管理由 datanode 节点承担,datanode 是 HDFS 集群从节点,每一个 block 都可以在多个 datanode 上存储多个副本(副本数量也可以通过参数设置 dfs.replication,默认是 3)。

    5.HDFS 是设计成适应一次写入,多次读出的场景,且不支持文件的修改。

    2021-12-04 17:37:04
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
海量数据分布式存储——Apache HDFS之最新进展 立即下载
Hadoop存储与计算分离实践 立即下载
HDFS optimization for HBase at XiaoMi 立即下载

相关实验场景

更多