AI 助理
备案控制台
开发者社区 大数据 文章 正文

《Hadoop海量数据处理：技术详解与项目实战（第2版）》一基础篇：Hadoop基础

2017-05-02 1813
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：

本节书摘来异步社区《Hadoop海量数据处理：技术详解与项目实战（第2版）》一书中的基础篇，作者： 范东来 责编： 杨海玲，更多章节内容可以访问云栖社区“异步社区”公众号查看。

基础篇：Hadoop基础

Hadoop海量数据处理：技术详解与项目实战（第2版）
本书的第一部分相当于工具的使用手册，将会介绍Hadoop的核心组件：HDFS、YARN、MapReduce、Hive、Sqoop和HBase，并在此基础上，进一步学习Hadoop性能调优和运维。通过这部分的学习，读者将获得Hadoop工程师的理论基础。

文章标签：
分布式计算
Hadoop
数据处理
SQL
运维
资源调度
Hbase
HIVE
分布式数据库
关键词：
hadoop技术
hadoop项目实战
hadoop海量数据处理技术项目实战
hadoop海量数据处理：技术详解与项目实战（第2版）hadoop
hadoop海量数据处理
异步社区
目录
相关文章
土木林森
|
9月前
|
分布式计算 Hadoop 大数据
大数据技术与Python：结合Spark和Hadoop进行分布式计算
【4月更文挑战第12天】本文介绍了大数据技术及其4V特性，阐述了Hadoop和Spark在大数据处理中的作用。Hadoop提供分布式文件系统和MapReduce，Spark则为内存计算提供快速处理能力。通过Python结合Spark和Hadoop，可在分布式环境中进行数据处理和分析。文章详细讲解了如何配置Python环境、安装Spark和Hadoop，以及使用Python编写和提交代码到集群进行计算。掌握这些技能有助于应对大数据挑战。
土木林森
774 1
热烈的马
|
9月前
|
消息中间件 分布式计算 大数据
【大数据技术Hadoop+Spark】Flume、Kafka的简介及安装（图文解释 超详细）
【大数据技术Hadoop+Spark】Flume、Kafka的简介及安装（图文解释 超详细）
热烈的马
426 0
热烈的马
|
9月前
|
Java Shell 分布式数据库
【大数据技术Hadoop+Spark】HBase数据模型、Shell操作、Java API示例程序讲解（附源码 超详细）
【大数据技术Hadoop+Spark】HBase数据模型、Shell操作、Java API示例程序讲解（附源码 超详细）
热烈的马
173 0
热烈的马
|
9月前
|
SQL 存储 大数据
【大数据技术Hadoop+Spark】Hive基础SQL语法DDL、DML、DQL讲解及演示（附SQL语句）
【大数据技术Hadoop+Spark】Hive基础SQL语法DDL、DML、DQL讲解及演示（附SQL语句）
热烈的马
302 0
热烈的马
|
9月前
|
分布式计算 Java 大数据
【大数据技术Hadoop+Spark】HDFS Shell常用命令及HDFS Java API详解及实战（超详细 附源码）
【大数据技术Hadoop+Spark】HDFS Shell常用命令及HDFS Java API详解及实战（超详细 附源码）
热烈的马
778 0
热烈的马
|
9月前
|
SQL 分布式计算 大数据
【大数据技术Hadoop+Spark】Spark SQL、DataFrame、Dataset的讲解及操作演示（图文解释）
【大数据技术Hadoop+Spark】Spark SQL、DataFrame、Dataset的讲解及操作演示（图文解释）
热烈的马
190 0
热烈的马
|
9月前
|
SQL 存储 分布式计算
【大数据技术Hadoop+Spark】Hive数据仓库架构、优缺点、数据模型介绍（图文解释 超详细）
【大数据技术Hadoop+Spark】Hive数据仓库架构、优缺点、数据模型介绍（图文解释 超详细）
热烈的马
1241 0
热烈的马
|
9月前
|
分布式计算 大数据 Scala
【大数据技术Hadoop+Spark】Spark RDD创建、操作及词频统计、倒排索引实战（超详细 附源码）
【大数据技术Hadoop+Spark】Spark RDD创建、操作及词频统计、倒排索引实战（超详细 附源码）
热烈的马
376 1
热烈的马
|
9月前
|
存储 分布式计算 负载均衡
【大数据技术Hadoop+Spark】MapReduce概要、思想、编程模型组件、工作原理详解（超详细）
【大数据技术Hadoop+Spark】MapReduce概要、思想、编程模型组件、工作原理详解（超详细）
热烈的马
260 0
热烈的马
|
9月前
|
存储 分布式计算 Hadoop
【大数据技术Hadoop+Spark】HDFS概念、架构、原理、优缺点讲解（超详细必看）
【大数据技术Hadoop+Spark】HDFS概念、架构、原理、优缺点讲解（超详细必看）
热烈的马
534 0

热门文章

最新文章

  • 1
    MPP 架构与 Hadoop 架构技术选型指南
  • 2
    基于Java的Hadoop文件处理系统：高效分布式数据解析与存储
  • 3
    Flume+Hadoop：打造你的大数据处理流水线
  • 4
    使用Hadoop MapReduce进行大规模数据爬取
  • 5
    简单的hadoop启动脚本
  • 6
    安装hadoop集群(Multi Cluster)
  • 7
    Hadoop大象之旅009-通过Shell操作hdfs
  • 8
    TensorFlow的开源与Hadoop的开源有什么不同？
  • 9
    解决Eclipse中运行WordCount出现 java.lang.ClassNotFoundException: org.apache.hadoop.examples.WordCount$TokenizerMapper问题
  • 10
    基于Ubuntu Hadoop的群集搭建Hive
  • 1
    【分布式计算框架】Hadoop伪分布式安装
    112
  • 2
    Hadoop配置复杂性
    58
  • 3
    Hadoop生态系统集成问题
    76
  • 4
    Hadoop权限问题
    152
  • 5
    Hadoop安全性问题
    156
  • 6
    安装hadoop学习笔记
    78
  • 7
    Hadoop的HDFS问题
    106
  • 8
    Hadoop防火墙问题
    133
  • 9
    Hadoop配置
    88
  • 10
    Hadoop网络问题
    195

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第三阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第五阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第七阶段
  • 大数据Hadoop快速入门
  • Hadoop快速入门
  • Hadoop企业优化及扩展案例

    • 相关电子书

    更多
  • 《构建Hadoop生态批流一体的实时数仓》
  • 零基础实现hadoop 迁移 MaxCompute 之 数据
  • CIO 指南:如何在SAP软件架构中使用Hadoop

    • 相关实验场景

    更多
  • 搭建Hadoop环境
    • 下一篇
    阿里云上1分钟搞定幻兽帕鲁联机服务器搭建