Hadoop

首页 标签 Hadoop
# Hadoop #
关注
11263内容
反思 | 分布式框架是必须的吗?
本文讲的是反思 | 分布式框架是必须的吗,【编者的话】本文主要讲述了通过规范化处理流程,可以使用相同的处理流程来处理流式或者批量处理任务,例如Hadoop和Storm,从而提高重用性。
我看TechEd 2012之技术热点
每一年,Micorsoft都召开TechED来宣讲一年来的微软技术,既是一个总结,也是微软展示和推广各项技术的重要平台。2012年的TechED也不例外,不过,比往年晚了一些。 今年历数微软的技术,可以分为几个大类: Microsoft Azure: 微软云技术已经比较成熟了,包括企业级的私有云技术和公有云技术,从设计、开发、部署、运维各项功能来看,都比较完善。
YARN and MapReduce的【内存】优化配置详解
在Hadoop2.x中, YARN负责管理MapReduce中的资源(内存, CPU等)并且将其打包成Container。 使之专注于其擅长的数据处理任务, 将无需考虑资源调度.
linux 新建用户、用户组 以及为新用户分配权限
Linux 系统是一个多用户多任务的分时操作系统,任何一个要使用系统资源的用户,都必须首先向系统管理员申请一个账号,然后以这个账号的身份进入系统。用户的账号一方面可以帮助系统管理员对使用系统的用户进行跟踪,并控制他们对系统资源的访问;另一方面也可以帮助用户组织文件,并为用户提供安全性保护。
浅析HDFS架构和设计
作者 | 大尊 hdfs是hadoop的分布式文件系统,即Hadoop Distributed Filesystem。下面主要讲下HDFS设计中的比较重要的点,使读者能通过简短的文章一窥HDFS的全貌,适合对HDFS有一点了解,但是对HDFS又感到困惑的初学者。
HDInsight如何创建Hadoop集群
HDInsight如何创建Hadoop集群   带大家一起看下微软Azure云中的Hadoop集群创建,首先你必须先创建个存储账号,然后新建Hadoop集群/HBase/Storm,等待21分钟左右,一个Hadoop集群就创建完成了,看图:   ...
免费试用