Hadoop采用了MapReduce并行计算框架。MapReduce的实现也采用Master/Slave结构。Master叫做JobTracker，而Slave叫做TaskTracker。用户提交的计算叫做Job，每一个Job会被划分成若干个Tasks。JobTracker负责... fireling 10年前 (2016-02-04) 11742℃ 0评论 8喜欢
Yarn负责Hadoop的分布式资源调度，它运行于MapReduce之上，提供了高可用性及高扩展性。在部署Hadoop运行环境也可以启动Yarn来进行资源调度。 下面介绍下，在部署Hadoop伪分布式环境基础上，MapReduce任务如何进行Yarn配置。 配置文件修改 ... fireling 10年前 (2016-02-03) 8542℃ 0评论 3喜欢
Hadoop是一个开源、高可靠、可扩展的分布式计算框架。它主要包含两个框架：一个是分布式存储框架HDFS，一个分布式计算框架MapReduce，学习Hadoop也主要围绕着这两块问题来。 Hadoop的环境部署，不是太简单。它是基于JVM环境搭建的，如果我们需要多台机器协作，还... fireling 10年前 (2016-02-02) 9344℃ 0评论 1喜欢
