hadoop独立模式

参考博客:http://my.oschina.net/winHerson/blog/121963

eclipse远程调试:http://zhangjie.me/eclipse-debug-hadoop/

百度文档:http://wenku.baidu.com/link?url=13x1F92KXZt4Q2iLKfsu-kgRq64Nx-bKNM2eMV7wnxss2Rd1Al7XXRuDiEETpCuaOKC9E3_Wk_xTQt6qkP7P_9AoQE9M6aTx_ZNnVfUyw1W

1.独立模式:

独立模式下hadoop使用本地的文件系统而非分布式文件系统,而且其也不会启动任何守护进程,Map和Reduce任务作为同一个进程的不同部分来执行。因此,本地模式下的hadoop仅运作于本机。

2.伪分布式模式

 hadoop 将所有进程运行于同一台主机上,但此时Hadoop将使用分布式文件系统,而且各jobs也是由JobTracker服务管理的独立进程。同时,由于伪分 布式的Hadoop集群只有一个节点,因此HDFS的块复制将限制为单个副本,其secondary-master和slave也都将运行于本地主机。此 种模式除了并非真正意义的分布式之外,其程序执行逻辑完全类似于完全分布式,因此,常用于开发人员测试程序执行。

原文地址:https://www.cnblogs.com/middlesummer/p/3771984.html