Hadoop配置和启动Hadoop方法详解

本节和大家学习一下如何进行Hadoop配置与启动Hadoop方面的知识,相信通过本节的介绍大家对Hadoop配置和启动Hadoop方法有一定的认识,希望本节的介绍对你的学习有所帮助。

创新互联主营镇康网站建设的网络公司,主营网站建设方案,重庆APP开发公司,镇康h5小程序定制开发搭建,镇康网站营销推广欢迎镇康等地区企业咨询

Hadoop配置与启动Hadoop

Hadoop三种模式:

StandaloneOperation:只有一个Java虚拟机在跑,完全没有分布式的成分。
Pseudo-DistributedOperation:在同一台机器上启动独立数个JVM进程,进行“分布式”操作。
Fully-DistributedOperation:真正的可以运行于多台机器上的分布式模式。(我们按这种方式进行配置)

环境:

***台:win7+cygwin
第二台:虚拟机CentOS.5.3

实现目标:

cygwin作为master,部署上NameNode+JobTracker,IP:192.168.220.1
CentOS作为slaver,部署上DataNode+TaskTracker,IP:192.168.14.128

Hadoop配置准备工作:

1.免密码SSH登录,cygwin=》CentOS,见:http://efeil.blog.163.com/blog/static/1189022972010210544494/
2.两个系统Hosts配置相同,为:192.168.220.1hadoop-master
192.168.14.128hadoophadoop-slave01

3.Hadoop配置中conf/core-site.xml配置



hadoop.tmp.dir

e:/tmp/hdfs-gaoyanfei
Abaseforothertemporarydirectories.



fs.default.name
hdfs://hadoop-master:9000

4.Hadoop配置中conf/hdfs-site.xml配置:




dfs.replication
1

5.Hadoop配置中conf/mapred-site.xml配置:





mapred.job.tracker
hadoop-master:9001

6.masters配置内容:hadoop-master
7.slaves配置内容:hadoop-slave01

8.在Cygwin下启动:
1.bin/hadoopnamenode-format
2.bin/start-all.sh。本节关于Hadoop配置与启动Hadoop介绍到这里

网页标题:Hadoop配置和启动Hadoop方法详解
当前URL:http://www.hantingmc.com/qtweb/news16/518816.html

网站建设、网络推广公司-创新互联,是专注品牌与效果的网站制作,网络营销seo公司;服务项目有等

广告

声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联