背景：
阅读新闻
CentOS 5下安装Hadoop-伪分布式模式
[日期：2012-02-10] 来源：Linux社区 作者：hao3721 [字体：]
Hadoop安装
测试环境CentOS 5.6 sunjava1.6.0_26
- 安装java 官方文档写最好是sun jdk 如果是opengdk的请注意。 #chmod u+x jdk-6u26-linux-i586-rpm.bin #./jdk-6u26-linux-i586-rpm.bin #java -version (查看安装信息) - 创建用户 请不要使用root用户直接执行。否者将出现Unrecognized option: -jvm Could not create the Java virtual machine. #useradd hadoop #passwd #su - hadoop - 安装hadoop $tar -zxf hadoop-0.20.203.0rc1.tar.gz $mv cd hadoop-0.20.203.0 /usr/local/hadoop - 创建ssh-key 设置ssh publlic key 为hadoop创建连接其他主机的通道 $ssh-keygent -t dsa (我将密码设置为空方便测试。正常环境请安装keychain) $cd .ssh $cat cat id_rsa.pub > authorized_keys $chmod 600 authorized_keys (将权限设置为600否者ssh将不读取公钥信息) - 简单hadoop 设置JAVA_HOME就可以运行。 $cd /usr/local/hadoop $vi conf/hadoop-env.sh 设置export JAVA_HOME=/usr/java/jdk1.6.0_26 为正确路径 $vi conf/core-site.xml <?xml version="1.0"?> <?xml-stylesheet type="text/xsl" href="https://www.linuxidc.com/configuration.xsl"?> <configuration> <property> <name>fs.default.name</name> <value>hdfs://192.168.60.149:9000/</value> </property> <property> <name>hadoop.tmp.dir</name> <value>/usr/local/hadoop/hadooptmp</value> </property> </configuration> $vi conf/hdfs-site.xml <?xml version="1.0"?> <?xml-stylesheet type="text/xsl" href="https://www.linuxidc.com/configuration.xsl"?> <configuration> <property> <name>dfs.name.dir</name> <value>/usr/local/hadoop/hdfs/name</value> </property> <property> <name>dfs.data.dir</name> <value>/usr/local/hadoop/hdfs/data</value> </property> <property> <name>dfs.replication</name> <value>1</value> </property> </configuration> $vi conf/mapred-site.xml <?xml version="1.0"?> <?xml-stylesheet type="text/xsl" href="https://www.linuxidc.com/configuration.xsl"?> <configuration> <property> <name>mapred.job.tracker</name> <value>192.168.60.149:9001</value> </property> <property> <name>mapred.local.dir</name> <value>/usr/local/hadoop/mapred/local</value> </property> <property> <name>mapred.system.dir</name> <value>/tmp/hadoop/mapred/system</value> </property> </configuration>
相关资讯 Hadoop
本文评论 查看全部评论 (0)
尊重网上道德，遵守中华人民共和国的各项有关法律法规 承担一切因您的行为而直接或间接导致的民事或刑事法律责任 本站管理人员有权保留或删除其管辖留言中的任意内容 本站有权在网站内转载或引用您的评论 参与本评论即表明您已经阅读并接受上述条款
评论声明
最新资讯