今天安装了hadoop的单机版,参照网上的一些博文,终于成功了,环境如下:
Hadoop版本:hadoop-0.20.203.0
Java JDK版本:1.6.0_29
linux环境:suse 9
参照博文:
http://www.cnblogs.com/maczpc/archive/2010/01/17/1650191.html
在参照上述博文的基础上,还有如下几个要点:
1、检查SSH是否安装,命令如下:
$ssh -version
2、配置JAVA_HOME,在 conf/hadoop-env.sh 中添加如下内容:
export JAVA_HOME=/opt/jdk1.6.0_29
3、检查hadoop配置:
conf/core-site.xml内容如下:
...
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
hdfs-site.xml内容如下:
...
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
mapred-site.xml内容如下:
...
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
</property>
</configuration>
4、以root方式启动,会遇到问题,提示如下:
hadoop Unrecognized option: -jvm
检查bin/hadoop,发现如下内容:
if [[ $EUID -eq 0 ]]; then
HADOOP_OPTS="$HADOOP_OPTS -jvm server $HADOOP_DATANODE_OPTS"
else
HADOOP_OPTS="$HADOOP_OPTS -server $HADOOP_DATANODE_OPTS"
fi
如果是root用户启动,需要传 -jvm参数,不知是何用意,暂时先注掉,如下所示:
# if [[ $EUID -eq 0 ]]; then
# HADOOP_OPTS="$HADOOP_OPTS -jvm server $HADOOP_DATANODE_OPTS"
# else
HADOOP_OPTS="$HADOOP_OPTS -server $HADOOP_DATANODE_OPTS"
# fi
启动正常
5、格式化新的文件系统,启动hadoop
$bin/hadoop namenode –format
$bin/start-all.sh
6、启动完毕,可以通过如下地址查看启动情况:
NameNode - http://host:50070/
JobTracker - http://host:50030/
分享到:
相关推荐
hadoop 单机安装 对于初学者应该是很有用,简单易懂实用
EasyHadoop Hadoop 单机系统 安装配置 本文档是Hadoop部署文档,提供了Hadoop单机安装和Hadoop集群安装的方法和步骤,本文档希望让Hadoop安装部署更简单
Hadoop环境安装设置(最简单的hadoop单机环境部署教程) 安装前设置 SSH设置和密钥生成 安装Java.下载Java (JDK<最新版> - X64 ... 下载Hadoop.下载来自Apache基金会软件,使用下面 ... Hadoop操作模式 在单机模式下...
Hadoop安装教程_单机_伪分布式配置
安装Hadoop(单机版和集群)详细步骤
Hadoop安装教程_单机/伪分布式配置_Hadoop2.7.1/Ubuntu 16.04
1、hadoop单机模式和伪分布式 2、hadoop集群 3、hadoop运行WordCount程序 4、编码实践并在Hadoop上运行 题目:输入两个文件,一个代表工厂表,包含工厂名列和地址编号列;另一个代表地址表,包含地址名列和地址编号...
hadoop单机版安装教程
供有相同兴趣的人一起参考学习
这是本人精心整理和编写的Hadoop单机版配置。详细描述了每一个步骤
Hadoop单机安装配置过程 1. 首先安装JDK,必须是sun公司的jdk,最好1.6版本以上 2. 安装ssh,免密码登陆。
Linux下Hadoop单机配置,供大家参考学习!
本文主要介绍了在Ubuntu系统上Hadoop单机版测试环境的搭建过程。
Hadoop单机伪分布式安装
详细的hadoop单机配置步骤,非常好的一个文档。
大数据组件 详细安装步骤(linux配置 hadoop集群搭建 hive flume kafka spark zk 搭建安装)
NULL 博文链接:https://turnround.iteye.com/blog/1974337
搭建hadoop单机版+hbase单机版+pinpoint整合springboot
王家林的“云计算分布式大数据Hadoop实战高手之路---从零开始”的第二讲Hadoop图文训练课程:全球最详细(不放过任何一个细节)的从零起步搭建Hadoop单机和伪分布式开发环境图文教程.pdf