CentOS   发布时间:2022-04-02  发布网站:大佬教程  code.js-code.com
大佬教程收集整理的这篇文章主要介绍了centOS中安装hadoop伪分布式(二)大佬教程大佬觉得挺不错的,现在分享给大家,也给大家做个参考。

概述

承接上一篇文章 centOS中安装hadoop伪分布式(一),继续配置hadoop。 已经配置完成的镜像文件(virtualBox适用),下载地址 http://pan.baidu.com/s/1o7H3CKi 一、安装hadoop (1)将hadoop解压到目录/usr/bigdata/hadoop (2)配置hadoop环境变量 使用文本编辑工具vi或gedit打开 /etc/profile文

承接@R_301_2517@文章centOS中安装hadoop伪分布式(一),继续配置hadoop。

已经配置完成的镜像文件(virtualBox适用),下载地址http://pan.baidu.com/s/1o7H3CKi

一、安装hadoop

(1)将hadoop解压到目录/usr/bigdata/hadoop

(2)配置hadoop环境变量
使用文本编辑工具vi或gedit打开 /etc/profile文件,追加环境变量。
export HADOOP_HOME=/usr/bigdata/hadoop/hadoop-2.6.4/
export PATH=$PATH:$HADOOP_HOME/bin
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib"
重新加载文件,使环境变量生效
. /etc/profile 

二、伪分布式配置

(1)配置core-site.xml
打开/usr/bigdata/hadoop/hadoop-2.6.4/etc/hadoop/core-site.xml,追加如下内容
<configuration>
<property>
  <name>hadoop.tmp.dir</name>
  <value>file:/usr/bigdata/hadoop/hadoop-2.6.4/</value>
</property>
<property>
  <name>fs.defaultFS</name>
  <value>hdfs://localhost:9000</value>
</property>
</configuration>

(2)配置hdfs-site.xml
打开/usr/bigdata/hadoop/hadoop-2.6.4/etc/hadoop/hdfs-site.xml,追加如下内容
<configuration>
<property>
  <name>dfs.replication</name>
  <value>1</value>
</property>
<property>
  <name>dfs.namenode.name.dir</name>
  <value>file:/usr/bigdata/hadoop/hadoop-2.6.4/tmp/dfs/name</value>
</property>
<property>
  <name>dfs.datanode.data.dir</name>
  <value>file:/usr/bigdata/hadoop/hadoop-2.6.4/tmp/dfs/data</value>
</property>

(3)格式化hdfs
命令行中,定位到 /usr/bigdata/hadoop/hadoop-2.6.4/bin目录下,执行如下命令
hadoop namenode -format

(4)启动hdfs
命令行中,定位到/usr/bigdata/hadoop/hadoop-2.6.4/sbin目录下,执行如下命令
. /start-dfs.sh

(5)验证是否启动成功,执行命令jps,查看namenode、datanode、secondNamenode 是否成功启动。


(6)启动web管理界面
浏览器输入http://localhost:50070,结果如图所示

大佬总结

以上是大佬教程为你收集整理的centOS中安装hadoop伪分布式(二)全部内容,希望文章能够帮你解决centOS中安装hadoop伪分布式(二)所遇到的程序开发问题。

如果觉得大佬教程网站内容还不错,欢迎将大佬教程推荐给程序员好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。
标签: