51Testing软件测试论坛

标题: Hadoop安装与配置 [打印本页]
作者: 测试积点老人    时间: 2019-1-9 16:48
标题: Hadoop安装与配置

1.安装配置JDK

https://my.oschina.net/xiaomijiejie/blog/1529007


2.因为ubuntu库里面并没有hadoop的安装包，不能用apt-get安装，需要自己下载

http://mirrors.hust.edu.cn/apache/hadoop/common/这个地址下面去找一个你需要的版本

  1. wget http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.6.4/hadoop-2.6.4.tar.gz
复制代码

3.解压并配置

  1. tar -zxvf hadoop-2.6.4.tar.gz
复制代码

打开hadoop的conf文件夹需要配置4个文件


[attach]120838[/attach]


配置hadoop-env.sh，将JAVA_HOME改为你自己环境安装的目录，不记得可以执行 echo $JAVA_HOME


[attach]120839[/attach]


编辑core-site.xml

  1. -----hadoop工作目录------
  2. <property>
  3. <name>hadoop.tmp.dir</name>
  4. <value>/hadoop</value>
  5. </property>

  7. --------元素目录-------------
  8. <property>
  9. <name>dfs.name.dir</name>
  10. <value>/hadoop/name</value>
  11. </property>

  13. ----文件目录------
  14. <property>
  15. <name>fs.default.name</name>
  16. <value>hdfs://hadoop:6666</value>
  17. </property>
复制代码

编辑hdfs-site.xml

  1. ----数据存放目录------
  2. <property>
  3. <name>dfs.data.dir</name>
  4. <value>/hadoop/data</value>
  5. </property>
复制代码

编辑mapred-site.xml

  1. <property>
  2. <name>mapred.job.tracker</name>
  3. <value>hadoop:6666</value>
  4. </property>
复制代码

4.配置环境变量

  1. vim /ect/proile 并执行source /etc/profile使环境变量配置马上生效
复制代码

[attach]120840[/attach]


5.直接输入hadoop输出提示信息即表示安装成功

格式化文件系统：hadoop namenode -format

输入jps返回启动项即为成功


[attach]120841[/attach]



作者: Miss_love    时间: 2020-12-25 17:58
感谢分享



欢迎光临 51Testing软件测试论坛 (http://bbs.51testing.com/) Powered by Discuz! X3.2