1、我实验报告封面课程名称: Hadoop 大数据处理 课程代码: JY1124 任课老师: 陈宁穗 实验指导老师: 陈宁穗 实验报告名称: 实验 3 Hadoop 安装与配置 2 学生姓名: 学号: 教学班: 递交日期: 签收人: 我申明,本报告内的实验已按要求完成,报告完全是由我个人完成,并没有抄袭行为。我已经保留了这份实验报告的副本。申明人(签名):实验报告评语与评分:评阅老师签名:一、实验名称: Hadoop 安装与配置二、实验日期:2015 年 9 月 25 日三、实验目的:Hadoop 安装与配置。四、实验用的仪器和材料:安装环境:以下两个组合之一1. 硬件环境:内存 ddr3 4G
2、及以上的 x86 架构主机一部系统环境:windows 、linux 或者 mac os x 软件环境:运行 vmware 或者 virtualbox(2) 内存 ddr 1g 及以上的主机两部及以上五、实验的步骤和方法:本次实验重点在 ubuntu 中安装 jdk 以及 hadoop。一、关闭防火墙sudo ufw disableiptables -F二、jdk 的安装1、普通用户下添加 grid 用户2、准备 jdk 压缩包,把 jdk 压缩包放到以上目录(此目录可自行设置)3、将 jdk 压缩包解压改名改名为 jdk:mv jdk1.7.0_45 jdk移动到/usr 目录下:mv jd
3、k /usr(此目录也可自行设置,但需与配置文件一致 )4、设置 jdk 环境变量此采用全局设置方法,更改/etc/profile 文件sudo gedit /etc/profile添加(根据情况自行设置)export JAVA_HOME=/usr/jdkexport JRE_HOME=/usr/ jdk/jreexport CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATHexport PATH=$JAVA_HOME/bin: $JRE_HOME/ bin: $PATH然后保存。5、检验是否安装成功java -version二、ssh 免密
4、码1、退出 root 用户,su grid生成密钥ssh-keygen t rsa 三、hadoop 安装和配置1、下载解压 hadoop 安装包2、进入 conf 目录,修改 hadoop-env.sh 文件 ,JAVA_HOME 改为 jdk 安装目录修改 core-site.xml 文件,设置 namenode 节点注意:需在 hadoop 下创建一个 tmp 目录,跟以下设置对应。修改 hdfs-site.xml 文件 修改 mapred-site.xml 文件 所有的节点都修改/etc/hosts,使彼此之间都能把主机名解析为 ip ,需转到root 用户下修改。修改 masters 和 slaves 文件 3、格式化分布式文件系统 4、启动守护进程 5、检测守护进程启动情况 六、数据记录和计算:指从实验中测到的数据以及计算结果。七、实验结果或结论:即根据实验过程中所见到的现象和测得的数据,作出结论。八、备注或说明:可写上实验成功或失败的原因,实验后的心得体会、建议等。九、引用参考文献:1. 陆嘉恒 Hadoop 实战机械工业出版社