环境搭建

1.安装VM

http://www.xiazaiba.com/html/24456.html

1G4LV-FZ25P-0ZCN8-ZA3QH-8C00C

 

2.安装Linux

http://lmdkfs.blog.163.com/blog/static/746113242013102710638268/

http://hi.baidu.com/hrxpdecnatcstzr/item/b57ec59d7ae1f6b8cd80e5f5

系统磁盘分区挂载

/boot 500M左右 ext-4

/ 剩余的 ext-4

Swap (交换区)2G左右

参考:http://www.cnblogs.com/gylei/archive/2011/12/04/2275987.html


_ueditor_page_break_tag_

VMware安装虚拟机Ubuntu提示piix4_smbus:Host SMBus错误解决办法

原因: ubuntu装入i2c_piix4模块所致,因为系统找不到这个模块,所以报错

处理方法:

1、查明装入模块的确切名字,显示输出的结果是模块的确切名字:i2c_piix4

2、将该模块列入不装入名单。编辑文件sudo vim /etc/modprobe.d/blacklist.conf,在末尾加入blacklist i2c_piix4

3、重启reboot

 

3.安装vim

切换到root账户下 sudo –i

查看vim安装状态 vim

按提示安装vim,安装完毕,可修改文件

blob.png

然后进入vim编辑

(root注销 exit)

 

4.vim常见指令

插入指令:a 在当前位置后插入 ESC退出插入

:wq 保存并退出

其它指令参考:http://www.cnblogs.com/softwaretesting/archive/2011/07/12/2104435.html

http://www.cnblogs.com/zhanglong0426/archive/2010/10/07/1845268.html

 

5. 配置Hadoop环境

在Ubuntu下创建hadoop用户组和用户

1、创建hadoop用户组

blob.png

2、创建hadoop用户

blob.png

3、给hadoop用户添加权限,打开/etc/sudoers文件

blob.png

 

blob.png

保存,关闭

4.安装JDK

下载jdkhttp://www.oracle.com/technetwork/java/javase/downloads/index.html

在/usr/下新建java目录:sudo mkdir /usr/java

blob.png

复制文件到Java目录下

blob.png

更改文件权限,使之可以运行

Rpm安装后,执行rpm提示

blob.png

安装alien

blob.png

安装完,执行

blob.png

或者:sudo alien -i xxxxxxx.rpm

参考:http://1358440610-qq-com.iteye.com/blog/1961925

其它一些命令:

查看目录文件列表ls

blob.png

设置权限、rpm执行

blob.png

安装程序:

blob.png

查看Java版本

blob.png

 

5.环境变量配置

blob.png

blob.png

blob.png

不用重启,使环境生效:

blob.png

查看Java版本报错

blob.png

blob.png

blob.png

也无法解决。

下载1.7版本,tar.gz

blob.png

复制到Java目录,解压缩

blob.png

配置环境

blob.png

blob.png

blob.png

查看是否成功

blob.png

 

6.SSH服务安装

安装openssh-server

blob.png

创建ssh-key,箭头处直接回车

blob.png

将id_rsa.pub追加到authorized_keys授权文件中

blob.png

测试是否安装成功

blob.png

7.安装hadoop

下载并解压,复制到/usr/local文件夹下

改名

blob.png

修改配置文件:

blob.png

blob.png

注意,下面的是基于2.2.0以前版本的配置,若是2.2.0的,请参考:http://blog.uoolo.com/Articles/114 

②注意temp文件夹,没有要新建

blob.png

blob.png

blob.png

③先要去掉template

blob.png

blob.png

blob.png

blob.png

blob.png

运行hadoop

格式化hadoop文件系统

blob.png

进入命令环境

blob.png

启动dfs

blob.png

blob.png

启动yarn

blob.png

blob.png

浏览器输入http://127.0.1.1:8088/

blob.png

若停止hadoop,依次运行如下命令:
$./stop-yarn.sh
$./stop-dfs.sh

参考:

http://weixiaolu.iteye.com/blog/1401931

http://weixiaolu.iteye.com/blog/1401786

http://www.cnblogs.com/iuranus/archive/2012/11/10/2764319.html

http://blog.csdn.net/gobitan/article/details/13020211 


最后修改:2014 年 07 月 02 日
如果觉得我的文章对你有用,请随意赞赏