一、添加新的datanode节点

 修改namenode服务器的上hadoop的配置文件slave，在该文件中添加新加入集群的

服务器名称（hostname），并添加在/etc/hosts文件中添加对应的解析项，内容如下：

 
    
     
         
  1. [root@namenode~]# cat /etc/hosts 
    2.  
         
  2.  
    3.  
         
  3. 127.0.0.1       localhost.localdomain   localhost 
    4.  
         
  4.  
    5.  
         
  5. ::1             namenode        localhost6.localdomain6 localhost6 
    6.  
         
  6.  
    7.  
         
  7. 192.168.2.9     namenode 
    8.  
         
  8.  
    9.  
         
  9. 192.168.5.55   nagios-server 
    10.  
         
  10.  
    11.  
         
  11. 192.168.2.4     datanode 
    12.  
        
 
    
    修改完成后，将整个hadoop文件的目录和JDK目录复制到新节点（这里是datanode，一下都用datanode来表示）。
 
    
 
    
     
         
  1. [root@namenode ~]# scp –pr /opt/hadoop 192.168.2.4:/opt/hadoop 
    2.  
         
  2. [root@namenode ~]# scp –pr /usr/java 192.168.2.4:/usr/java 
    3.  
        
 
    
    修改datanode上面的/etc/hosts文件，如下：
 
    
 
    
     
         
  1. [root@datanode ~]# cat /etc/hosts 
    2.  
         
  2.  
    3.  
         
  3. 127.0.0.1        localhost.localdomain   localhost 
    4.  
         
  4.  
    5.  
         
  5. ::1              datanode        localhost6.localdomain6 localhost6 
    6.  
         
  6.  
    7.  
         
  7. 192.168.2.9      namenode 
    8.  
         
  8.  
    9.  
         
  9. 192.168.5.55    nagios-server 
    10.  
         
  10.  
    11.  
         
  11. 192.168.2.4      datanode 
    12.  
        
 
    
    配置datanode服务器的环境变量，为了方便这里写入/etc/profile文件（也可以写到对应用户的/home/USER/.bash_profile或者/root/.bash_profile文件中），添加的内容如下：
 
    
 
 
    
 
    
     
         
  1. export OS_ARCH=amd64 
    2.  
         
  2. export OS_BIT=64 
    3.  
         
  3. export JAVA_HOME=/usr/java/jdk1.6.0_14 
    4.  
         
  4. export CLASSPATH=$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar 
    5.  
         
  5. export ANT_HOME=/usr/local/ant 
    6.  
         
  6. export PATH=$JAVA_HOME/bin:$PATH 
    7.  
         
  7. export ZOOKEEPER_INSTALL=/opt/hadoop/zookeeper 
    8.  
         
  8. export PATH=$PATH:$ZOOKEEPER_INSTALL/bin 
    9.  
         
  9. export HADOOP_HOME=/opt/hadoop/hadoop 
    10.  
         
  10. export HADOOP_INSTALL=/opt/hadoop/hadoop 
    11.  
         
  11. export PATH=$PATH:$HADOOP_HOME/bin 
    12.  
         
  12. export LANG=zh_CN.GBK 
    13.  
         
  13. export HIVE_HOME=/opt/hadoop/hive 
    14.  
         
  14. export PATH=$HIVE_HOME/bin:$PATH:$ANT_HOME/bin 
    15.  
         
  15. export LD_LIBRARY_PATH=$JAVA_HOME/jre/lib/$OS_ARCH/server:${HADOOP_HOME}/c++/Linux-$OS_ARCH-$OS_BIT/lib:/usr/local/lib:/usr/lib  
    16.  
        
 
    
    完成上述操作后，启动datanode服务器上的HDFS
 
    
 
    
     
         
  1. [root@datanode ~]#start-dfs.sh 
    2.  
        
 
    
    启动后该节点会自动加入之前的hadoop集群。
 
    
 
 
    
二、WebDav
 
    
挂载WebDav提供的网络存储，需要安装三个包，分别是：fuse、neon和davfs2
 
    
1、  编译安装fuse
 
    
 
    
     
         
  1. [root@datanode src]# tar fvxz fuse-2.8.5.tar.gz 
    2.  
         
  2. [root@datanode src]# cd fuse-2.8.5 
    3.  
         
  3. [root@datanode fuse-2.8.5]# ./configure 
    4.  
        
 
    
如果编译完成后不确定是否正常编译，可以用命令echo $?来获取返回值确认，0表示正常，其它均表示有错误。
 
    
 
    
     
         
  1. [root@datanode fuse-2.8.5]# make && make install 
    2.  
        
 
    
    2、编译安装neon
 
    
 
    
     
         
  1. [root@datanode src]# tar fvxz neon-0.29.6.tar.gz
    2.  
         
  2. [root@datanode src]# cd neon-0.29.6
    3.  
         
  3. [root@datanode neon-0.29.6]# ./configure 
    4.  
         
  4. [root@datanode neon-0.29.6]# make && make install
    5.  
        
 
    
3、编译安装davfs2
 
    
 
    
     
         
  1. [root@datanode src]# tar fvxz davfs2-1.4.6.tar.gz 
    2.  
         
  2. [root@datanode src]# cd davfs2-1.4.6 
    3.  
         
  3. [root@datanode davfs2-1.4.6]# ./configure 
    4.  
         
  4. [root@datanode davfs2-1.4.6]# make && make install
    5.  
        
 
    
    4、挂载webdav
 
    
    挂载hdfs需要使用命令mount.davfs，而使用该命令需要davfs2用户，所以先创建该用户：
 
    
 
    
     
         
  1. [root@datanode~]# useradd davfs2 
    2.  
        
 
    
    之后开始挂载：
 
    
 
    
     
         
  1. [root@datanode ~]# mount.davfs http://192.168.2.9:8080/hdfs-webdav /hdfs 
    2.  
         
  2. Please enter the username to authenticate with server 
    3.  
         
  3. http://192.168.2.9:8080/hdfs-webdav or hit enter for none. 
    4.  
         
  4. Username: davfs2 
    5.  
         
  5. Please enter the password to authenticate user davfs2 with server 
    6.  
         
  6. http://192.168.2.9:8080/hdfs-webdav or hit enter for none. 
    7.  
         
  7.   Password:  
    8.  
        
 
    
    完成后就可以进入挂载点查看了。祝大家成功