hadoop&hbase学习00--安装hadoop

软件版本系统red hat 6.5hadoophadoop-2.7.3hbasehbase-1.2.4 一、hadoop的配置 1.1、环境变量配置

vi /etc/profile 
添加Java， hadoop, hbase的配置
#java 环境变量
export JAVA_HOME=/usr/java/
export JAVA_BIN=$JAVA_HOME/bin
export PATH=$PATH:$JAVA_BIN
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
#hadoop 环境变量
export HADOOP_HOME=/var/www/html/hadoop-2.7.3
export PATH=$PATH:$HADOOP_HOME/bin
#hbase 环境变量
export HBASE_HOME=/var/www/html/hbase-1.2.4
export PATH=$PATH:$HBASE_HOME/bin

注意使用source /etc/profile使环境变量生效

1.2、配置主从节点文件

#配置主节点
vi /var/www/html/hadoop-2.7.3/etc/hadoop/master
master


#配置从节点
vi /var/www/html/hadoop-2.7.3/etc/hadoop
/slaves
master
slave1
slave2

1.3、配置host文件

vi /etc/hosts

1.3、core-site.xml的配置

    
        fs.default.name
        hdfs://master:9000
    
    
        fs.defaultFS
        hdfs://master:9000
    
    
        io.file.buffer.size
        131072
    
    
        hadoop.tmp.dir
        file:/usr/local/hadoop/tmp
        A base for other temporary directories.
    
    
        hadoop.proxyuser.hduser.hosts
        *
    
    
        hadoop.proxyuser.hduser.groups
        *
    

1.4、hdfs-site.xml

    
        dfs.namenode.name.dir
        file:/usr/local/hadoop/hdfs/name    
    
    
        dfs.datanode.data.dir
        file:/usr/local/hadoop/hdfs/data    
    
    
        dfs.replication
        3    
    
    
        dfs.webhdfs.enabled
        true    
    

1.5、yarn-site.xml配置

    yarn.resourcemanager.hostname
    master


    yarn.nodemanager.aux-services
    mapreduce_shuffle

1.6、mapred-site.xml

    
        mapred.job.tracker
        master:9001
    
    
    mapreduce.framework.name
    yarn
    
      
        mapreduce.jobhistory.address  
        master:10020