Hadoop2.6-CDH5.7部署安装-创新互联

cdh地址

http://archive-primary.cloudera.com/cdh6/cdh/5/

创新互联建站是一家专注于成都做网站、成都网站制作与策划设计,同江网站建设哪家好?创新互联建站做网站,专注于网站建设10余年,网设计领域的专业建站公司;建站业务涵盖:同江等地区。同江做网站价格咨询:13518219792

添加sudo权限的无密码访问的hadoop用户

# useradd hadoop

# vi /etc/sudoers
    hadoop  ALL=(root)      NOPASSWD:ALL

# su - hadoop

下载 解压缩

[hadoop@hadoop000 softwore]$ wget http://archive-primary.cloudera.com/cdh6/cdh/5/hadoop-2.6.0-cdh6.7.0.tar.gz

[hadoop@hadoop000 app]$ tar -zxvf ../softwore/hadoop-2.6.0-cdh6.7.0.tar.gz

修改配置

首先需要jdk1.7

[root@hadoop000 jdk1.7.0_80]# echo $JAVA_HOME
/usr/java/jdk1.7.0_80

修改 etc/hadoop/hadoop-env.sh 文件

在hadoop-env.sh文件中修改java_home
export JAVA_HOME=/usr/java/jdk1.7.0_80

增加HADOOP_PREFIX
export HADOOP_PREFIX=/home/hadoop/app/hadoop-2.6.0-cdh6.7.0

修改etc/hadoop/core-site.xml:

    
        fs.defaultFS
        hdfs://hadoop:9000
    

修改etc/hadoop/hdfs-site.xml:

    
        dfs.replication
        1
    

修改etc/slaves文件

hadoop

配置ssh免密

删除.ssh文件夹 防止冲突
# rm -rf .ssh

生成ssh秘钥
# ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
# cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

修改authorized_keys 文件权限
chmod 600 authorized_keys

初始格式化hdfs

[hadoop@hadoop000 hadoop-2.6.0-cdh6.7.0]$ bin/hdfs namenode -format

启动hdfs

[hadoop@hadoop000 hadoop-2.6.0-cdh6.7.0]$ sbin/start-dfs.sh

jps查看进程

web ui 查看

另外有需要云服务器可以了解下创新互联scvps.cn，海内外云服务器15元起步，三天无理由+7*72小时售后在线，公司持有idc许可证，提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案，具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势，专为企业上云打造定制，能够满足用户丰富、多元化的应用场景需求。