今天看啥  ›  专栏  ›  大数据学习笔记

如何搭建伪分布式集群

大数据学习笔记  · 知乎专栏  ·  · 2019-04-08 20:59
1、搭建虚拟机4台,暂时只用到一台2、网络配置好,关闭iptables防火墙,关闭selinux3、jdk1.7.0_80 hadoop-2.6.5.tar.gz 上传这两个包4、安装jdk rpm -ivh jdk-7u80-linux-x64.rpm5、编辑vi /etc/profile 添加两行记录: export JAVA_HOME=/usr/java/jdk1.7.0_67 export PATH=$PATH:$JAVA_HOME/bin 执行 . /etc/profile让配置生效6、解压hadoop-2.6.5.tar.gz到/opt目录 tar -zxf hadoop-2.6.5.tar.gz -C /opt7、向/etc/profile添加两行 export HADOOP_PREFIX=/opt/hadoop-2.6.5 export PATH=$PATH:$HADOOP_PREFIX/bin:$HADOOP_PREFIX/sbin 执行. /etc/profile让配置生效8、配置免秘钥登录 ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa cat ~/.ssh/id_dsa.pub > ~/.ssh/authorized_keys9、修改/opt/hadoop-2.6.5/etc/hadoop/hadoop-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_8010、修改/opt/hadoop-2.6.5/etc/hadoop/slaves node1 设置datanode进程所在的主机11、配置core-site.xml <!-- namenode和其他组件的通信使用hdfs协议 node1表示 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照