2. 安装Zookeeper2.1. 解压程序※ 3台服务器分别执行tar -xf ~/install/zookeeper-3.4.9.tar.gz -C/opt/cloud/packagesln -s /opt/cloud/packages/zookeeper-3.4.9 /opt/cloud/bin/zookeeper ln -s /opt/cloud/packages/zookeeper-3.4.9/conf /opt/cloud/etc/zookeepermkdir -p /opt/cloud/data/zookeeper/dat mkdir -p /opt/cloud/data/zookeeper/logdat mkdir -p /opt/cloud/logs/zookeeper2.2. 修改配置文件2.2.1. 修改zo...
目录结构 Hadoop集群(CDH4)实践之 (0) 前言 Hadoop集群(CDH4)实践之 (1) Hadoop(HDFS)搭建 Hadoop集群(CDH4)实践之 (2) HBaseZookeeper搭建 Hadoop集群(CDH4)实践之 (3) Hive搭建 Hadoop集群(CHD4)实践之 (4) Oozie搭建 Hadoop集群(CHD4)实践之 (5) Sqoop安目录结构 Hadoop集群(CDH4)实践之 (0) 前言 Hadoop集群(CDH4)实践之 (1) Hadoop(HDFS)搭建 Hadoop集群(CDH4)实践之 (2) HBase&Zookeeper搭建 Hadoop集群(CDH4)实践之 (3) Hiv...
1、环境说明 集群环境至少需要3个节点（也就是3台服务器设备）：1个Master，2个Slave，节点之间局域网连接，可以相互ping通，下面举例说明，配置节点IP分配如下： Hostname IP 新建用户 新建用户密码 Master 10.10.10.213 hadoop 123456 Slave1 10.10.10.2141、环境说明集群环境至少需要3个节点（也就是3台服务器设备）：1个Master，2个Slave，节点之间局域网连接，可以相互ping通，下面举例说明，配置节点IP分配如下：HostnameIP新...
1.环境配置 本次集群有三台节点 Master ： hpd1 Slave:hdp2,hdp3 OS:CentOS6.5 2.下载 Zookeeper3.4.6 Zookeeper3.4.6 下载地址： http://mirrors.cnnic.cn/apache/zookeeper/zookeeper-3.4.6/ 3.解压安装 $tar-zxvfzookeeper-3.4.6.tar.gz 4.配置 设置环境1.环境配置 本次集群有三台节点 Master：hpd1 Slave:hdp2,hdp3 OS:CentOS 6.5 2.下载Zookeeper 3.4.6 Zookeeper 3.4.6下载地址：http://mirrors.cnnic.cn/apache/zookeeper/z...
Hadoop2.2.0HAzookeeper3.4.5 体系结构 错误处理 心血之作，在熟悉 hadoop2 架构的过程耽误了太长时间，在搭建环境过程遇到一些问题，这些问题一直卡在那儿，不得以解决，耽误了时间。最后，千寻万寻，把问题解决，多谢在过程提供帮助的大侠。这篇文章中，我 Hadoop2.2.0+HA+zookeeper3.4.5+体系结构+错误处理 心血之作，在熟悉hadoop2架构的过程耽误了太长时间，在搭建环境过程遇到一些问题，这些问题一直卡在那儿，不得以解决，耽...
hadoop学习（九）Hadoop2.2.0HAzookeeper3.4.5详细配置过程错误处理(2) Hadoop2.2.0HAzookeeper3.4.5详细配置过程体系结构错误处理(2) 这篇文章，主要是针对zookeeper和hadoop集群的整体测试，以及自己在实际过程遇到的问题和解决思路。 整个过程是，痛苦、无hadoop学习（九）Hadoop2.2.0HAzookeeper3.4.5详细配置过程错误处理(2)Hadoop2.2.0+HA+zookeeper3.4.5详细配置过程+体系结构+错误处理(2)这篇文章，主要是针对zookeeper和h...
安装虚拟机（centos7）Master：192.168.0.228Slave：192.168.0.207软件apache-hive-1.2.1-bin.tar.gzhadoop-2.6.0-cdh5.4.8.tar.gzjdk-8u65-linux-x64.tar.gzmysql-connector-java-5.1.31-bin.jarhbase-0.98.15-hadoop2-bin.tarzookeeper-3.4.6.tar1.关闭防火墙 Systemctl disable firewalld.service Systemctl stop firewalld.service Setenforce 0 Vim /etc/selinux/config 永久关闭 将SELINUX=enforce改为SELINUX=disab...
从零基础到高级，一对一培训！[技术QQ：2937765541] ------------------------------------------------------------------------------------------------------------------------------------------- 课程体系：获取视频资料和培训解答技术支持地址 课程展示(大数据技术很广，一直在线为你培训解答！)： 获取视频资料和培训解答技术支持地址 大数据架构开发 挖掘分析 Hadoop HBase Hive Storm Spark Sqoop Flume ZooKeep...
DEFROUTE=yes IPV4_FAILURE_FATAL=no IPV6INIT=yes IPV6_AUTOCONF=yes IPV6_DEFROUTE=yes IPV6_FAILURE_FATAL=no IPV6_ADDR_GEN_MODE=stable-privacy NAME=ens192 UUID=f384ed85-2e1e-4087-9f53-81afd746f459 DEVICE=ens192 ONBOOT=no 修改后内容：TYPE=Ethernet PROXY_METHOD=none BROWSER_ONLY=no BOOTPROTO=static DEFROUTE=yes IPV4_FAILURE_FATAL=no IPV6INIT=yes IPV6_AUTOCONF=yes IPV6_DEFROUTE=yes IPV6_FAILURE_FATAL=no...
从零基础到高级，一对一技术培训！全程技术指导！[技术QQ：2937765541] https://item.taobao.com/item.htm?id=535950178794 ------------------------------------------------------------------------------------- Java互联网架构师培训！https://item.taobao.com/item.htm?id=536055176638大数据架构开发 挖掘分析 Hadoop HBase Hive Storm Spark Sqoop Flume ZooKeeper Kafka Redis MongoDB 机器学习 云计算 视频教程 Java互...
1、配置ssh免密登录 ① 本机无密钥登录 1.进入~/.ssh目录（若无，则执行一次ssh localhost）， 2.执行ssh-keygen -t rsa命令（回车即可），我弄过了所以已经有啦！ 3.再执行cat ./id_rsa.pub >> ./authorized_keys命令，把id_rsa.pub追加到授权的key里面， 4.给authorized_keys授权chmod 644 authorized_keys， ls -al ~/.ssh命令看权限，5.重启 sudo service sshd restart，6.连接 ssh localhost（yes/no，手动输入yes） 7.退出 e...
一、风哥大数据运维架构师实战培训专题2.0介绍课程背景：为满足想学习和掌握大数据运维与体系架构的学员，风哥特别设计的一套比较系统的大数据库运维培训课程。 课程目标：本套风哥大数据运维架构师实战培训课程，分5个阶段：大数据Hadoop核心架构运维实战、大数据存储管理与查询分析实战、大数据计算框架与消息搜索实战、大数据安全调度与数据采集实战、大数据集群管理平台运维实战。学完本套风哥大数据课程可以熟悉Hadoop大数据生...
# Hadoop HBase ZooKeeper分布式集群环境搭建## 一、环境说明#### 1.1 主机情况集群环境至少需要3个节点（也就是3台服务器设备）：1个Master，2个Slave，节点之间局域网连接，可以相互ping通，下面举例说明，配置节点IP分配如下：四个节点均使用CentOS 7.6系统，为了便于维护，集群环境配置项最好使用相同用户名、用户密码、相同hadoop、hbase、zookeeper目录结构。注1： 可以通过编辑/etc/sysconfig/network文件来修改 hostname 。...
1.启动集群 文件名： start-cluster.sh#! /bin/bashecho "------正在启动集群------" echo "------正在启动Zookeeper------" '/home/grid/zookeeper/bin/zkServer.sh start' ssh grid@Slave1 '/home/grid/zookeeper/bin/zkServer.sh start' ssh grid@Slave2 '/home/grid/zookeeper/bin/zkServer.sh start'echo "------正在启动Hadoop-----" '/home/grid/hadoop/sbin/start-all.sh'echo "------正在启动Spark------" '/home/grid/sp...