2 HBase 快速入门 2.1 HBase 安装部署 2.1.1 Zookeeper 正常部署 首先保证 Zookeeper 集群的正常部署，并启动之： [oldlu@hadoop102 zookeeper-3.4.10]$ bin/zkServer.sh start [oldlu@hadoop103 zookeeper-3.4.10]$ bin/zkServer.sh start [oldlu@hadoop104 zookeeper-3.4.10]$ bin/zkServer.sh start2.1.2 Hadoop 正常部署 Hadoop 集群的正常部署并启动： [oldlu@hadoop102 hadoop-2.7.2]$ sbin/start-dfs.sh [oldlu@hadoop103 h...
环境配置及软件安装 环境配置域名映射免密登录关闭SELinux时钟同步 软件安装环境变量配置配置文件环境配置 目标配置三台虚拟机（CentOS7.6版本），网络配置已完成，JDK已安装并配置环境变量，防火墙已关闭 hostnamectl set-hostname num04 域名映射 【必选操作】 首先配置当前主机名 可以执行hostname查看到当前主机名，为进行配置的话可以看到一个IP地址 执行hostnamectl set-hostname 主机名，为主机设置主机名，这里三台主机就分...
一、所需环境 jdk 8 二、Hadoop下载 http://hadoop.apache.org/releases.html 三、配置环境变量HADOOP_HOME: C:\hadoop-2.7.7Path: C:\hadoop-2.7.7\bin四、命令行检验hadoop五、报错Error: JAVA_HOME is incorrectly set.Please update C:\hadoop-2.7.7\conf\hadoop-env.cmd打开C:\hadoop-2.7.7\etc\hadoop\hadoop-env.cmd 是配置文件的问题，我的JAVA_HOME目录是C:\Program Files\Java\jdk1.8.0_121，因为Program Files中存在...
原文链接：https://www.cnblogs.com/houblog/p/7605860.html一、虚拟机安装 1、镜像：CentOS 6.5镜像即可，CentOS-6.5-i386-minimal.iso。 2、创建虚拟机：打开Virtual Box，点击“新建”按钮，点击“下一步”，输入虚拟机名称为spark2upgrade01，选择操作系统为Linux，选择版本为Red Hat，分配4096MB内存，后面的选项全部用默认，在Virtual Disk File location and size中，一定要自己选择一个目录来存放虚拟机文件，最后点击“cr...
查看jps [root@master ~]# jps 7445 Jps 如果出现这个则可以继续下一步 如果没有请参考jdk环境搭建导入Hadoop包，并放到/opt目录下查看Hadoop包是否导入 [root@master ~]# cd /opt [root@master opt]# ll total 485452 -rw-r--r--. 1 root root 311585484 Jul 31 09:24 hadoop-2.6.0-cdh5.7.0.tar.gz -rw-r--r--. 1 root root 185515842 Jul 28 21:01 jdk-8u144-linux-x64.tar.gz解压Hadoop [root@master opt]# tar -zxvf hadoop-2...
一、前言Hadoop原理架构本人就不在此赘述了，可以自行百度，本文仅介绍Hadoop-3.1.2完全分布式环境搭建（本人使用三个虚拟机搭建）。首先，步骤：① 准备安装包和工具：hadoop-3.1.2.tar.gzjdk-8u221-linux-x64.tar.gz（Linux环境下的JDK）CertOS-7-x86_64-DVD-1810.iso（CentOS镜像） 工具：WinSCP（用于上传文件到虚拟机），SecureCRTP ortable（用于操作虚拟机，可复制粘贴Linux命令。不用该工具也可以，但是要纯手打命令），V...
搭建为伪分布式Hadoop环境1、宿主机（Windows）与客户机（安装在虚拟机中的Linux）网络连接。a) Host-only 宿主机与客户机单独组网；好处：网络隔离；坏处：虚拟机和其他服务器之间不能通讯；b) Bridge 桥接 宿主机与客户机在同一个局域网中。好处：窦在同一个局域网，可以互相访问；坏处：不完全。2、Hadoop的为分布式安装步骤a) 设置静态IP在centos下左面上右上角图标右键修改；重启网卡service network restart;验证：执行命令i...
转： Hadoop框架：集群模式下分布式环境搭建 本文源码：GitHub点这里 || GitEE点这里 一、基础环境配置 1、三台服务 准备三台Centos7服务,基础环境从伪分布式环境克隆过来。 133 hop01，134 hop02，136 hop032、设置主机名 ## 设置名称 hostnamectl set-hostname hop01 ## 重启 reboot -f3、主机名通信 vim /etc/hosts # 添加服务节点 192.168.37.133 hop01 192.168.37.134 hop02 192.168.37.136 hop034、SSH免密登录 配置三台服务...
Linux介绍和环境搭建 linux的主要特点 基本思想 Linux的基本思想有两点：一切都是文件； 每个软件都有确定的用途。完全免费，多用户、多任务； 良好的界面，支持多种平台。 注意： linx是一个免费的像windows一样的操作系统 linux中几乎一切是基于文件，文件几乎没有后缀区分 linux中有且仅有一个超级用户root linux一般用作服务器linux的目录结构目录 作用/ linux系统的根目录，一般只存放目录/bin和/usr/bin 命令(二进制)文件目录...
Hadoop安装配置 服务器版本 lsb_release -d # CentOS Linux release 8.3.2011创建hadoop用户 su # 输入root，密码，以root用户登陆 useradd -m hadoop -s /bin/bash # 创建可以登陆的hadoop用户，并使用/bin/bash 作为shell passwd hadoop # 修改密码，按提示输入两次密码，提示密码少于8个字符，再次输入passwd hadoop，即可 visudo # 为hadoop用户增加管理员权限，方便部署,找到root ALL=(ALL) ALL这行,下面增加一行内容：hadoop...
# Hadoop HBase ZooKeeper分布式集群环境搭建## 一、环境说明#### 1.1 主机情况集群环境至少需要3个节点（也就是3台服务器设备）：1个Master，2个Slave，节点之间局域网连接，可以相互ping通，下面举例说明，配置节点IP分配如下：四个节点均使用CentOS 7.6系统，为了便于维护，集群环境配置项最好使用相同用户名、用户密码、相同hadoop、hbase、zookeeper目录结构。注1： 可以通过编辑/etc/sysconfig/network文件来修改 hostname 。...
hadoop2.7 伪分布式搭建1、安装环境 ①、一台Linux CentOS6.7 系统 hostname ipaddress subnet mask geteway Node1 192.168.139.150 255.255.255.0 192.168.139.2 ②、hadoop 2.7 安装包 百度云下载链接：http://pan.baidu.com/s/1gfaKpA7 密码：3cl7 2、安装 JDK 教程：http://www.cnblogs.com/ysocean/p/6952166....
打怪升级之小白的大数据之旅(四十二) Hadoop运行环境搭建 上次回顾 上一章，我们学习了大数据的相关概念以及Hadoop的基础介绍，本章节主要介绍Hadoop的环境搭建；配置的点比较多，当下一章Hadoop集群配置结束后，我专门将可能出错的地方做个总结，方便大家配合使用 Hadoop运行环境搭建 环境搭建前，我先列一个Hadoop的整体大纲，方便大家进行理解哈，本章节主要是对Hadoop运行环境搭建进行分享，下一章对Hadoop运行模式搭建进行分享...
环境搭建参考文档：http://www.aboutyun.com/thread-8130-1-1.html 错误解析参考文档： http://www.aboutyun.com/thread-12695-1-1.html
Hadoop伪分布式集群环境的搭建 CentOS系统的安装与配置准备工作关闭防火墙和禁用SELINUX配置hostname与IP地址之间的对应关系创建用户和用户组 JDK的安装利用XShell建立连接、上传文件JDK的安装与配置 Hadoop伪分布式集群的安装配置上传文件与解压修改配置文件最后的工作与检测运行成果文章对于原理性知识并未深究讲解，仅以无错误完成安装任务为目的，欢迎各位大佬批评指正，如有问题请在评论区留言。 本文用到的文件百度云链接（包...