一、hadoop版本介绍不收费的Hadoop版本主要有三个(均是国外厂商),分别是:Apache(最原始的版本,所有发行版均基于这个版本进行改进)、Cloudera版本(Cloudera’s Distribution Including Apache Hadoop,简称 CDH)、Hortonworks版本(Hortonworks Data Platform,简称“HDP”),对于国内而言,绝大多数选择CDH版本。 Cloudera的CDH和Apache的Hadoop对应关系: CDH的两个系列版本分别是CDH3和CDH4,CDH3对应Hadoop 1.0...
Hadoop 使用离不开Linux,为了方便开发人员,Linux大都部署在虚拟机上,这么看来虚拟机便成了开发的前提之前提。本文就来谈谈这前之前提在安装以及安装完成后所遇到的和该做的事。 首先,安装虚拟机(本机2G以下的内存最好就别装了,会卡死的)。 对干净的机子来说基本没有需要注意的地方,选择好适合本机位数的版本傻瓜式安装。 对曾安装过VmwareWorkstation的机子可能就没那么顺利了,如果卸载不全留有残余就比较麻烦了...
前言 大数据实在是太热,一直对新技术充满着向往,其实hadoop也不是新技术,已经好几年了。打算学习,一下hadoop整个生态圈的内容。这篇文章介绍一下环境搭建,自己搭环境摸索了好几天连着,终于搭建完成,记录一下。并share一下,如果哪天你也需要,大家一起共勉。在这希望...
最近要搭hadoop环境,不想装双系统,所以就想在虚拟机上实验一番 环境准备 1、光盘镜像:CentOS-6.0-i386-bin-DVD.iso 2、VMware10 3、hadoop版本:hahadoop-2.2.0 4、jdk1.8.0 我们要建立一个具有如下配置的集群: host name ip address os 1 master 192.168
最近要搭hadoop环境,不想装双系统,所以就想在虚拟机上实验一番环境准备
1、光盘镜像:CentOS-6.0-i386-bin-DVD.iso2、VMware10
3、hadoop版本:hahadoop-2.2.0
4、jdk1.8...
我使用的是VMnet8(NAT模式),默认这个ip总是变化;我在网络适配器里面设置成固定的ip
比如: vmnet8:
IP 192.168.146.1
网关:192.168.146.2
三台虚拟机的
IP:192.168.146.10、192.168.146.20、192.168.146.30
网关:192.168.146.2
测试环境
操作系统:Windows 10, 64-bit
虚拟机:VMware? Workstation 14 Pro(版本号:14.0.0 build-6661328)
Linux镜像版本:CentOS-7-x86_64-DVD-1804.iso
VMware虚拟机安装
1、按照软件提示界面安装软件,安装过程就不做说明了;
附上软件注册机:https://github.com/PengShuaixin/ToolsLibrary/tree/master/Vmware
2、打开软件----编辑----虚拟网络编辑器这里可能无法设置,点一下“更改设置”获取管理员权限即可,如图:3、...
一、安装VMware(点击图片可直接进入网站下载)
(2)安装软件
二、 安装linux系统
(1)准备镜像
ubuntu 18.04 vim的安装
VPS从16.04换到18.04,发现vim命令找不到了,只有vi,界面一般,方向键还不对。
重新安装vim就能解决问题:sudo apt-get remove vim-common
sudo apt-get install vimhadoop集群搭建
ssh免密登录,首先确认 openssh-server是否安装成功
确认命令:ps -e|grep ssh
看看是否是 sshd,而不是代理
没有的话先启动下ssh,在查看下确认是否成功,不行的话重新安装openssh-server
安装命令: sudo apt-get install ...
无线网下VMware虚拟机设置
环境准备虚拟机设置基本步骤无线网下设置虚拟机的静态ip设置Linux主机名(临时设置+永久设置)关闭防火墙(临时关闭+永久关闭)设置Linux免密登录环境准备
安装VMware下载Centos7镜像,>' rel='nofollow' target='_blank'>下载地址 >>
虚拟机设置基本步骤
无线网下设置虚拟机的静态ip
基本设置 >' rel='nofollow' target='_blank'>参考博客 >>总结大概步骤 查看虚拟机子网掩码和网关对照记录的子网掩码和...