本机环境:ubuntu 12.04 32位jdk 1.7（1）maven-3.2.2的安装首先到maven官网下载，http://maven.apache.org/，这里我下载了最新版本，maven-3.2.2解压到/usr/local/目录下： tar -zxvf apache-maven-3.2.2-bin.tar.gz，并重命名为maven修改 /etc/profile:添加一下两个变量并保存：export M2_HOME=/usr/local/mavenexport PATH=.:$M2_HOME/bin:$PATH然后在终端上输入：source /etc/profile测试是否安装成功，在终端输入：mvn -v，...
安装步骤：1、新建虚拟机（网络选桥接模式、内存尽量大）2、安装Ubuntu 18.043、安装JDK JRE4、创建hadoop用户# 1、创建用户 sudo useradd -m hadoop -s /bin/bash # 2、设置密码（按提示输入两次密码）sudo passwd hadoop # 3、设置权限sudo adduser hadoop sudo # 4、用hadoop登录后更新一下 apt sudo apt-get update5、配置SSH无密码登录ssh localhost此时会有如下提示(SSH首次登陆提示)，输入 yes 。然后按提示输入密码 hado...
本文主要参考：1. http://blog.csdn.net/ab198604/article/details/8250461 （比较喜欢此作者通俗的写风，哈哈，所以整张篇幅大量粘贴他的内容） 2. http://os.51cto.com/art/201309/411793_all.htm 3. http://gxl-ct001.iteye.com/blog/1982910 4. http://w本文主要参考：1. http://blog.csdn.net/ab198604/article/details/8250461 （比较喜欢此作者通俗的写风，哈哈，所以整张篇幅大量粘贴他的内容） 2. http://os.51cto.com/ar...
本文主要记录Hadoop2.x在Ubuntu 12.04下编译源码的主要步骤和注意点： ［一］、基础环境 Ubuntu 12.04 LTS 64? 位 Hadoop2.2.0 Java version: 1.7.0_55 Apache Maven 3.2.1 ［二］、软件配置 1、更新apt 源 vi /et/apt/sources.list ,在文件末增加如下国内访本文主要记录Hadoop2.x在Ubuntu 12.04下编译源码的主要步骤和注意点： ［一］、基础环境 Ubuntu 12.04 LTS 64? 位Hadoop2.2.0Java version: 1.7.0_55Apache Maven 3.2.1［二...
原文来自林羽飞扬 ubuntu版本12.04.3 64位 hadoop是用运行在java虚拟机上的，所以需要先安装jdk，jdk安装配置方法在另一篇博文ubuntu12.04下安装jdk1.7 源码包准备： 我下载的是hadoop-1.2.1.tar.gz,这个版本比较稳定，下载地址可以到官网提供的镜像http://w原文来自林羽飞扬 ubuntu版本12.04.3 64位 hadoop是用运行在java虚拟机上的，所以需要先安装jdk，jdk安装配置方法在另一篇博文ubuntu12.04下安装jdk1.7 源码包准备： 我下载...
3.2分布式搭建 hostname 角色 登录用户 IP 网关 hapmaster 主控master hadoop 210.31.181.211 210.31.181.1 hapslave1 附属slave hadoop 210.31.181.216 210.31.181.1 hapslave2 附属slave hadoop 210.31.181.217 210.31.181.1 hapslave3 附属slave hadoop 2 3.2 分布式搭建hostname角色登录用户IP网关hapmaster主控masterhadoop210.31.181.211210.31.181.1hapslave1附属slavehadoop210.31.181.216210.31.181.1hapslave2附属slave...
环境 系统：ubuntu12.4 hadoop版本:2.3.0 一。下载hadoop-2.3.0-tar.gz解压 二修改配置文件，配置文件都在${hadoop-2.3.0}/etc/hadoop路径下 1、core-site.xml configuration property namehadoop.tmp.dir/name value/usr/local/hadoop-2.3.0/tmp/hadoop-${u环境系统：ubuntu12.4 hadoop版本:2.3.0 一。下载hadoop-2.3.0-tar.gz解压 二修改配置文件，配置文件都在${hadoop-2.3.0}/etc/hadoop路径下 1、core-site.xmlhadoop.tmp.dir...
摘自：http://blog.csdn.net/twlkyao/article/details/16801753 一：环境准备： 基于Windows Server下VMWare的ubuntu12.04-64server. 下载免费的VMware Workstation并安装好; 下载 免费的Ubuntu 12.04 server版并在VMware中安装好； 二：基础安装： 执行如下摘自：http://blog.csdn.net/twlkyao/article/details/16801753 一：环境准备：基于Windows Server下VMWare的ubuntu12.04-64server.下载免费的VMware Workstation并安装好; ...
how to install jdk in ubuntu 1、首先到oracle下载上下载jdk-7u5-linux-x64.tar.gz 2、将jdk-7u5-linux-x64.tar.gz拷贝到/usr/lib/jdk/目录下面，这里如果没有jdk文件夹，则创建该文件夹,命令: sudo mkdir jdk //创建文件夹jdk sudo cp -r ~/download/jdk-7 how to install jdk in ubuntu 1、首先到oracle下载上下载jdk-7u5-linux-x64.tar.gz 2、将jdk-7u5-linux-x64.tar.gz拷贝到/usr/lib/jdk/目录下面，这里如果没有jdk文件夹，...
Hadoop也可以运行在一个伪分布模式，每个Hadoop守护进程运行在一个单独的Java程序的一个节点。 伪分布模式需要在单机模式基础上进行配置。 在/software/hadoop/etc/hadoop/ 目录下 core-site.xml,hdfs-site.xml,mapred-site.xml,yarn-site.xml等文件。 下面Hadoop也可以运行在一个伪分布模式，每个Hadoop守护进程运行在一个单独的Java程序的一个节点。伪分布模式需要在单机模式基础上进行配置。在/software/hadoop/etc/hadoop/ 目录...
伪分布版可以参考如下网址 http://blog.itpub.net/28883355/viewspace-1129891/ http://blog.csdn.net/yaofengzhuzhu/article/details/17116869 其中 注意要把openjdk 修改为 oraclejdk 首先apt-get remove 删除干净openjdk 然后不要apt-get install 从官网伪分布版可以参考如下网址 http://blog.itpub.net/28883355/viewspace-1129891/ http://blog.csdn.net/yaofengzhuzhu/article/details/17116869其中 注意要把openjdk 修改为 ...
安装步骤： 1、新建虚拟机（网络选桥接模式、内存尽量大） 2、安装Ubuntu 18.04 3、安装JDK JRE 4、创建hadoop用户# 1、创建用户 sudo useradd -m hadoop -s /bin/bash # 2、设置密码（按提示输入两次密码） sudo passwd hadoop # 3、设置权限 sudo adduser hadoop sudo # 4、用hadoop登录后更新一下 apt sudo apt-get update5、配置SSH无密码登录ssh localhost此时会有如下提示(SSH首次登陆提示)，输入 yes 。然后按提示输入密码...
我的Java目录是/opt/jdk1.8.0_211，hadoop目录是/opt/bigdata/hadoop-3.0.2 1.环境变量 /etc/profile #java export JAVA_HOME=/opt/jdk1.8.0_211export CLASSPATH=.:$JAVA_HOME/lib/export PATH=$PATH:$JAVA_HOME/binexport JAVA_HOME PATH CLASSPATH#hadoopexport HADOOP_HOME=/opt/bigdata/hadoop-3.0.2export PATH=$PATH:$HADOOP_HOME/sbinexport PATH=$PATH:$HADOOP_HOME/binexport HADOOP_MAPRED_HOME=$HADOOP_HOMEexport H...
前言 之前在学Hadoop基础的时候，需要部署环境进行测试，其实那个时候部署遇到了不少的坑，今天突然想起来，所以跟大家分享下，让大家少踩点坑。我的Ubuntu版本是18.10 1. 安装Docker 安装Docker的话基本上没有遇到什么坑，我是按照官方文档去做的，官方文档连接如下: https://docs.docker.com/install/linux/docker-ce/ubuntu/ 下面我还是简单说说文档里面的步骤吧，如果说大家看的懂英文的就直接跳过这一part吧// 删除掉之前安装...
sudo tar -zxvf hadoop-3.1.2.tar.gz -C /usr/local/ sudo mv hadoop-3.1.2/ ./hadoop sudo chown -R hosea ./hadoop/ ls -al vim ./etc/hadoop/hadoop-env.sh export JAVA_HOME=/usr/local/jdk/jdk1.8.0_212 vim ./etc/hadoop/core-site.xml <configuration><property><name>fs.defaultFS</name><value>hdfs://localhost:9000</value></property> </configuration> vim ./etc/hadoop/hdfs-site.xml <configuration><property><nam...