首页 / HBASE / HBASE搭建教程-My

HBASE搭建教程-My

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了HBASE搭建教程-My，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含2661字，纯文字阅读大概需要4分钟。

内容图文

安装前一定要注意版本兼容！
安装前一定要注意版本兼容！
安装前一定要注意版本兼容！
重要的话说三遍，参考《HADOOP&HBASE&HIVE整合》中的兼容原则。
由于之前Hadoop是2.4，亲测在Hadoop2.4上hbase1.0.1是可以工作的。而0.94版本存在兼容性的问题。
  • 配置
所有的配置文件位于附件中，供后来参考。
Hbase和hadoop一样在master端和slave端都需要配置，操作还是在master端配好后发送到slave并稍作修改。列一下参考信息：
Master：
hadoop-test1    192.168.70.28(内网地址)    10.58.121.175(外网地址)
Slaver：
hadoop-test2    192.168.70.29(内网地址)    10.58.121.176(外网地址)

  • 过程
1.系统变量配置
2.HBase配置
3.Hadoop配置修改
4.同步系统时间
5.启动验证

  • 系统变量配置
hosts中对于IP和名称，参见Hadoop配置。
在profile中加入解压后的文件位置（master+slave）
  1. export HBASE_HOME=/usr/hbase-1.0.1
  2. export PATH=$PATH:/usr/hbase-1.0.1/bin
  • Hbase配置
hbase-env.sh:
    按需修改，里面有每个配置的说明，这里仅修改两项：
  1. export JAVA_HOME=/usr/java/jdk1.7.0_01
  2. export HBASE_MANAGES_ZK=true
    其中第二句一定要有，表示使用hbase自带的zookeeper。

hbase-site.xml:
    加入：
  1.     <property>
  2. <name>hbase.rootdir</name>
  3. <value>hdfs://192.168.70.28:9000/hbase</value>
  4. </property>
  6. <property>
  7. <name>hbase.cluster.distributed</name>
  8. <value>true</value>
  9. </property>
  11. <property>
  12. <name>hbase.zookeeper.property.clientPort</name>
  13. <value>2181</value>
  14. </property>
  16. <property>
  17. <name>dfs.replication</name>
  18. <value>1</value>
  19. </property>
  21. <property>
  22. <name>hbase.zookeeper.quorum</name>
  23. <value>hadoop-test2</value>
  24. </property>
  26. <property>
  27. <name>hbase.zookeeper.property.dataDir</name>
  28. <value>/usr/dataDir</value>
  29. </property>
  31. <property>
  32. <name>hbase.master.port</name>
  33. <value>60000</value>
  34. </property>
  36. <property>
  37. <name>hbase.master.info.port</name>
  38. <value>60010</value>
  39. </property>
    其中rootdir是放在hdfs上的。后面的dataDir位置是在本地。dfs.replication要和hadoop的配置一样。
    zookeeper.quorum是设置集群的地址列表，只需要写slave的地址。
    60010端口是后面我们进行验证的web端口，这里要写上。
regionservers：
    类似Hadoop的slave文件，写入slave的IP地址。（没有则新建）

配好后将hbase文件复制到slave节点，并清空slave的regionservers内容。
  • Hadoop配置
在hadoop的hdfs-site.xml中加入：
  1.     <property>
  2.     	<name>dfs.datanode.max.xcievers</name>
  3.     	<value>4096</value>
  4.     </property>
说明：该参数限制了datanode所允许同时执行的发送和接受任务的数量，缺省为256，hadoop-defaults.xml中通常不设置这个参数。这个限制看来实际有些偏小，高负载下，DFSClient 在put数据的时候会报 could not read from stream 的 Exception。
master 和 slave都需要配置。
  • 同步系统时间
hbase要求集群各个机器之间时间同步，可以用date查看时间。如果不一样也可以用date -s 修改成一样的时间。

  • 启动验证
hbase要在hadoop启动后启动，而且要先于hadoop关闭。
输入start-hbase.sh，启动hbase，如果：
master上有HMaster
slave上有HRegionServer和HQuorumPeer
则说明启动成功，还可以在
hadoop-test1:60010页面上查看信息。
停止使用stop-hbase.sh


参考文件：



原文：http://www.cnblogs.com/goalishman/p/4520532.html

内容总结

以上是互联网集市为您收集整理的HBASE搭建教程-My全部内容，希望文章能够帮你解决HBASE搭建教程-My所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/1262522.html

来源：【匿名】