Kettle实现Oracle数据导入HBase

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Kettle实现Oracle数据导入HBase，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含524字，纯文字阅读大概需要1分钟。

内容图文

某个生产数据库（oracle）中单表记录了上亿的车辆定位数据，应用系统的轨迹回放功能已出现明显的加载卡顿现象（优化了索引，查询指定车辆一段时间内的定位数据，差不多在15秒）。考虑到常规分表的方案治标不治本、同时也是为其他更大量级数据项目积累经验，我们决定尝试使用hbase来存储定位数据。要做的第一步就是需要将数据导入到hbase里。由于我们已经建立了CDH环境，且之前已经通过里面的streamset套件成功实现了kafka定位数据导入到hive，故一开始的决定是继续使用streamset来完成数据导入。然而这种方案折腾了很久也没走通，也是各种坑（踩坑参考这个帖子：https://blog.csdn.net/JJBOOM425/article/details/108093283），且受运行环境限制我们没法对oracle进行基础配置，最后不得不转而考虑使用kettle。

环境说明：

——Kettle8.3

——Oracle11g

——CDH6.3.1、HBase2.1.4，集群5个节点

 

原文：https://www.cnblogs.com/coldlight/p/14600357.html

内容总结

以上是互联网集市为您收集整理的Kettle实现Oracle数据导入HBase全部内容，希望文章能够帮你解决Kettle实现Oracle数据导入HBase所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

---