大数据面试题百日更新_Hive专题(Day12)

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了大数据面试题百日更新_Hive专题(Day12)，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1003字，纯文字阅读大概需要2分钟。

内容图文

2.hive 有索引吗

Hive 支持索引，但是 Hive 的索引与关系型数据库中的索引并不相同，比如，Hive 不支持主键或者外键。

Hive 索引可以建立在表中的某些列上，以提升一些操作的效率，例如减少
MapReduce 任务中需要读取的数据块的数量。

在可以预见到分区数据非常庞大的情况下，索引常常是优于分区的。

虽然 Hive 并不像事物数据库那样针对个别的行来执行查询、更新、删除等操作。它更多的用在多任务节点的场景下，快速地全表扫描大规模数据。但是在某些场景下，建立索引还是可以提高 Hive 表指定列的查询速度。（虽然效果差强人意）

?索引适用的场景

适用于不更新的静态字段。以免总是重建索引数据。每次建立、更新数据后，都要重建索引以构建索引表。

?Hive 索引的机制如下：

hive 在指定列上建立索引，会产生一张索引表（Hive 的一张物理表），里面的字段包括，索引列的值、该值对应的 HDFS 文件路径、该值在文件中的偏移量;
v0.8 后引入 bitmap 索引处理器，这个处理器适用于排重后，值较少的列（例如， 某字段的取值只可能是几个枚举值）
因为索引是用空间换时间，索引列的取值过多会导致建立 bitmap 索引表过大。但是，很少遇到 hive 用索引的。说明还是有缺陷 or 不合适的地方的。

内容总结

以上是互联网集市为您收集整理的大数据面试题百日更新_Hive专题(Day12)全部内容，希望文章能够帮你解决大数据面试题百日更新_Hive专题(Day12)所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

---