Hadoop学习(五)SecondaryNameNode
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了Hadoop学习(五)SecondaryNameNode,小编现在分享给大家,供广大互联网技能从业者学习和参考。文章包含1349字,纯文字阅读大概需要2分钟。
内容图文
![Hadoop学习(五)SecondaryNameNode](/upload/InfoBanner/zyjiaocheng/735/5f983556875c4c8cb8310ae7d13038c6.jpg)
- 是一个小弟;是NameNode的冷备份;当NameNode挂掉的时候,它并不能马上替换NameNode并提供服务。辅助NameNode,分担其工作量,SecondaryNameNode负责定时默认1小时,从namenode上获取fsimage和edits来进行合并,然后再发送给namenode。减少namenode的工作量。在紧急情况下,可辅助恢复NameNode。
热备份 | 冷备份 |
---|---|
b是a的热备份,如果a坏掉。那么b马上运行代替a的工作。 | b是a的冷备份,如果a坏掉。那么b不能马上代替a工作。但是b上存储a的一些信息,减少a坏掉之后的损失。 |
需要注意,SecondaryNameNode并不是NameNode的备份。所有HDFS文件的元信息都保存在NameNode的内存中。在NameNode启动时,它首先会加载fsimage到内存中,在系统运行期间,所有对NameNode的操作也都保存在了内存中,同时为了防止数据丢失,这些操作又会不断被持久化到本地edits文件中。Edits文件存在的目的是为了提高系统的操作效率,NameNode在更新内存中的元信息之前都会先将操作写入edits文件。在NameNode重启的过程中,edits会和fsimage合并到一起,但是合并的过程会影响到Hadoop重启的速度,SecondaryNameNode就是为了解决这个问题而诞生的。
SecondaryNameNode的角色就是定期的合并edits和fsimage文件,合并步骤:
(1) 合并之前告知NameNode把所有的操作写到新的edites文件并将其命名为edits.new。
(2) SecondaryNameNode从NameNode请求fsimage和edits文件
(3) SecondaryNameNode把fsimage和edits文件合并成新的fsimage文件
(4) NameNode从SecondaryNameNode获取合并好的新的fsimage并将旧的替换掉,并把edits用第一步创建的edits.new文件替换掉
(5) 更新fstime文件中的检查点
内容总结
以上是互联网集市为您收集整理的Hadoop学习(五)SecondaryNameNode全部内容,希望文章能够帮你解决Hadoop学习(五)SecondaryNameNode所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错,欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 gblab@vip.qq.com 举报,一经查实,本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。