我是靠谱客的博主 留胡子香氛,最近开发中收集的这篇文章主要介绍storm在zookeeper中心跳流程,觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

storm和zookeeper的数据交互

总结:

  • NimnusSupervisor之间通过/storm/supervisor/topology-id对应的数据进行心跳保持。Supervisor在创建这个路径时采用的是临时节点模式,只要Supervisor死掉这个节点就会被删除,Nimbus就会将分配给这个Supervisor的任务重新进行分配
  • WorkerSupervisor之间/storm/workbeats/topology-id/node-port中的数据进行心跳的维持,NImbus会每隔一段时间获取该路径下的数据,同时Nimbus还会在它的内存中保存上一次的信息。如果发现某个Worker的心跳信息有一段时间没有更新就认为该worker已经死掉,就会将分配给该Worker的任务重新分配
  • Worker和Supervisor之间维持心跳时通过本地文件(基于LocalState)

参考文章:

https://www.cnblogs.com/gulang-jx/p/7419678.html

最后

以上就是留胡子香氛为你收集整理的storm在zookeeper中心跳流程的全部内容,希望文章能够帮你解决storm在zookeeper中心跳流程所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(50)

评论列表共有 0 条评论

立即
投稿
返回
顶部