问答>python+大数据开发>数据发布与订阅有哪些主要应用场景?
数据发布与订阅有哪些主要应用场景?
来源传智教育2022年06月29日 16时45分27秒
数据发布与订阅主要应用场景有4个。
1.应用中用到的一些配置信息放到Zookeeper上进行集中管理。这类场景通常是这样:应用在启动时会主动来获取一次配置,同时,在节点上注册一个Watcher,这样一来,以后每次配置有更新的时候,都会实时通知到订阅的客户端,用来达到获取最新配置信息的目的。
2.分布式搜索服务中,索引的元信息和服务器集群机器的节点状态存放在Zookeeper的一些指定节点,供各个客户端订阅使用。
3.分布式日志收集系统中,这个系统的核心工作是收集分布在不同机器的日志。收集器通常是按照应用来分配收集任务单元,因此需要在Zookeeper上创建一个以应用名作为path的节点P,并将这个应用的所有机器IP,以子节点的形式注册到节点P上,这样一来当机器变动的时候,能够实时通知到收集器调整任务去分配。
4.系统中有些信息需要动态获取,并且还会存在人工手动去修改这个信息的发问。通常是暴露出接口,例如JMX接口,来获取一些运行时的信息。
引入Zookeeper之后就不用自己实现一套方案了,只要将这些信息存放到指定的Zookeeper节点上即可。
小提示:在上面提到的应用场景中,有个默认的前提是:数据量很小,但是数据更新可能会比较快的场景
最新问答
相关问答
- 2022年06月29日Flume系统要求是什么?
- 2022年06月29日Zookeeper集群角色有哪三种?
- 2022年06月29日hadoop1.x和hadoop2.x的区别是什么,做了哪些改进?
- 2022年06月28日znode有哪两种节点?
- 2022年06月28日非全新集群选举的过程是什么样的?
- 2022年06月28日applicationmaster是什么?
- 2022年06月28日yarn的工作流程是什么?
- 2022年06月23日matplotlib绘制的图形是只有一种结构吗?
- 2022年06月23日如何使用matplotlib绘图?
- 2022年06月21日学历低可以学Python吗?