随便撸(www.suibianlu.com)精品网站源码,织梦建站模版,游戏源代码分享平台

kafka分布式发布订阅消息系统 v2.7.0

时间:2020-12-24[其他免费源码]作者:随便撸

kafka是一种高吞吐量的分布式发布订阅消息系统

她有如下特性:

1、通过O(1)的磁盘数据结构提供消息的持久化,这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能。

2、高吞吐量:即使是非常普通的硬件kafka也可以支持每秒数十万的消息。

3、支持通过kafka服务器和消费机集群来分区消息。

4、支持Hadoop并行数据加载。


kafka的目的是提供一个发布订阅解决方案,它可以处理消费者规模的网站中的所有动作流数据。这种动作(网页浏览,搜索和其他用户的行动)是在现代网络上的许多社会功能的一个关键因素。这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。对于像Hadoop的一样的日志数据和离线分析系统,但又要求实时处理的限制,这是一个可行的解决方案。kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理,也是为了通过集群机来提供实时的消费。

本文标签:kafka  分布式发布订阅消息系统 

转载请注明来源:kafka分布式发布订阅消息系统 v2.7.0

本文永久链接地址:https://www.suibianlu.com/22436.html

郑重声明:
本站所有内容均由互联网收集整理、网友上传,并且以计算机技术研究交流为目的,仅供大家参考、学习,不存在任何商业目的与商业用途。
若您需要商业运营或用于其他商业活动,请您购买正版授权并合法使用。 我们不承担任何技术及版权问题,且不对任何资源负法律责任。
如无法链接失效或侵犯版权,请给我们来信:admin#suibianlu.com

Top