0
点赞
收藏
分享

微信扫一扫

mafka平台架构


什么Mafka

Mafka一个基于Kafka开发的一个分布式消息中间件综合解决方案。

 

 

Mafka架构




mafka平台架构_运维


mafka平台里面有四个角色,这四个角色是通过zk进行协调的。

mafka-client:负责发送和接受消息。

mafka-manager:对集群和client状态管理。

mafka-monitor:用于监控和报警。

mafka集群:由多个broker组成的mafka集群(作为服务端)用于存储消息。

zookeeper:用于存储配置信息。

 


mafka-client


 

  • 易于使用:接口明确简单、几乎不需要配置就可以使用。因为客户端做了很多错误或异常信息收集,使用不正确能及时收到报警方便提醒使用方
  • 负载均衡算法:目前负载均衡算法有很多种,我根据mafka系统特点选择了轮询和权重轮询调度2种算法。
  • 动态策略:通过管理控制台操作,可以支持客户端动态调优。
  • 服务发现:通过监听broker注册在zookeeper上临时节点,可以轻易发现集群中broker的变化,便于实现HA机制。
  • 容灾切换:当前集群crash时,client可以选择切换到其他可用集群。

mafka-monitor


  •  数据和流量监控
  •  运行状态监控
  •  空闲资源监控
  •  客户端监控
  •  消息堆积监控

monitor会对各种维度数据和流量进行监控(集群、broker、topic)。并且能及时掌握集群的运行状态,同时能对空闲资源进行回收,还能及时了解客户端状态变化,跟进消息堆积情况及时处理。

 

mafka-manager


  • 系统状态查看

           消息堆积、系统拓扑、zabbix监控项、客户端上报信息等 

  • 集群管理

           双机房路由、topic,消费状态,appkey等

  • 权限管理

          用户、权限等

消息中间件需要有一个管理控制台,提高运维效率,目前能从mafka-manager看到消息堆积情况,集群拓扑图,

以及zabbix监控项、客户端上报等信息,也能管理双机房路由、topic、消费状态,appkey、用户、权限等。

举报

相关推荐

0 条评论