标签：kafka

2021-01-13admin阅读(1055)评论(0)赞(3)

问题要从一次Kafka的宕机开始说起。 笔者所在的是一家金融科技公司，但公司内部并没有采用在金融支付领域更为流行的 RabbitMQ ，而是采用了设计之初就为日志处理而生的 Kafka ，所以我一直很好奇Kafka的高可用实现和保障。从Ka...

2020-12-20admin阅读(1733)评论(0)赞(2)

前言 因为迁移了kafka集群，为了确保新环境正常，需要来做一些压力测试。这次压力测试重点会关注一些异常情况下，kafka收发消息的状况。 关于kafka集群的安装可参考上一篇文章。 kafka可能故障及结论 部分broker集群挂掉 若t...

2020-05-04admin阅读(1423)评论(0)赞(2)

Kafka Kafka集群的架构 broker topic partition:分区，把同一个topic分成不同的分区，提高负载 leader:分区的主节点（老大） follower：分区的从节点（小弟） Consumer Group 生产...

2020-04-18admin阅读(2257)评论(0)赞(2)

Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据，具有高性能、持久化、多副本备份、横向扩展等特点。本文介绍了如何使用Go语言发送和接收kafka消息。 sarama Go语言中连接kafka使用...

2020-03-23admin阅读(987)评论(0)赞(1)

作为一个有丰富经验的微服务系统架构师，经常有人问我，应该选择 RabbitMQ 还是 Kafka？。 基于某些原因， 许多开发者会把这两种技术当做等价的来看待。的确，在一些案例场景下选择 RabbitMQ 还是 Kafka 没什么差别，但是...