Rocket MQ消息中间件 至 2010 年,随着阿里业务的快速发展,急需一款支持顺序消息,拥有海量消息堆积能力的消息 Meta Q 1.0 在 2011 年诞生。,到 2012 年, Meta Q 已经发展到了 Meta Q ... 网站建设# meta# mq# rocket 2年前180
10 张图告诉你 RocketMQ 是怎样保存消息的 ,大家好,我是君哥,今天分享 RocketMQ 是怎样保存消息的。,首先,在 RocketMQ 集群中创建一个 Topic,叫做 MyTestTopic,配置如下图:,,这里解释一下图中的几个参数... 网站建设# consumequeue# rocketmq# topic 3年前410
Kafka的春天-重试机制 哈喽,大家好,我是指北君。,最近业务上用到了Spring Kafka,所以系统性的探索了下Spring Kafka的各种用法,发现了很多实用的特性,下面介绍下Spring Kafka的消息重试机制... 网站建设# kafka# retry# spring 3年前250
我是如何将一个老系统的Kafka消费者服务的性能提升近百倍的? 如果问你,如何提高kafka队列中的消息消费速度呢?,答案很简单,topic多分几个分片,然后使用消费者组(Consumer Group)去消费topic即可。,如果加个条件,对同一个对象的操作请求必... 网站建设# kafka# topic# 分片 3年前710
生产环境里的Kafka天天丢消息,老大逼着我通宵排查解决 这篇文章,给大家聊一下写入Kafka的数据该如何保证其不丢失?,我们暂且不考虑写磁盘的具体过程,先大致看看下面的图,这代表了Kafka的核心架构原理。,,那么现在问题来了,如果每天产生几十TB的数据... 网站建设# kafka# topic# 分布式 3年前210
五张图带你彻底理解 RocketMQ 轨迹消息 大家好,我是君哥。,为了方便跟踪消息发送和消费的轨迹,RocketMQ 引入了轨迹消息,今天一起来学习一下。,默认情况下,RocketMQ 是不开启轨迹消息的,需要我们手工开启。,Broker 端开启... 网站建设# topic# 定义# 开启 3年前540
线上Kafka消息堆积,Consumer掉线,怎么办? 线上kafka消息堆积,所有consumer全部掉线,到底怎么回事?,最近处理了一次线上故障,具体故障表现就是kafka某个topic消息堆积,这个topic的相关consumer全部掉线。,整体排查... 网站建设# consumer# kafka# topic 3年前190
我向《RocketMQ技术内幕》一书的创始人请教了一个问题 ,是这样的,我在学习rocketmq的时候遇到了一个奇怪的问题,就是同一个消费者组内的消费者订阅同一个主题topic,不同的tag的时候看到一个消息丢失的问题,这个问题我也是向《RocketMQ技术内... 网站建设# consumer# rocketmq# topic 3年前220
Kafka 消息存储及检索 Kafka是一个分布式的消息队列系统,消息存储在集群服务器的硬盘,Kafka中可以创建多个消息队列,称为topic,消息的生产者向topic中发布消息,消息的消费者从topic中获取消息,消息是海量的... 网站建设# kafka# partition# topic 4年前340
Kafka消息积压,你监控Rebalance了吗? 《Bug:Zabbix对Kafka topic积压数据监控》一文我们通过监控lag来对Kafka某个分区topic的消费情况进行告警。通过告警我们发现,分区topic的消费积压情况告警非常频繁,这无疑... 网站建设# kafka# rebalance# topic 4年前450
一个能干掉90%候选人的Kafka面试连环炮 ,面试大厂时,一旦简历上写了Kafka,几乎必然会被问到一个问题:说说acks参数对消息持久化的影响?,这个acks参数在kafka的使用中,是非常核心以及关键的一个参数,决定了很多东西。,所以无论是... 网站建设# acks# kafka# partition 4年前120
面试题:一个Consumer订阅两个Topic,其中一个Topic消息过多堆积了,会影响另一个Topic消费吗? ,无意中在网上看到这么一个问题,一个consumer订阅两个topic,其中一个topic消息过多堆积了,会影响另一个topic消费吗?,对于RocketMQ这种,看源码如何方便,于是乎我就开始找相... 网站建设# consumer# topic# 堆积 4年前370
吃透Kafka底层通信机制后,我把系统网络性能提升了10倍以上 这篇文章,给大家聊一个消息中间件相关的技术话题,对于一个优秀的消息中间件而言,客户端与服务端通信的时候,对于这个网络通信的机制应该如何设计,才能保证性能最优呢?甚至通过优秀的设计,让性能提升10倍以上... 网站建设# kafka# topic# 客户端 5年前230
如何快速优雅的用Know Streaming创建Topic ①、点击新增Topic,,②、填写Topic的基本信息和配置,,③、点击确认、创建成功!,简单清晰的操作界面, 让你能够非常快速的创建一个新的Topic;除了这个基本的功能外,你还可以看到在这里能够针... 网站建设# __# consumer# delete 5年前80