Kafka系列之:定位topic只能保存最新数据的原因

Kafka系列之:定位topic只能保存最新数据的原因

  • 一、背景
  • 二、定位排查方向
  • 三、深入排查

一、背景

  • kafka topic保存的数据少,topic只能保存最新的数据

二、定位排查方向

  • 能想到的定位排查方向:topic能存储的数据量、topic数据保存的时间、topic数据大小

./bin/kafka-configs.sh --zookeeper localhost:2181 --entity-type topics --entity-name optics_rt --describe

Topic: optics_rt TopicId: W37WLzYSRe6pwgYMOprw8w PartitionCount: 6 ReplicationFactor: 3 Configs: retention.bytes=5368709120
Topic: optics_rt Partition: 0 Leader: 2 Replicas: 2,4,3 Isr: 2,3,4
Topic: optics_rt Partition: 1 Leader: 3 Replicas: 3,2,0 Isr: 0,2,3
Topic: optics_rt Partition: 2 Leader: 0 Replicas: 0,3,5 Isr: 0,3,5
Topic: optics_rt Partition: 3 Leader: 5 Replicas: 5,0,1 Isr: 0,1,5
Topic: optics_rt Partition: 4 Leader: 1 R


http://www.niftyadmin.cn/n/5845976.html

相关文章

Kong故障转移参数配置

一、Passive Health Check Healthchecks.Passive.Unhealthy.HttpStatuses 含义: 列出了被认为是“不健康”的HTTP状态码。目的: 当健康检查(Healthcheck)返回这些状态码时,系统会认为服务不健康,并可能触…

kafka生产端之拦截器、分区器、序列化器

文章目录 拦截器序列化器分区器 拦截器 拦截器(Interceptor)是早在Kafka0.10.0.0中就已经引入的一个功能,Kafka一共有两种拦截器:生产者拦截器和消费者拦截器。本节主要讲述生产者拦截器的相关内容,有关消费者拦截器的…

【Qt Creator】Qt Creator编辑器打开QT项目后,项目栏的文件全部呈现灰色的原因分析

目录 1、现象描述2、原因分析3、解决方法 1、现象描述 在学习QT过程中,常常会从网络(如GitHub)上下载QT项目进行学习或借鉴使用,但是使用Qt Creator编辑器打开项目后,往往会出现项目栏的文件全部呈现灰色的问题&#x…

怎样确定网站访问速度出现问题是后台还是服务器造成的?

网站的访问速度会影响到用户的体验感,当网络过于卡顿或访问速度较慢时,会给用户带来不好的体验感,但是网站访问速度不仅会是后台造成影响的,也可能是服务器的原因,那么我们该如何分辨呢? 当网站使用了数据库…

SpringCloud面试题----Nacos和Eureka的区别

功能特性 服务发现 Nacos:支持基于 DNS 和 RPC 的服务发现,提供了更为灵活的服务发现机制,能满足不同场景下的服务发现需求。Eureka:主要基于 HTTP 的 RESTful 接口进行服务发现,客户端通过向 Eureka Server 发送 HT…

redis专栏解读

本篇起导读、目录的作用,介绍redis专栏涉及的内容以及目录。 redis是我们日常开发中常用的NOSQL数据库,本专栏讲讲解redis的内部实现原理,不会侧重于API的使用,遇到API使用上会简单概括。本专栏大致会分为基础部分(数…

基于机器学习的DDoS检测系统实战

基于机器学习的DDoS检测系统实战(PythonScikit-learn)|毕业设计必备 摘要:本文手把手教你从0到1实现一个轻量级DDoS攻击检测系统,涵盖数据预处理、特征工程、模型训练与可视化分析。 一、项目背景与意义 DDoS&#x…

知识库升级新思路:用生成式AI打造智能知识助手

在当今信息爆炸的时代,企业和组织面临着海量数据的处理和管理挑战。知识库管理系统(Knowledge Base Management System, KBMS)作为一种有效的信息管理工具,帮助企业存储、组织和检索知识。然而,传统的知识库系统往往依…