kafka稀疏索引原理

Kafka中的索引文件以稀疏索引的方式构造消息的索引，它并不保证每个消息在索引文件中都有对应的索引项。每当写入一定量 （broker参数 s指定），默认为 4096 ，即 4KB 的消息时，偏移量索引文件和时间戳索引文件分别增加一个偏移量索引项和时间戳索引项。

我们知道，单个Kafka的TopicPartition中，消息数据会被切分成段（segment）来存储，扩展名为。log文件的切分时机由大小参数s（默认值1G）和时间参数s（默认值7天）共同决定。