Kafka3.0 Broker 高效读写数据_kafka 多盘-CSDN博客

网站介绍:文章浏览阅读160次。1)Kafka 本身是分布式集群,可以采用分区技术,并行度高2)读数据采用稀疏索引,可以快速定位要消费的数据3)顺序写磁盘Kafka 的 producer 生产数据,要写入到 log 文件中,写的过程是一直追加到文件末端,为顺序写。官网有数据表明,同样的磁盘,顺序写能到 600M/s,而随机写只有 100K/s。这与磁盘的机械机构有关,顺序写之所以快,是因为其省去了大量磁头寻址的时间。4)页缓存 + 零拷贝技术零拷贝:Kafka的数据加工处理操作交由Kafka生产者和Kafka消费者处理。Kafka_kafka 多盘