RocksDB内部数据组织方式介绍及性能压测 Basic OperationsIterator迭代器本身不会占用太多内存，但是迭代器最好保持较短的生存周期，为了确保某些资源能被释放，包括： 迭代器创建时的 memtables 和 SST 文件。即使某些 memtables 和 SST 文件在刷新或压缩后被删除，如果迭代器固定它们，它们仍然保留。 当前迭代位置的数据块。这些块将保存在内...

文件系统读写 从内核文件系统看文件读写过程 address_space 指示文件在页缓存中已经缓存了的物理页，是页缓存和外部设备中文件系统的桥梁 读文件 read()函数根据传入的文件路径，在目录项中检索，找到该文件的inode 在inode中，通过文件内容偏移量计算出要读取的页 通过inode找到文件对应的address_space，在address_space中访问该文件的页缓存...

在数据主键有序的基础上，只为少部分数据建立索引，从而在查询时能够圈定出大致的范围，再在范围内利用适当的查找算法找到目标数据。 空间占用小，查询相对慢 Sparse Index in Kafka单个Kafka的TopicPartition中，消息数据会被切分成段（segment）来存储，扩展名为.log。log文件的切分时机由大小参数log.segment.bytes（默认值1G）和时间参数l...

补充参考链接 kafka的使用场景为什么要使用 Kafka 消息队列解耦、削峰：传统的方式上游发送数据下游需要实时接收，如果上游在某些业务场景：例如上午十点会流量激增至顶峰，那么下游资源可能会扛不住压力。但如果使用消息队列，就可以将消息暂存在消息管道中，下游可以按照自己的速度逐步处理； 可扩展：通过横向扩展生产者、消费者和broker, Kafka可以轻松处理巨大的消息流； 高吞吐、低...