apache-kafka - 为什么kafka索引文件使用内存映射文件，而日志文件不使用？

Question

我们知道kafka的索引文件使用内存映射文件，但是它的日志文件没有使用内存映射文件技术。

我的问题是为什么索引文件使用内存映射文件，而日志文件却不用？

Answer 1

同时用mmap方式实现log和index appending会带来数据一致性问题。 mmap 不能 100% 保证将数据从内存刷新到文件(假设操作系统上的刷新回复而不是显式调用 munmap(2))，如果索引更新被刷新但日志数据由于某种原因没有被成功刷新，日志中的数据再也看不懂了。

顺便说一句，对于一个append-only数据，在写入方向，我们只需要关心next-to-write block(buffer)，所以巨大的数据应该不会影响这个。