操作系统 / 系统课时

跟踪 read/write 到页缓存

跟踪 read/write 到页缓存

普通文件的 read、write 通常不会每次都直接访问磁盘。理解页缓存后,你能区分读取命中与缺页、写入返回与真正持久化,并知道为什么 write 成功只代表数据已被内核接受,而不能自动等价于已经安全落盘。

学习目标

  • 跟踪普通缓冲 I/O 从系统调用进入页缓存再到存储设备的主要路径。
  • 区分页缓存命中、缓存缺失和脏页写回三个阶段。
  • 解释 write 返回、后台回写与 fsync 完成之间的持久化差异。

read 先查页缓存

应用调用 read 后,内核先根据文件和偏移定位对应的页缓存内容。若所需数据已经在内存中,内核可直接把数据复制到用户缓冲区,不必等待设备 I/O,这就是页缓存命中。

发生缓存缺失时,内核需要发起文件数据读取,经过文件系统和块层从设备取得数据,再把读到的内容放入页缓存并返回给应用。顺序读取还可能触发预读,让后续尚未请求的数据提前进入缓存。

write 先制造脏页

普通缓冲写入通常先把用户数据复制进页缓存,并把对应缓存页标记为脏页。只要内核成功接收这些数据,write 就可能返回,因此应用此时看到的“写成功”主要表示数据进入了内核管理的缓存状态。

普通文件 read/write 经过页缓存的命中、缺失与脏页写回路径

脏页不会永久留在内存。内核会根据脏页比例、时间和内存压力等条件启动回写,把数据经文件系统和块层提交给存储设备。这个后台过程与最初的 write 调用在时间上可以分离。

write 返回不等于已经持久化

下面的程序刻意把 write 和 fsync 分开。第一条输出只证明 write 已经成功返回;第二条输出出现在 fsync 成功之后,表示内核已完成该文件为持久化所要求的数据与相关元数据同步。

c
#include <fcntl.h>
#include <stdio.h>
#include <string.h>
#include <unistd.h>

int main(void) {
    int fd = open("page-cache-demo.txt", O_CREAT | O_TRUNC | O_WRONLY, 0644);
    if (fd < 0) {
        perror("open");
        return 1;
    }

    const char *data = "persistent-data\n";
    if (write(fd, data, strlen(data)) < 0) {
        perror("write");
        close(fd);
        return 1;
    }
    puts("write returned");

    if (fsync(fd) < 0) {
        perror("fsync");
        close(fd);
        return 1;
    }
    puts("fsync returned");

    close(fd);
    return 0;
}

预期输出

text
write returned
fsync returned

这两行输出不能直接观察页缓存内部状态,却能准确表达语义边界:write returned 与 fsync returned 是两个不同的完成点。若进程在第一行之后异常退出,内核中的脏页通常仍可继续回写;若整机掉电,则尚未持久化的数据存在丢失风险。

fsync 解决的是持久化时点

fsync(fd) 会要求内核把该文件已修改的数据以及保证文件一致性所需的元数据推进到持久化边界,并等待完成后再返回。具体文件系统可能使用日志、写回排序或设备刷新命令来实现这一承诺。

对于“先写临时文件,再重命名替换正式文件”一类事务式更新,还需要考虑目录项本身的持久化;只同步文件内容并不自动涵盖所有崩溃一致性需求。这里的关键不是死记调用组合,而是明确:数据页、文件元数据和目录元数据可能有不同的持久化时点。

哪些路径不完全遵循这套流程

mmap 映射普通文件时,同样会与页缓存交互,只是访问通过缺页异常和内存读写发生;需要持久化时通常要用 msync 或其他同步机制。直接 I/O 则会尽量绕过页缓存,适合有专门缓存策略的数据库等场景,但对对齐、文件系统和设备能力有额外要求。

排查“应用说写完了但数据没落盘”时,应按 write 是否成功、数据是否仍为脏页、后台回写是否完成、是否调用同步接口、底层设备是否真正完成持久化的顺序定位。把“系统调用完成”和“介质持久化完成”分开,是理解整个写入路径的核心。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

跟踪 read/write 到页缓存

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通