操作系统 / 系统课时

共享内存怎样设计数据布局

共享内存怎样设计数据布局

共享内存性能高,但只要多个进程对同一片字节的解释稍有不同,就会出现越界、错读和升级不兼容。本篇用“固定头部 + 定长槽位”的环形缓冲区说明如何安排字段、对齐边界和版本信息,让生产者与消费者稳定解释同一块内存。

学习目标

  • 设计包含魔数、版本号、容量和读写序号的固定头部。
  • 用定长槽位构建可计算偏移的环形缓冲区,并理解对齐要求。
  • 为后续字段扩展预留兼容空间,避免升级后直接破坏旧消费者。

先把共享内存当成二进制协议

共享内存不是“把一个进程里的对象指针交给另一个进程”,而是一段双方共同解释的字节区域。布局一旦跨进程共享,就应像网络协议一样固定字段含义、宽度和偏移。

一个实用布局通常分成两部分:前部是元数据头,记录格式版本、槽位大小、容量和读写进度;后部是连续槽位区。槽位大小固定后,第 i 个槽位的地址可以由 header_size + i * slot_size 计算,不需要在共享区保存进程私有指针。

版本化共享内存环形缓冲区布局

固定头部与槽位边界

头部字段要优先选择 uint32_t、uint64_t 这类固定宽度类型,并显式保存 header_bytes 和 slot_bytes。这样新版本即使扩展头部,也能先读取基础字段,再决定是否兼容。

将下面的完整程序保存为 layout.c,使用支持 C11 的编译器编译运行。示例把头部和每个槽位都固定为 64 字节,并通过编译期断言阻止布局被无意修改;它只演示内存布局,不包含并发同步。

c
#include <stdint.h>
#include <stdio.h>

enum {
    RING_CAPACITY = 8,
    HEADER_BYTES = 64,
    SLOT_BYTES = 64
};

typedef struct {
    uint32_t magic;
    uint16_t version;
    uint16_t header_bytes;
    uint32_t slot_bytes;
    uint32_t capacity;
    uint64_t write_seq;
    uint64_t read_seq;
    uint8_t reserved[32];
} Header;

typedef struct {
    uint64_t seq;
    uint32_t len;
    uint32_t flags;
    uint8_t payload[48];
} Slot;

typedef struct {
    Header header;
    Slot slots[RING_CAPACITY];
} Ring;

_Static_assert(sizeof(Header) == HEADER_BYTES, "Header must be 64 bytes");
_Static_assert(sizeof(Slot) == SLOT_BYTES, "Slot must be 64 bytes");

int main(void) {
    Ring ring = {0};
    ring.header.magic = 0x52494E47u;
    ring.header.version = 1;
    ring.header.header_bytes = sizeof(Header);
    ring.header.slot_bytes = sizeof(Slot);
    ring.header.capacity = RING_CAPACITY;

    printf("header=%zu slot=%zu ring=%zu\n",
           sizeof(Header), sizeof(Slot), sizeof(Ring));
    return 0;
}

预期输出

text
header=64 slot=64 ring=576

如果编译器或后续修改改变结构尺寸,编译期断言会直接失败,而不是让两个进程带着不一致的结构继续运行。

环形缓冲区只保存稳定索引

生产者和消费者不要在共享内存里保存普通指针,因为不同进程的映射虚拟地址可能不同。更稳妥的做法是保存单调递增的逻辑序号,访问槽位时再计算 seq % capacity。

write_seq 表示下一个待写逻辑序号,read_seq 表示下一个待读序号。缓冲区已用数量可由两者之差得到;当差值达到 capacity 时,生产者必须等待、丢弃旧数据或采用业务定义的覆盖策略。

对齐与版本兼容要一起设计

对齐首先影响原子访问和缓存行为。需要跨进程原子更新的字段应满足其类型的自然对齐要求;高频写入的生产者和消费者计数还可分离到不同缓存行,降低伪共享。不要用 packed 强行压缩热路径结构,否则可能制造未对齐访问。

版本兼容则靠“可识别、可跳过、可拒绝”。消费者连接后至少检查 magic、version、header_bytes、slot_bytes 和 capacity。新增字段优先消耗预留区;如果语义发生不兼容变化,就提升版本号并拒绝旧格式,而不是让旧进程按错误偏移继续读取。

共享内存布局一旦被多个独立进程依赖,就应把它视为稳定 ABI:字段宽度、偏移、对齐、版本和扩展策略都要在写入第一条业务数据之前确定。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

共享内存怎样设计数据布局

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通