容器与云原生 / 系统课时
选择块存储与文件存储
选择块存储与文件存储
块存储和文件存储的选型不能只看“数据库用块、共享目录用文件”。真正决定方案的是并发访问范围、单写约束、应用的数据访问方式,以及节点迁移或存储故障时希望把影响限制在哪一层。
学习目标
- 用
RWO、RWOP与RWX需求判断块存储或共享文件存储的优先方向。 - 区分“块存储后端”与 PVC 的
volumeMode: Block,避免把两个概念混为一谈。 - 从延迟、扩缩容、Attach/Detach 和共享服务故障边界验证选型。
先区分三个独立维度
“存储后端类型”“AccessMode”“VolumeMode”不是同一个开关。块存储 CSI 常见做法是把单个卷连接到节点,再由 Pod 通过文件系统或裸块设备消费,常见访问模式是 RWO 或 RWOP;共享文件存储则常通过网络文件协议让多个节点访问同一文件系统,因此更常见 RWX。具体能力仍以 CSI 驱动和后端实现为准。
volumeMode 描述 Pod 如何消费卷。块存储后端完全可以使用 volumeMode: Filesystem,由节点完成格式化与挂载;只有应用确实需要直接操作裸设备时,才使用 volumeMode: Block。因此,“用了块存储”并不等于“PVC 必须是 Block 模式”。
另一个关键边界是:RWO 表示卷可在一个节点上以读写方式挂载,同一节点上的多个 Pod 仍可能访问该卷。需要把读写挂载限制为集群中的单个 Pod 时,应优先评估 CSI 驱动是否支持 RWOP;RWOP 仅适用于 CSI 卷。AccessMode 主要参与卷匹配、调度和挂载语义,不能替代应用自身的一致性、锁和权限控制。
用工作负载约束做选型
最有效的判断问题是:同一份数据是否必须被多个节点上的 Pod 同时读写? 如果答案是肯定的,优先评估支持 RWX 的共享文件存储;如果是否定的,再判断是否需要严格单 Pod 写入,选择 RWOP 或 RWO 的独占卷方案。

典型数据库副本通常更适合“每个 Pod 一块独立卷”,由数据库自身的复制协议完成多副本一致性,而不是让多个数据库实例同时写一个 RWX 目录。相反,多个 Web Pod 需要共享上传目录、构建产物或可变内容时,文件存储能减少节点切换时的卷 Attach/Detach 约束。
用 PVC 验证访问模式
下面是一个片段示例,前提是集群已经存在一个支持 RWO 的块存储 StorageClass 和一个支持 RWX 的文件存储 StorageClass。把 <BLOCK_STORAGE_CLASS> 与 <FILE_STORAGE_CLASS> 替换成真实名称后保存为 storage-choice-pvcs.yaml。两个对象的 Kind 都必须是 PersistentVolumeClaim。
apiVersion: v1
kind: List
items:
- apiVersion: v1
kind: PersistentVolumeClaim
metadata:
name: db-data
spec:
accessModes:
- ReadWriteOnce
volumeMode: Filesystem
storageClassName: <BLOCK_STORAGE_CLASS>
resources:
requests:
storage: 20Gi
- apiVersion: v1
kind: PersistentVolumeClaim
metadata:
name: shared-assets
spec:
accessModes:
- ReadWriteMany
volumeMode: Filesystem
storageClassName: <FILE_STORAGE_CLASS>
resources:
requests:
storage: 20Gi这份清单只声明访问需求;能否动态供应还取决于对应 StorageClass、CSI 驱动、后端能力和 volumeBindingMode。替换 StorageClass 名称后执行:
kubectl create namespace storage-choice --dry-run=client -o yaml | kubectl apply -f -
kubectl apply -n storage-choice -f storage-choice-pvcs.yaml
kubectl get pvc -n storage-choice -o custom-columns='NAME:.metadata.name,STATUS:.status.phase,ACCESS:.spec.accessModes,MODE:.spec.volumeMode,CLASS:.spec.storageClassName'
kubectl get storageclass <BLOCK_STORAGE_CLASS> <FILE_STORAGE_CLASS> -o custom-columns='NAME:.metadata.name,BINDING:.volumeBindingMode,PROVISIONER:.provisioner'预期输出
namespace/storage-choice created
persistentvolumeclaim/db-data created
persistentvolumeclaim/shared-assets created
NAME STATUS ACCESS MODE CLASS
db-data <PVC_STATUS> [ReadWriteOnce] Filesystem <BLOCK_STORAGE_CLASS>
shared-assets <PVC_STATUS> [ReadWriteMany] Filesystem <FILE_STORAGE_CLASS>
NAME BINDING PROVISIONER
<BLOCK_STORAGE_CLASS> <BINDING_MODE> <CSI_PROVISIONER>
<FILE_STORAGE_CLASS> <BINDING_MODE> <CSI_PROVISIONER>首次创建命名空间时通常显示 created,重复执行可能显示 unchanged。如果 StorageClass 采用 Immediate 且供应成功,<PVC_STATUS> 应为 Bound;如果采用 WaitForFirstConsumer,没有 Pod 消费时保持 Pending 是正常现象。实际 provisioner 与绑定模式以集群配置为准。
如果 shared-assets 在应当供应时持续 Pending,不要因为 StorageClass 名称看起来像“file”就假定它支持 RWX。应使用 kubectl describe pvc 查看事件,并结合 CSI 驱动文档确认动态供应、AccessMode 与拓扑能力是否匹配。StorageClass 本身没有一个通用字段列出其支持的全部 AccessMode。
比较性能与故障边界
块存储的数据路径通常更接近“应用 → 文件系统或裸设备 → 节点块设备 → 存储后端”。它适合需要稳定单卷延迟、明确 IOPS/吞吐规格和独占写入边界的工作负载,但节点迁移时可能受 Attach/Detach、卷拓扑和跨可用区限制。
共享文件存储的数据路径通常增加网络文件客户端与文件服务层。它天然适合多个节点共享同一命名空间,但瓶颈可能出现在网络、元数据操作、热点目录或共享服务端;一次文件服务故障也可能同时影响大量 Pod,故障域往往比单卷块存储更大。
不要把“块一定快、文件一定慢”当成规则。高性能文件系统也可能提供很高吞吐,块存储同样可能受队列、限速或远端网络影响。生产选型应使用真实的读写比例、文件大小、并发数、fsync 频率和故障演练验证,而不是只按介质名称推断性能。
把访问语义放在第一位
需要跨节点同时读写同一份文件时,优先从 RWX 文件存储开始评估;每个有状态副本独占数据时,优先使用独立卷,并在“单节点读写”与“严格单 Pod 读写”之间选择 RWO 或 RWOP。只有应用确实能管理裸设备布局时才使用 volumeMode: Block。
最终验收不只是 PVC 能变成 Bound。还应验证 Pod 跨节点重调度是否成功、并发读写语义是否符合应用要求、存储故障是否会扩大到其他工作负载,以及性能指标是否在业务负载下稳定。这样得到的才是生产可用的块/文件存储选择。