NoSQL 与搜索 / 系统课时

节点、集群与分片

节点、集群与分片

Elasticsearch 能让多台服务器共同保存和查询数据,关键在于节点、集群、索引与分片之间的分工。本课将从单个节点开始,逐层解释主分片和副本分片如何分布,并说明它们对容量、查询并发和故障恢复的影响。

学习目标

  • 理解节点、集群、索引和分片的层级关系
  • 区分主分片与副本分片的职责
  • 能推导常见分片配置的存储结果

节点、集群与索引的层级

节点是一个正在运行的 Elasticsearch 实例,会占用计算、内存与磁盘资源。一个节点可以独立运行,但生产环境通常让多个节点加入同一个集群,以分摊数据和请求。

集群是一组相互发现并协同工作的节点。它们共享集群状态,记录索引结构、分片位置和节点信息。客户端可以连接任意可用入口,请求会被协调并转发到实际持有目标分片的节点。

索引是逻辑数据集合,例如商品索引或文章索引。索引并不是一整块文件,而是由若干分片组成。文档写入索引时,会根据路由结果进入某个主分片。

节点集群索引分片层级关系图

主分片与副本分片如何协作

主分片是索引数据的原始分区。假设一个索引有两个主分片,全部文档会按路由规则分散到这两个分片中,每个文档只属于一个主分片。主分片数量因此决定索引最基本的水平拆分粒度。

写入请求先到达目标主分片,再复制到对应副本。搜索请求可能并行访问多个分片,各分片返回局部结果,协调节点负责合并。分片既让数据能够跨节点存储,也让查询具备并行执行的基础。

副本分片是主分片的复制品。某个节点离线后,集群可以把对应副本提升为新的主分片,从而恢复可用性。副本也能参与搜索并分担读取压力,但会占用额外磁盘,并增加写入复制成本。

Elasticsearch 不会把某个主分片和它自己的副本分配到同一节点。若集群只有一个节点,即使配置了副本,副本也无法分配,因为同一节点故障会同时破坏两份数据。

配置推导与规划边界

设索引包含 3 个主分片,每个主分片配置 1 个副本,则逻辑上共有 6 个分片实例:

3×(1+1)=63 \times (1 + 1) = 6

第一个 1 表示主分片本身,第二个 1 表示每个主分片的副本数量。若集群有 3 个数据节点,Elasticsearch 会尽量均匀分散这些分片,并保证同编号的主分片与副本不在同一节点。

增加节点不会直接改变索引已有的主分片数量,但集群可以重新分配分片,使负载更均衡。增加副本数量会产生更多复制分片,提高读取能力和容错空间,同时消耗更多磁盘。

主分片不是越多越好。分片会占用文件句柄、内存和集群管理资源。规划时应同时考虑索引预计数据量、节点数量、允许故障的节点数以及读写比例,避免形成容量过大的单分片或数量过多的小分片。

分片数量影响长期数据布局,副本数量更偏向可用性和读取能力。两者解决的问题不同,不能互相替代。

本课总结

  • 节点组成集群,索引通过分片分布在不同节点上
  • 主分片负责数据拆分,副本分片负责冗余并可分担查询
  • 分片规划需要平衡容量、并发、资源开销和容错目标

下一课预告

下一课将继续学习 Elasticsearch 的文档与索引结构,理解字段映射如何影响写入、检索和聚合结果。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

节点、集群与分片

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通