开启分片集合的均衡¶
均衡是 sharded cluster 中MongoDB在不同分片之间平衡数据的过程.当一个 shard 存储的 数据块 数目明显多于其他分片时,MongoDB会自动进行数据均衡. 集群 中的数据迁移的过程对用户以及应用是完全透明的.
集群均衡器¶
The balancer process is responsible for redistributing the chunks of a sharded collection evenly among the shards for every sharded collection. By default, the balancer process is always enabled.
集群中任意一个 mongos 都可以开始一个均衡过程.当一个均衡过程处于活动状态时,开始这个过程的 mongos 会通过修改 Config Database 中的 lock 集合获得一个 “lock” .
注解
在 2.0 版更改: 在MongoDB 版本 2.0之前, mongos 之间计时偏差较大(比如,时钟偏移)或导致分布锁获取失败.这可能会导致数据丢失,在偏移超过五分钟的时候情况更为严重.为了将时钟偏差减小到最小,需要在服务器上运行 ntpd 以使用网络时间协议进行时间校准.
为了解决分片集合数据块不均衡的问题,均衡器会从数据块较多的分片 migrates chunks 到数据块较少的分片,均衡器一次迁移一个数据块,直到不同分片之间的数据块数目变得均衡.
由于占用带宽以及系统负载,数据块的迁移带来的开销会影响数据库的性能, balancer 尽可能减少带来的性能影响.
每次只迁移一个数据块,参见 数据块迁移排队 .
- Starting a balancing round only when the difference in the number of chunks between the shard with the greatest number of chunks for a sharded collection and the shard with the lowest number of chunks for that collection reaches the migration threshold.
你可以暂时停掉均衡器以进行运维,参见 禁用均衡器 以获取更多细节
你也可以限制均衡进行的时间窗口来防止在生产环境中造成性能问题,参见 Schedule the Balancing Window 以获取更多细节.
注解
指定的均衡时间窗口依赖于每个 mongos 的本地时间.
参见
文档 管理集群均衡过程.
迁移阈值¶
为了使均衡对集群性能的影响减小到最低,在不同分片之间的数据块数量差异达到阈值时, balancer 不会开始工作,阈值是指集群中 chunks 最多的分片与数据块最少的分片之间数据块数量的差,均衡器有以下阈值:
在 2.2 版更改: 以下的阈值在版本2.2首次出现,在此之前,只有在集群中不同分片之间数据块的数量差达到8个时,均衡才会开始.
数据块的数量 |
迁移阈值 |
少于20个 |
2 |
20到79 |
4 |
| 80 and greater | 8 |
一旦一个均衡过程开始,除非集群中,这个集合在不同分片的数据块数目差 少于2个 或者数据块迁移失败,均衡过程不会停止.