分布式存储到底是个啥？我用5年踩坑经验给你讲透

分布式存储到底是个啥？我用5年踩坑经验给你讲透

做这行快5年了，从最早给客户搭单机存储，到后来处理PB级数据，我踩过的坑比吃过的饭还多。上周还有个小老弟问我：“分布式存储和普通硬盘有啥区别？” 这个问题看似简单，但真要说清楚，得从根上聊。

这篇文章写给两类人：一是刚入行想搞懂分布式存储的技术同学，二是被供应商忽悠到头晕的甲方爸爸。别怕，我不讲那些云里雾里的理论，只讲我亲手摸过的、修过的、骂过的分布式存储。

分布式存储不是“把硬盘联网”那么简单

很多人以为分布式存储就是几台机器连在一起，共享硬盘空间。这种理解就像说“汽车就是四个轮子加个沙发”，对，但不全对。

我之前碰到一个客户，他们公司买了几台服务器，装了开源软件，把硬盘凑在一起，就号称是分布式存储了。结果上线第三天，某个节点硬盘坏了，整个集群卡得像幻灯片。分布式存储的核心，不是“分散”，而是“协作”。每台节点不仅要存数据，还要参与元数据管理、数据修复、负载均衡这些活。

拿我们常用的Ceph举例，它的核心组件包括MON（监控）、OSD（存储）、MGR（管理）。这三者缺一个，系统就跑不顺畅。我记得有一次做项目，为了省资源，只部署了1个MON节点。结果这个节点挂了，整个集群直接瘫痪。教训就是：分布式存储的“分布式”是冗余保护，不是单点凑合。

为什么分布式存储能扛住硬盘坏？关键在副本和纠删码

这是分布式存储最让我佩服的地方。普通RAID阵列，坏了2块盘可能就数据全丢。但分布式存储，靠的是多副本和