云存储硬核技术内幕——小结(上)

在前段时间，我们介绍了云存储的基本知识和Ceph的实现，在这里做一个小结：

在云计算时代，由于需要访问存储的计算节点迅速增加，传统的FC网络扩展性能有限，同时，集中式存储控制器也难以应对无限扩展的计算节点的IO请求，因此，需要构建分布式的存储系统，利用分布式的存储节点扛住海量的并发存储请求，各个节点与客户端之间通过以太网/TCP-IP互联互通，以实现近乎无穷大的可扩展性。

最常见的分布式存储系统是Ceph。Ceph可以提供块存储、文件存储和对象存储三种服务方式。

传统的块存储，客户端(initiator)与服务器端(target)通过TCP协议通讯。由于TCP是点对点的，即使后端的存储节点为分布式的，target(又称为iscsi网关)本身也会成为性能扩展的瓶颈。Ceph的解决之道是在每台宿主机上安装客户端(如QEMU的RBD Driver)，直接将来自各个客户端(VM)的IO请求分发到目标存储节点的目标磁盘。

为了使得IO请求尽可能地均衡发送到集群中的各个磁盘，Ceph将每个块切分为2MB或1MB大小的object，每个object切分为4KB/8KB/16KB的PG。

对于最常见的三副本存储，每个PG对应到3个物理磁盘，主副本所在的节点会将数据向另外两个副本复制。当一个副本所在的磁盘损坏，另外两个副本会发针对起复制。

为了提升分布式存储的性能，Ceph支持利用高速SSD/NVMe存储作为缓存，提升IO性能，降低时延。这种缓存背后的原理，叫时间局部性和空间局部性。

前期链接在这里：

云存储硬核技术内幕——开篇

云存储硬核技术内幕——(1) 马克思主义存储社会发展极简史 (上)

云存储硬核技术内幕——(2) 马克思主义存储社会发展极简史 (中)

云存储硬核技术内幕——(3) 马克思主义存储社会发展极简史 (下)

云存储硬核技术内幕——(4) 记忆的行囊

云存储硬核技术内幕——(5) 七月上，不负勇往

云存储硬核技术内幕——(6) 面壁十年 邃密群科

云存储硬核技术内幕——(7) 正趣果上果

云存储硬核技术内幕——(8) 只缘身在此山中

云存储硬核技术内幕——(9) 相见时难别亦难

云存储硬核技术内幕——(10) 大叔的迷惑行为

云存储硬核技术内幕——(11) 女子会所的秘密

在本期的结尾，为大家留下几个开放式的问题：

1、对于大量的小文件的存储，使用什么样的方案合适？

2、对于监控视频这样的不常访问的大文件归档存储，使用什么样的方案合适？

3、保存程序代码或共同协作的文档，使用什么样的方案合适？