分布式存储

分布式存储是一种采用分布式架构的存储海量数据的存储系统。

 

传统存储系统

磁盘存储系统

这些都是些硬件存储介质，包括硬盘，软盘，磁带。硬盘是我们重要的存储介质，我们的计算机（包括我们的电脑）中的各种数据，文件都是存在硬盘中的。后面我们会单独讲讲硬盘。话说现在的硬盘，除了传统的机械硬盘，还有种固态硬盘开始用的比较多了。

 

文件系统

文件系统是操作系统中一个很重要的子系统。

 

数据库

 

其他存储系统

如redis，mongodb，elasticsearch，casscadra等。

 

其他分布式存储

HDFS，fastdfs，TFS等。

 

 

 

数据存储结构

文件

 

对象

 

key-value结构

 

块

 

文件读写存储是以块为基本单位的。块是文件系统的一个逻辑概念，块大小一般为4k，当然也有1k，2k，8k的，在格式化磁盘的时候可以指定。

 

假设一个文件大小为3k，如果一个块大小为1k，那要存下3k的这个文件，得用3个块才能存下，实际为了存储这个文件，不止文件自身的3k大小，需要比3k大一点的存储空间去存。假如是一个100byte或2148byte（约2.1k），那么924byte的存储空间给浪费了。如果是一百亿张这样的文件，大约要浪费8605G的存储空间！

 

文件存储的一些场景：

海量小文件存储（小于一个block大小，这里的block指的是文件系统中的数据块）

大文件超大文件存储

不会对文件进行更新操作（如追加，插入，删除）

存在对文件的更新操作

读文件操作频繁

写文件操作频繁

 

顺序读&随机读

 

Linux文件系统

参考另一篇文章：https://lobin.iteye.com/blog/609813