每年递增 2000w 每个 10k 左右大小的文件，需要可靠的存储，访问日志，方便备份，有哪些选择？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 4509 天前的主题，其中的信息可能已经有所发展或是发生改变。

目前是放在数据库中，可靠性、备份、操作记录都很好，但是已经不堪重负

有什么好的建议呢？请大家畅所欲言，待我慢慢研究……

访问速度要求不是很高。

5 条回复 • 1970-01-01 08:00:00 +08:00

aoyoo

2013 年 9 月 28 日

存储大量的小文件，我第一反应就是淘宝的tfs。

yangzh

2013 年 9 月 28 日

redis?

vibbow

2013 年 9 月 28 日

vhd ?

gfreezy

2013 年 9 月 28 日

豆瓣的 beansdb

Lax

2013 年 9 月 28 日

每年200G？这数量不算大，考虑的主要参数是访问量，对应的系统参数则是iops可能成为瓶颈。

单机应该可以考虑。RAID，SSD都可以上，另加一台备份，或者用DRBD做同步。
分布式文件系统的话，MooseFS也能扛住了。或者MogileFS。