 |
1
cdwyd Nov 20, 2016 via Android  1
每个回答放在一行，或者入库
|
 |
2
billlee Nov 20, 2016 1
你听说过数据库吗？
|
 |
4
thekoc OP 看了一下 sqlite ，准备用它了。
|
|
5
billlee Nov 20, 2016 2
@thekoc 是啊， ext 文件系统的设计不适合存放大量小文件， btrfs 也许可以。
但一个文件还会有用户权限修改时间什么的很多元数据，开销很大。打开文件的时候还要占用文件描述符。 你用个简单的 SQLite 数据库也比直接创建文件好。 |
 |
6
em70 Nov 20, 2016 via iPhone 1
本来就是玩，你就尽量折腾呗，各种方法都试试，多好的提高机会啊
|
 |
7
bazingaterry Nov 20, 2016 1
@thekoc 都用数据库了，干脆就 MySQL 吧。
|
 |
8
onlyice Nov 20, 2016 via Android 1
感觉楼上说的解决办法都对，但是没有解答这个基本问题：为什么放文件会比放数据库更占用磁盘空间？
楼主可以试着解答下 |
 |
10
smallghost Nov 20, 2016 1
@bazingaterry 我觉得用 Postgres 数据库好!
|
 |
11
doubleflower Nov 20, 2016 1
linode 可以自已格式化一个盘挂上的，格式成 ReiserFS 就可以了，那个不限 inode 数。
|
 |
12
Zzzzzzzzz Nov 20, 2016 1
leveldb 啊
|
 |
13
TKKONE PRO 1
我还说爬虫怎么会自己产生小文件呢。。。
|
 |
14
yaozeyuan93 Nov 20, 2016 1
@onlyice 因为文件有最低大小←_←
好像 4kb 吧我记得 |
 |
15
cadl Nov 20, 2016 1
感觉可以使用个 bitcask 引擎的存储系统试试。
|
 |
16
crayonyi Nov 21, 2016
以前我们的图片服务器也遇到一样的问题， inode 耗净，磁盘空间却还很多。
解决方法当然是用数据库或者使用分布式文件存储方案： 1 ） MogileFS 、 FastDFS 等分布式文件存储系统 2 ） OSS 、七牛、又拍云等云存储方案（每月每 G 才几毛钱） |
 |
17
yanzixuan Nov 22, 2016
一般入 mongodb ，如果觉得喜欢文件的话，也可以使用 mongo 的文件存储。
|
Select Language