rrfeng
V2EX  ›  问与答

每年递增 2000w 每个 10k 左右大小的文件,需要可靠的存储,访问日志,方便备份,有哪些选择?

  •  
  •   rrfeng · Sep 28, 2013 · 3161 views
    This topic created in 4784 days ago, the information mentioned may be changed or developed.
    目前是放在数据库中,可靠性、备份、操作记录都很好,但是已经不堪重负

    有什么好的建议呢?请大家畅所欲言,待我慢慢研究……


    访问速度要求不是很高。
    5 replies  •  1970-01-01 08:00:00 +08:00
    aoyoo
    aoyoo
    Sep 28, 2013
    1
    存储大量的小文件,我第一反应就是淘宝的tfs。
    yangzh
    yangzh
    Sep 28, 2013
    2
    redis?
    vibbow
    vibbow
    Sep 28, 2013
    3
    vhd ?
    gfreezy
    gfreezy
    Sep 28, 2013
    4
    豆瓣的 beansdb
    Lax
    Lax
    Sep 28, 2013
    5
    每年200G?这数量不算大,考虑的主要参数是访问量,对应的系统参数则是iops可能成为瓶颈。

    单机应该可以考虑。RAID,SSD都可以上,另加一台备份,或者用DRBD做同步。
    分布式文件系统的话,MooseFS也能扛住了。或者MogileFS。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1362 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 22:21 · PVG 06:21 · LAX 14:21 · JFK 17:21
    ♥ Do have faith in what you're doing.