有大量的数据需要储存,>50T.
不是频繁读取 /写入的场景,所以初步考虑用 3.5 寸机械硬盘。
关于这点有个疑问,同容量的移动硬盘比机械硬盘的价格还便宜,是不是可以用移动硬盘替代?原因是?
单盘应该选择多大的容量?希望能在稳定和预算间取得平衡。
应该选择哪个品牌的什么产品?目前考虑西数、希捷和东芝。这样的储存容量没有操作过,网上搜索得到的结果可能也不适用于这个量级,所以想在这里请教一下专业人士的意见。
不考虑 RAID, 没人手维护,所以只做简单的储存规划。硬盘放在收纳箱中保存,需要的时候拿出来文件拷走使用。
以上是目前考虑到的几点,如果有遗漏的需要注意的地方还望指教。提前谢过专家的建议。
1
imn1 2018-04-15 22:53:45 +08:00 2
预算呢?
数据的重要性? 钱多,HGST 企业级监控 钱少,TOSHIBA 3T 盘 另外建议先统计你如何分类数据及其数据量,硬盘太多的话,数据分散,查找和读取也不方便,每天拔插不是好想法 |
2
ScotGu 2018-04-15 22:57:08 +08:00 3
>不考虑 RAID。
壮士!你是真的不怕出现意外么? 如果没有 RADI 的话,建议好好规划下数据的分布备份。 比如有 1、2、3、4、5 份数据 A 盘存 1、2 ; B 盘存 2、3 ; C 盘存 3、4 ; D 盘存 4、5 ; E 盘寸 5、1。 保证每份数据有至少两个硬盘。这样任意一个硬盘损毁,数据还可以找回。 读取数据的时候,硬盘的供电、震动也需要注意。很多硬盘都因为供电不稳导致损毁。 硬盘保存的环境也要考虑,温、湿度、震动、防尘、防火…… 我觉得你的>50T 数据 ,需要专业一点的整体方案,而不是选个硬盘这么简单的事儿。 |
3
CCNemo 2018-04-15 23:40:30 +08:00 via Android 1
没写预算? 上个阵列柜?
|
4
vvtoo OP @imn1
- 在正常范围内。我知道这样说听着不靠谱,因为实际情况是之前没做过这样的工作,现在单算这些硬盘,一万左右还是可以接受的。 - 设置储存可能更多是出于调用方便的考虑。正常流程的话会从国外调取文件,再邮寄硬盘到国内,等拿到大约需要 1-2 周的时间(如果一切顺利)。希望这样能说明对数据重要性的要求。 - 单个文件在 50G 左右,一组约 5-20 个文件。所以数据查找和调取可能可以用比较简单的方法解决(硬盘外贴便签?)。等第一次完成全部文件的储存后,会尽量减少直接从这批硬盘复制原文件,避免插拔。 请问这样的操作可以吗?基于您给的一些方向,可能东芝比较符合现在的预期,请问 JD 上 N 系列、X 系列和没有系列名的三款有先后推荐顺序吗?谢谢。 @ScotGu - 不考虑最重要的原因是估计这个级别的 RAID 预算将完全没有操作性,我司不是 IT 相关行业所以个人判断这个方向得不偿失。也许置办 RAID 的费用可以多备一份同样的硬盘还有盈余。同时,也不会设置专门人员进行维护。以前工作中接触过 8T 的 RAID, 在有技术人员帮助的情况下也觉得使用起来是件劳心劳力的事。 - 数据的使用情况可以见回复 imn1 中的内容,不排除在了解了各位前辈的建议后劝说老板放弃这个操作的可能。 谢谢建议。 |
5
lfk0000 2018-04-15 23:50:53 +08:00 2
不知道你要存放的是什么,也许需要一个软件叫 Where is it,可以离线索引(在线时更新数据库),可以很方便是搜索哪个文件在哪里
如果能买到便宜的移动硬盘,那就用移动硬盘呗,好处是不用拆开机箱,或者单独买转接底座了 美亚的希捷 8T 移动硬盘 1000 出头我觉得非常合适,我自己买了俩 8T 一 5T,拆了盒子放电脑里用的 不做备份就要做好丢数据的准备 当然没说预算的话。。。上阵列柜。。。或者 100T 的 ssd 了解一下? |
6
cy97cool 2018-04-16 00:28:23 +08:00 via Android 1
|
7
wwhc 2018-04-16 00:30:26 +08:00 1
首先排除希捷,其次没人手维护不选 RAID 是可以理解的,RAID 一旦出现故障或有硬盘出错,恢复起来不比开盘省事,如果数据重要,不要考虑移动硬盘,邮寄用 HDD 硬盘的风险有点大,用 SSD 对数据安全比较有保障,虽然成本有点高
|
8
Linxing 2018-04-16 02:19:11 +08:00 via iPhone
考虑上 raid 吧 搞两个阵列柜应该就够了
|
9
20015jjw 2018-04-16 02:44:13 +08:00 via Android
不上 raid 怕是不知道怎么死的..
|
10
Remember 2018-04-16 02:51:33 +08:00
50t 不上 raid, 心也太大了吧
|
11
Remember 2018-04-16 02:55:13 +08:00
如果图省钱, 至少也得上个 8 盘位的机器跑 zfs(freenas 就好), 8*10T, 2 块盘做冗余,可以提供 60T 容量.
|
12
msg7086 2018-04-16 04:16:16 +08:00 2
> 同容量的移动硬盘比机械硬盘的价格还便宜,是不是可以用移动硬盘替代?
可以。同容量的移动硬盘比机械硬盘保修短,保修的差别就是价格的差别,你可以自己决定。移动硬盘里塞的就是普通的机械硬盘。 > 单盘应该选择多大的容量? 3T 和 4T 技术成熟,比较适合大规模部署。单 TB 价格也可以接受。 > 应该选择哪个品牌的什么产品? 三大品牌都可以。要减少维护成本请选择正规渠道正品企业级。WD Re4,ST ES.3 之类的。日立不清楚。 > 不考虑 RAID RAID 只是个技术,有很多种实现方法,但是不论哪种方法都会涉及到人工成本,是不可能省略的。 要做离线单盘结构可以考虑 SnapRAID,放一台 12 盘热插拔的低配服务器,每次插 12 块硬盘上去,拷 9 盘的数据,剩下 3 盘让 SnapRAID 做冗余盘,可以在价格上找到平衡点。而且可以实现你说的,平时放在收纳箱中,要用的时候再拿出来拷,而且只需要拿有数据的盘出来,不需要一次插 12 块。 其实要维护简单的话,我倒是觉得最简单的还是 RAID。坏盘了,亮灯了,找人把坏硬盘拔出来,新硬盘换进去,就结束了。比你自己去折腾其他方案简单太多了。我不知道你以前遇到过的 RAID 维护有多么复杂,能不能说说看? 另外,为了让硬盘寿命错开,最好购买不同批次甚至不同品牌的硬盘混搭,减小同一时间损坏太多硬盘的风险。 还有,记得给你的 RAID 做备份。 总结一下:我觉得你提的要求是非常「反」正常操作的。你也可以看一下我司 NAS 的设计 /t/280177。 |
13
paranoiagu 2018-04-16 08:18:40 +08:00 via Android
都 50T 了,上 NAS 是必须的,数据丢不起的话,NAS 上还必须考虑冗余。zfs 可以考虑。
|
14
FindBoyFriend 2018-04-16 09:05:41 +08:00 via iPad
raid+refs ? refs 有人应用到项目中过没?
|
15
msg7086 2018-04-16 09:15:05 +08:00
@FindBoyFriend 不建议生产用。
|
16
mhycy 2018-04-16 09:21:43 +08:00
硬盘采购价格:56*509=28504
1W 是不用想了,加个阵列卡大概多 2K 左右(包括扩展板) 方案 DELL H730p + HP 468406-b21 SAS 扩展卡 考虑考虑 |
17
shakoon 2018-04-16 09:26:25 +08:00 1
50t 最经济和安全的方案是 raid5 nas。目前 4t 盘性价比最高,建议买 16 个盘,15 个做 raid5,真实可用空间是 51t ( 1024 进制),可容任意 1 个盘损坏,还剩的 1 个盘热备救援用;或者 17 个盘 16 个做 raid6,可容任意两个盘损坏,还剩的 2 个盘热备救援用。建议多买几个品牌的,避免某批次问题导致全部数据丢失。自建 nas 服务器的话硬盘费用大约 13000,服务器大约 5000,如果卖成品 nas 服务器那价格会翻 3 倍左右。raid 必须要上,必须要上,必须要上,建 raid 非常简单的,但是这个真的非常重要非常重要非常重要
|
18
nianbo2001 2018-04-16 09:57:31 +08:00 1
成本考虑:确实机械硬盘比较划算,比较你们只是数据量大,读写不频繁,而且保存方式也只是收纳箱吃灰,机械硬盘确实够了。虽然我家是做固态硬盘的,但是成本不适合你们,所以不乱推荐 SSD。
品牌:国产消费类的完全不推荐,国产一般的工业级也是渣渣,国内黑盘看的太多了,之前跑市场看得心塞。推荐希捷,一定要正规渠道买,有认识的经销商最好,JD 其实有一批黑盘在里面流通,怎么进去的以及盘有多黑我不方便说,你自己往坏里想就好。 单盘 4T~8T 都不错,起码在浪潮里的口碑不错。 最后我们是做 SSD 的,所以也不存在为希捷打广告一说。。。 |
19
mhycy 2018-04-16 09:59:00 +08:00
@shakoon 错了 50T 盘数不少,要安全的话 R6 可以说是最低可选项了(事实上即便是最小阵列的 R5 都是尽可能避免的)
|
20
imn1 2018-04-16 10:11:24 +08:00 3
首先,数据能否再次从国外调取,如果可以,不论邮寄也好,网传也好,都相当于有备份了,可以只考虑短期、中期的保管,以及快速读取优先,长期保存反而不是最重要的
如果不能再次调取,还是建议花点钱上 raid,至少 raid6 (可两盘同时损坏那种) 我个人经验( 20 年来买过约 80 只硬盘),硬盘质量(仅机械硬盘,不包括 SSD 和混合硬盘)感受如下 我没怎么买过企业级硬盘,不评价 日立 /HGST/TOSHIBA 2 寸 > 三星 /希捷 2 寸 > HGST 3 寸 > TOSHIBA 3 寸 > 希捷 3 寸 国外近期的一些统计也是 HGST 6/8T 损坏最少,TOSHIBA 4T 其次,但那个可能是经常刷写的,有点不同 我不相信西数,2012 前买过 7 ~ 8 只西数( 3 寸),全灭,其中半数损失数据 要解释一下「全灭」的意思: 我一般一定时候会倒腾数据,例如小容量转到大容量,旧硬盘转到新硬盘之类 倒腾之后,原来的盘就弃用或者不再用作保存,只用于下载或临时存放 西数大约 4 只在倒腾前就坏掉,其他在弃用前坏掉 希捷在弃用前坏掉,有三四只(含一只 2 寸) 东芝在弃用前坏掉,仅有一只 日立 /HGST 在弃用前无坏掉 2 寸目前弃用累计 8 只( 500G 以下),在弃用前仅一只坏掉,就是上面说的希捷,其他约 10 只还在服役 另外,上面说的有西数、希捷、三星各一只,是在两个 orico 外置设备下损坏,时间接近(几个月内),所以我之后也不再购买这个牌子的外置盒了,是否只是个例不清楚 倒腾数据的时间段没有固定,一般是时代发展新的大容量硬盘便宜下来,约使用 4 ~ 5 年吧 弃用也是嫌弃容量太小为主,约使用 7~8 年 以上是 非 监控 /企业级硬盘的 「个人主观感受」,仅供参考 我目前使用的机械硬盘,2 寸最小 500G,3 寸最小 2T,低于这个容量,我觉得挂上也费电 20 年中最奇葩的一次,唯一一次,电脑城买了个三星 3 寸,回家就不认,和店家很熟,马上给换了希捷,还退了差价,那是还没 JD 的时代,不要和现在的电脑城相比 以上「经验」基于一个前提,手头数据大部分不重要,而且随着年纪增大,越来越觉得丢了也不可惜 其中约 5T 我比较珍视的,是用了 2 寸盘做双备份 另外我也没有经常全部读取的需求,所以没必要全部硬盘都在线挂着,费钱费电还热,只用一个 4 位不带 raid 的硬盘箱 不熟悉以及没有专人看管的话,不建议软 raid,我有两个网管的朋友(用*nix 服有 10 年经验)都被这东西折腾惨 还有一种方案——磁带。磁带不贵,只是磁带机很贵,超贵,磁带的保存期是超长的,有足够预算也可以去了解一下 例如看看有没有租用机器的可能(有钱买当然最好),这样以磁带做备份,硬盘做平时读取 |
21
nianbo2001 2018-04-16 11:02:07 +08:00
@imn1 这哥们就很实在了~西数之前没接触过,看到全灭我也不想接触了。
|
22
sundayhk 2018-04-16 11:43:00 +08:00 via Android 1
要么 hgst 4t 企业盘,要么东芝 4t 普通盘。
|