前两天下载数据集,RAW DATA 直接 500 个 G
打算入手一块机械硬盘用 usb 连接在笔记本上,用来保存数据集
每秒需要读入大约 60 张图片,每张图片大约 600k 左右.或者是读取视频播放的类似场景
顺便如果能存放一些游戏那就更好了
有没有具体的牌子或者型号推荐呢?
1
JensenQian 2022-09-27 14:17:27 +08:00
现在 2.5 寸的都是叠瓦盘
随便买就行了 |
2
YUX 2022-09-27 14:19:49 +08:00
西数蓝盘京东 719
|
4
bearqq 2022-09-27 14:21:06 +08:00
笔记本做炼丹玩玩就好,2.5 寸没有好盘。
不如先拿一部分数据集炼丹先试试,再往下考虑。另外建议上台式。 |
5
misakawaque OP @bearqq 就算只是玩玩也需要能用的过去的盘啊.......
|
6
misakawaque OP @YUX 2.5 寸
蓝盘需要独立供电不太想买 |
7
misakawaque OP @JensenQian 叠瓦盘听说不太好,能否覆盖那些使用场景呢?
|
8
JensenQian 2022-09-27 14:34:32 +08:00
@misakawaque #7 除了叠瓦你别无选择,笔记本上垂直的盘价格都快赶上固态了啊
|
9
dethan 2022-09-27 14:38:18 +08:00 via Android
啥是炼丹
|
10
qzwmjv 2022-09-27 14:53:14 +08:00
有,西数 15mm 有很多
|
11
Lxcm 2022-09-27 14:55:54 +08:00
炼丹不是用电磁炉的吗? dog
|
13
dann73580 2022-09-27 15:12:11 +08:00
提醒一句,如果决定外接的话,这个价位是可以考虑 3.5 的盘的,有外接供电 3.5 寸的 USB 硬盘坞。3.5 的选择余地会多很多,性能也好一些。
|
14
lookStupiToForce 2022-09-27 15:29:31 +08:00
楼上+1 ,都外接了,为什么要选择 2.5 的妖魔鬼怪
|
15
stimw 2022-09-27 16:33:51 +08:00
买 2.5 寸然后加硬盘盒
|
17
misakawaque OP @stimw 3.5 寸的硬盘盒中比较便携的大概长成什么样?
看楼上都在推 3.5 寸? |
18
ryd994 2022-09-27 18:04:25 +08:00 via Android
便携是必须吗?
3.5 很难便携,因为你还要带个 12v 电源 如果不要求便携的话还有 USB 的 RAID 硬盘舱,要什么都能有 3.5 的 my book ,这个确定不是叠瓦盘。希捷的 3.5 外置盘大部分是叠瓦盘。 my book 拆壳一向是组 nas 的硬盘来源首选。 |
19
kokutou 2022-09-27 18:09:06 +08:00 via Android
1000 多块钱,镁光 mx500 ,2t 的
|
20
Aragak1Yui 2022-09-27 18:27:00 +08:00
炼丹得上 ssd ,不然数据加载小文件读写要慢死了。
|
21
misakawaque OP |
22
xinxin8816 2022-09-27 19:49:06 +08:00
"每秒需要读入大约 60 张图片",恕我直言,机械盘很难胜任
|
23
besscroft 2022-09-27 19:54:10 +08:00
263 在淘宝买了个 1T 的 HGST 2.5 寸 7500 转的 PMR ,包装看是全新,硬盘也是全绿,是不是原厂翻新盘不确定,但是一年了没翻车。我看了下这家最大有卖到 5T 的 2.5 寸的 PMR 。
|
24
lithiumii 2022-09-27 19:57:02 +08:00 via Android
4T 以上的 2.5 寸机械盘厚度都是 15 mm 吧,一般硬盘盒装不了吧
|
25
autoxbc 2022-09-27 20:07:36 +08:00
USB 盘就是应该有外部供电的,没有也应该买分叉线补上供电
|
26
Cooky 2022-09-27 20:35:08 +08:00
不要买东芝的,现在东芝的盘震的厉害
|
27
misakawaque OP @dann73580 那么 3.5 寸的盘有推荐的么?
有些人和我推西数蓝盘,有些人说千万别买西数蓝盘...... |
28
misakawaque OP @bearqq 那么 3.5 有推荐么
|
29
c0xt30a 2022-09-28 01:20:49 +08:00
内存有 32 GB 么?够大的话把部分数据集加载到内存中。不建议重复读取硬盘上的文件。我都是裁剪个小数据集在笔记本上测试下 pipeline 有没有 bug ,真正训练都是到服务器上去做。而且,这个行业这么卷,在服务器上训练时间在一天之下的模型基本上不可能发出文章来,在笔记本上这么搞实在太难了。
|
30
bearqq 2022-09-28 08:17:57 +08:00
@misakawaque
3.5 寸 4T 机械用 WD 紫盘,pdd 价格便宜,海康威视的 oem 盘。如果不想水深可以京东买,或者淘宝南京梵多。 40xx 是老版本,42xx 是新版本,4xEJRX 是官方,4xPURX 是 OEM 。你的需求无所谓,新版本稍好。都是垂直,不是叠瓦。 楼上推荐 SSD 也有道理,机械读 60 张每秒不一定速度能到。 不知道楼主底子如何,我还是建议先划个比如 10g 数据跑跑看看。后面看需求,考虑买台式,或者云训练。现在矿难压力没那么大,我的钱包…… |
31
DAMNCRAB 2022-09-28 09:36:12 +08:00
6T sas 盘咸鱼只要 200 可以多买几块组 raid
更建议买块 CD6 3.84T 版本 只需 1400 左右 |
32
yjmp14 2022-09-28 21:57:26 +08:00
实际上叠瓦盘只有快装满的时候比较影响性能,4TB 的叠瓦盘装 3TB 的文件性能完全没问题,只有最后几百 GB 速度会非常慢。
|
33
misakawaque OP @dann73580 最后决定买了 3.5 寸
请问有硬盘盒推荐么? |
34
nihiue 2022-09-29 17:50:25 +08:00
炼丹还是上 SSD 吧,更别说 2.5 的辣鸡叠瓦盘
|
35
dann73580 2022-09-29 19:51:23 +08:00 via iPhone
@misakawaque 看看绿联啥的。
|