[求教] 复制大量小文件使用什么硬件和方式最好?

Fantasy-avatar

Fantasy

2021-06-25T08:36:04+00:00

日常使用需要,需要复制移动通常2000-5000数量的图片、音效、文档等……
众所周知普通U盘在复制粘贴大量小文件的时候速度感人,上网搜索得知似乎是U盘内置芯片的主控设计在写入大量小文件时的性能弱小……
后来尝试使用压缩软件打包成单文件后再复制,速度依然不理想,还额外多出了压缩和解压缩的时间损耗
有什么能节省时间的方法或软件吗[s:ac:呆]

现在同事那里有两个移动硬盘:
一个是从旧笔记本上拆下来的msata接口的SSD盘片32G,用转USB3.0的芯片盒
一个是普通的移动硬盘,日立500G 5400转机械硬盘,3.0接口

他表示平时用得少可以给我一个,所以我应该拿哪个好?[s:ac:哭笑]
Qrilla12-avatar

Qrilla12

处理小文件慢不单是存储介质,在文件系统层面也是很慢的。毕竟是在树形结构增加节点
打包时可以选择store模式,应该不会很慢的
JDubAKAdrofloW-avatar

JDubAKAdrofloW

NVME硬盘盒里放NVME固态,小文件复制目前发现的最佳方式 U盘在固态面前弱爆了
Deragoooon-avatar

Deragoooon

最快依然是打包成一个文件,但是不能压缩文件,只打包
1hunnit-avatar

1hunnit

软件用 rsync
420-avatar

420

rar存储模式,压缩的时候目标直接是移动盘,解压的时候也是直接解压到目标路径。
GoobeyGoobs-avatar

GoobeyGoobs

小文件复制粘贴比较依赖单核性能 大多数情况下很难体现出机械和固态的区别
Devil Demoko-avatar

Devil Demoko

傲腾硬盘不知道能做成移动的不能
Toxxxic-avatar

Toxxxic

Reply to [pid=528540333,27411186,1]Reply[/pid] Post by [uid=76819]sky1219[/uid] (2021-06-30 17:44)傲腾视作普通的NVMe SSD,用NVMe转USB的硬盘盒就可以当做U盘用了。
丸道初水-avatar

丸道初水

7z打个包,仅“存储”,不压缩
Fantasy-avatar

Fantasy

Reply to [pid=528532324,27411186,1]Reply[/pid] Post by [uid=2236636]黑人类[/uid] (2021-06-30 17:15)

这个方法好~
Henry-_--avatar

Henry-_-

打包,选择压缩比例的时候选择不压缩
Fantasy-avatar

Fantasy

Reply to [pid=528542720,27411186,1]Reply[/pid] Post by [uid=41922767]Brouzy[/uid] (2021-06-30 17:53)

受usb接口性能限制吧,3.1接口还是少,主流主板还是3.0蓝口,估计发挥不出来
Toxxxic-avatar

Toxxxic

Reply to [pid=528546939,27411186,1]Reply[/pid] Post by [uid=63315889]凌公辙[/uid] (2021-06-30 18:08)傲腾追求的是4k随机性能,特别是4k q1t1下的性能,即使比一般的SSD高十倍也碰不到接口极限。
所以总的来说不影响发挥。
Ilndragxx-avatar

Ilndragxx

如果是局域网建议用dukto
ladybot-avatar

ladybot

想起之前一个段子 几t的数据怎么传最快?顺丰次日达[s:ac:哭笑]
Qrilla12-avatar

Qrilla12

Reply to [pid=528551296,27411186,1]Reply[/pid] Post by [uid=41469254]我爱数学数学爱我[/uid] (2021-06-30 18:25)
这并不是段子。
[quote]永远不要低估一辆满载着磁带在高速公路上飞驰的旅行车的带宽。[/quote] [url=https://book.douban.com/subject/10510747/]《计算机网络》 第五版[/url]
不过和lz这情况没什么联系。
ladybot-avatar

ladybot

[quote][pid=528551929,27411186,1]Reply[/pid] Post by [uid=60153298]会飞的狗子[/uid] (2021-06-30 18:28):

这并不是段子。
[url=https://book.douban.com/subject/10510747/]《计算机网络》 第五版[/url]
不过和lz这情况没什么联系。[/quote]嗯 只是突然有感而发
Fantasy-avatar

Fantasy

[quote][pid=528550600,27411186,1]Reply[/pid] Post by [uid=41922767]Brouzy[/uid] (2021-06-30 18:22):

傲腾追求的是4k随机性能,特别是4k q1t1下的性能,即使比一般的SSD高十倍也碰不到接口极限。
所以总的来说不影响发挥。[/quote][s:ac:哦]这么说来这个牌子的盘用作系统盘也是极好的