零散文件夹压缩-复制-解压回避直接复制更快嘛

jtyytzl 2026-07-29 01:23 1

事情是这样的,让 Codex 做的一个数据库以及分析报告,文件非常零散,有 4 万多个子项目,30 个 G,我用 USB 3.2 的 U 盘拷贝,结果可能是因为数据库里面文件过于零散,写入速度越来越慢。一开始全程剩余 28 分钟,后来等了半个小时变成了全程剩余 29 分钟,又等了半个小时变成全程剩余 31 分钟,最后花了两个多小时,快 3 个小时才写完了 29 个 G 的数据,结果由于我这个 U 盘是 32 个 G 的,3 2 kb 的分区会导致多出快 1 G 的占用,还差 1 个 G 不到写不进去。无奈只能重新打压缩,复制,结果发现压缩加复制加一起的速度都比原来快得多,而且由于数据库的文件格式原因,压缩完也就 11 个 G。

最新回复 (8)
  • yunmeng-666 07-29 01:27
    1

    小文件移动就会速度上不去,直接压缩到一起成一个大文件传输速度应该是很快的

  • jtyytzl 楼主 07-29 01:28
    2

    @yunmeng-666 #1 真的,我移动硬盘 4000 读写的放上来拷贝这种都慢的一塌糊涂,直接掉到 2.0 的速率。

  • Theater5165 07-29 01:32
    3

    这属于计算机通识

  • jtyytzl 楼主 07-29 01:33
    4

    @Theater5165 #3 也不算吧,前几年 CPU 没现在这么强的时候压缩和解压是高耗时耗性能操作,也就这两年可以这么玩

  • yunmeng-666 07-29 01:35
    5

    @jtyytzl #2 我的u盘也是,所以还是先压缩好更快,还能省一点空间

  • Venompool 07-29 02:27
    6

    robocopy

  • yyyyyrz 07-29 04:35
    7

    下一次可以玩一下压缩算法,lz4 还是 gzip 还是 xz 谁更适合你的工作流。

  • 大鸡吧 07-29 10:31
    8

    因为U盘4k能力差发热大而且传输文件多也会影响速度

    打包压缩建议用zstd -1,压缩巨快的前提下还有不错的压缩率

* 帖子来源NodeSeek
返回