找回密码
 立即注册
搜索
查看: 3085|回复: 12

[软件] 说好的海量小文件跨盘对拷tar最快呢?

[复制链接]
头像被屏蔽
发表于 2023-12-22 22:15 | 显示全部楼层 |阅读模式
提示: 作者被禁止或删除 内容自动屏蔽
回复

使用道具 举报

头像被屏蔽
发表于 2023-12-22 22:20 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
回复

使用道具 举报

     
发表于 2023-12-22 22:21 | 显示全部楼层
是不是SSD写爆了?
回复

使用道具 举报

头像被屏蔽
 楼主| 发表于 2023-12-22 22:27 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
回复

使用道具 举报

头像被屏蔽
 楼主| 发表于 2023-12-22 22:27 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
回复

使用道具 举报

     
发表于 2023-12-22 22:48 | 显示全部楼层
这你自己测一下不就知道了嘛,4K读写hdd一般都几m把,ssd最次的也几十。速度差距十几倍怕是有的。
回复

使用道具 举报

     
发表于 2023-12-22 22:55 | 显示全部楼层
如果有说人用 tar 比 rsync 更快,那么他肯定拿出了跑分的环境和数据,才有说服力吧
如果跑分环境和实际应用环境差别太大,那么跑分的结论就没有意义
越说越感觉自己被钓鱼了
回复

使用道具 举报

     
发表于 2023-12-22 23:01 | 显示全部楼层

缓存用光了之后降速,顺序写性能有可能不如机械硬盘
回复

使用道具 举报

     
发表于 2023-12-22 23:41 | 显示全部楼层
有没有可能是到你hdd4k读取上限了
回复

使用道具 举报

     
发表于 2023-12-23 00:16 | 显示全部楼层
本帖最后由 Midnight.Coup 于 2023-12-23 00:18 编辑

Tar 要先打包再传,虽说打包挺快但也要时间,要比也得相同条件比吧
回复

使用道具 举报

     
发表于 2023-12-23 21:35 | 显示全部楼层
Midnight.Coup 发表于 2023-12-23 00:16
Tar 要先打包再传,虽说打包挺快但也要时间,要比也得相同条件比吧

一般不都是tar到一个管道(ssh)里对面同时解开么
回复

使用道具 举报

发表于 2023-12-23 21:50 | 显示全部楼层
hdd一般文件系统的海量小文件当然只有不去找metadata的方法能明显快过rsync啊,dd之类的
回复

使用道具 举报

     
发表于 2023-12-25 10:57 | 显示全部楼层
本帖最后由 Midnight.Coup 于 2023-12-25 11:10 编辑
phorcys02 发表于 2023-12-23 21:35
一般不都是tar到一个管道(ssh)里对面同时解开么

他这个不是本地2个盘对拷吗,难道中间还有网线那还得考虑网速,本地的话释放还得算上释放的 IO 和 CPU 占用
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|上海互联网违法和不良信息举报中心|网上有害信息举报专区|962110 反电信诈骗|举报电话 021-62035905|Stage1st ( 沪ICP备13020230号-1|沪公网安备 31010702007642号 )

GMT+8, 2024-6-4 07:16 , Processed in 0.067665 second(s), 6 queries , Gzip On, Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表