请教下，百万级小文件搬家怎么才能快速完成？

我是小小鸟 · 发表于 2024-12-9 21:56:35

做了个图片站，现在有100多万的小文件，打包的话压缩包就要80个小时。还有可能中间出错，想问下，有什么办法可以快速搬家？

HOH · 发表于 2024-12-9 21:57:20

问就是寄硬盘

kucn · 发表于 2024-12-9 22:53:08

screen -S web
tar czf - /目录 | ssh root@新IP tar xzf - -C /目录

只要你宽带够可以跑满，只要不关机不会停，搬完为止。

zutianrun · 发表于 2024-12-9 22:00:03

预定一个VIP

RAR 分卷仅存储 3%恢复记录

小白来了 · 发表于 2024-12-9 22:01:32

哇靠！大姐姐的嘛？告诉你方法方便分享一份嘛？我朋友喜欢看大姐姐

husky2020 · 发表于 2024-12-9 22:04:58

本帖最后由 husky2020 于 2024-12-9 22:06 编辑

rsync慢慢同步
https://www.nodeseek.com/post-187664-1

小白来了 · 发表于 2024-12-9 22:05:29

zutianrun 发表于 2024-12-9 22:00
预定一个VIP
RAR 分卷仅存储 3%恢复记录

我还有更快的方法，请给我免VIP

gdtv · 发表于 2024-12-9 22:39:32

要不试试restic，它会把小文件打包成一个大文件，会把大文件拆成小文件

0.0 · 发表于 2024-12-9 22:43:20

我不会，但是想要个vip

M100700 · 发表于 2024-12-9 23:33:56

百万又不是很多，直接下个宝塔文件同步就行了，当然不嫌麻烦可以直接rsync

主要是看你新机器和老机器之间的连接速度怎么样，要是能跑个几百M，几小时就搞定了。

		自动登录	找回密码
密码			注册