Файловые утилиты редко становятся предметом острых дискуссий, но разрыв в скорости, измеряемый часами, заставляет по-новому взглянуть на привычные инструменты. Когда-то rsync казался незыблемым стандартом копирования, однако rclone ворвался на сцену и буквально перевернул представления о том, каким должен быть быстрый и гибкий синхронизатор, особенно если речь идёт о работе по сети.
В чём же кроется ускорение rclone?
Дело, конечно, не только в параллельных потоках, хотя именно они часто становятся первым аргументом в спорах. Rclone создавался для эпохи многополосных интернет-магистралей, где простое копирование в один поток — всё равно что тянуть фуру по просёлочной дороге. Скучно, медленно и безнадёжно устарело.
Теперь представьте: десятки потоков, каждый из которых забирает свою часть файла. Вот она, цифровая эстакада, по которой ваши данные мчатся в облако. С флагом --transfers=16 rclone превращает утомительную синхронизацию в нечто почти мгновенное. Особенно заметен эффект, если приходится тасовать тысячи крошечных файлов или целые горы медиаконтента. В такие моменты разница ощущается буквально кожей: время перестаёт утекать сквозь пальцы.
Что даёт реальный прирост скорости?
- Динамическая буферизация — rclone сам регулирует размер буфера в зависимости от качества соединения, не давая сети простаивать.
- Пакетная обработка метаданных — меньше бессмысленных запросов к серверу, больше — чистой передачи данных.
- Фоновая проверка целостности — контрольные суммы считаются параллельно, не тормозя основной процесс.
Цифры, которые убеждают
В тестах на полуторитеррабайтной коллекции фотографий и документов результаты выглядели так:
- rsync: 11 часов 40 минут ожидания.
- rclone по умолчанию: 6 часов 15 минут. Уже заметно бодрее!
- rclone с агрессивными настройками (
--transfers=32+--fast-list): всего 2 часа 50 минут. Почти не верится, правда?
Ещё один неожиданный бонус — процессорная нагрузка у rclone ниже, чем у rsync. Мощь Go-рантайма даёт о себе знать.
Тонкая настройка: где скрываются дополнительные секунды
Стандартные параметры — лишь отправная точка. Настоящее волшебство начинается, когда вы решаетесь поиграть с настройками:
rclone sync /data cloud:backup \
--transfers=24 \ # Отличный баланс для гигабитных каналов
--checkers=48 \ # Молниеносная инвентаризация файлов
--drive-chunk-size=256M \ # Критично для Google Drive и крупных файлов
--bwlimit=08:00,250M 23:00-07:00,off \ # Автоматическая смена лимита по времени суток
--retries=3 \ # Оптимум между настойчивостью и скоростью
--low-level-retries=10 # Спасает при капризной сети
Особого внимания заслуживает опция --fast-list: она снижает время сканирования каталогов на 40-60% за счёт хитрого кэширования структуры. В больших архивах это ощущается сразу — скорость становится почти дерзкой!
Когда rsync до сих пор вне конкуренции
Но не всё так однозначно. Сценарии, где старый добрый rsync по-прежнему на коне, никто не отменял:
- Копирование между локальными дисками на одной машине — здесь rclone не даст ощутимого прироста.
- Ювелирное зеркалирование с сохранением тонких атрибутов файлов.
- Системы с дефицитом оперативной памяти: rclone потребляет порядка 200 МБ, а rsync обходится скромными ~20 МБ.
Проверьте сами — почувствуйте разницу
Первые копирования больших архивов — идеальное поле для экспериментов. Попробуйте такой простой замер:
time rsync -azh ~/Videos/ backup-server:/media/ && \
time rclone sync ~/Videos/ backup:/videos/ --transfers=16 --progress
Скорость — понятие субъективное, пока не сталкиваешься с реальным ожиданием. И как только rclone впервые завершит задачу за пару часов вместо целого дня, возвращаться к rsync уже не захочется. По-настоящему увлекательно, что после пары удачных экспериментов многие пересматривают свой привычный стек инструментов — особенно если часто работают с облаками.
Документация rclone — настоящий клад для любопытных: фильтры, retry-правила, гибкая настройка потоков. Стоит начать с малого и постепенно подбирать параметры под ваши задачи и каналы связи. Не бойтесь экспериментировать! Иногда именно смелость в настройках открывает новые горизонты скорости.