The OpenNET Project / Index page

[ новости /+++ | форум | wiki | теги | ]

Выпуск утилиты для резервного копирования rclone 1.58

19.03.2022 09:51

Опубликован выпуск утилиты rclone 1.58, которая представляет собой аналог rsync, предназначенный для копирования и синхронизации данных между локальной системой и различными облачными хранилищами, такими как Google Drive, Amazon Drive, S3, Dropbox, Backblaze B2, One Drive, Swift, Hubic, Cloudfiles, Google Cloud Storage, Mail.ru Cloud и Яндекс.Диск. Код проекта написан на языке Go и распространяется под лицензией MIT.

В новом выпуске:

  • Добавлены бэкенды для хранения резервных копий в хранилищах Akamai Netstorage, Seagate Lyve, SeaweedFS, Storj и RackCorp.
  • Реализована команда "rclone bisync" с реализацией экспериментального двунаправленного режима синхронизации. На вход передаётся два каталога, которые могут быть как локальными директориями, так и ссылками на внешние хранилища и облачные сервисы. Предложенная команда осуществляет синхронизацию содержимого этих каталогов с учётом изменений в каждом из них (изменения в первом каталоге отражаются во втором, а изменения во втором отражаются в первом).
  • В фильтры добавлена поддержка синтаксиса регулярных выражений "{{ regexp }}" для сопоставлений с шаблонами.
  • В команде hashsum реализована возможность генерации хэша для данных, поступающих через стандартный входной поток.
  • В библиотеку librclone добавлена поддержка команд монтирования.
  • Добавлены windows-сборки для архитектуры ARM64.
  • Минимальная версия компилятора Go, необходимая для сборки, повышена до 1.15.


  1. Главная ссылка к новости (https://forum.rclone.org/t/rcl...)
  2. OpenNews: В состав OpenBSD добавлена собственная реализация rsync
  3. OpenNews: Выпуск Rsync 3.1.2 c устранением уязвимости
  4. OpenNews: Доступен GNU Anastasis, инструментарий для резервного копирования ключей шифрования
  5. OpenNews: Выпуск утилиты для резервного копирования rclone 1.50
  6. OpenNews: Опубликована ФС Oramfs, скрывающая характер доступа к данным
Лицензия: CC-BY
Тип: Программы
Короткая ссылка: https://opennet.ru/56880-rclone
Ключевые слова: rclone, rsync, backup
При перепечатке указание ссылки на opennet.ru обязательно


Обсуждение (42) Ajax | 1 уровень | Линейный | +/- | Раскрыть всё | RSS
  • 1.1, В (?), 10:05, 19/03/2022 [ответить] [﹢﹢﹢] [ · · · ]  
  • +6 +/
    А чем rsync не устроил, если те же облака замонтировать как разделы?

    Интересно просто.

     
     
  • 2.2, Аноним (2), 10:19, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +5 +/
    Попробуйте это сделать и сами сразу поймёте
     
     
  • 3.10, Аноним (10), 13:48, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • –1 +/
    Т.е. ты не знаешь...
     
     
  • 4.14, d (??), 14:52, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +1 +/
    Ты просто не знаешь, куда лезешь.  Запили rsync и s3 и остынь.
     
  • 4.42, pda (ok), 23:40, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +2 +/
    Он как раз знает. Я как-то пробовал сделать синхронизацию с говносервером, на котором не было rsync и возможности поставить его. Путём sshfs + rsync. Больше не пробую.
     
  • 2.6, Аноним (6), 12:07, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +3 +/
    Не всё облака можно замонтировать.
    А большая часть тех, которые можно, работают с тормозами и глюками.
     
     
  • 3.11, Аноним (10), 13:48, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    Если облако не монтируется - оно не нужно по определению.
     
     
  • 4.46, Crazy Alex (ok), 23:47, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    1) rclone как раз сам их монтировать умеет
    2) монтирование сетевых локейшнов - это вообще штука крайне стрёмная, начиная с nfs и заканчивая вот этими всеми облачными. Для сетки нужна совсем другая обработка ошибок (вплоть до того, что она просто должна быть - а для локала часто не обязательна), другие алгоритмы доступа, кэширование и так далее.
     
  • 2.12, OpenEcho (?), 14:34, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +3 +/
    > А чем rsync не устроил, если те же облака замонтировать как разделы?

    Тогда потеряется вся эффективность rsync т.к. сканирование удаленного хоста прийдется делать через  сеть.

    rsync должен присутствовать, на обоих сторонах с совместимыми версиями если эффективность не на последнем месте, плюс rsync однопоточный в отличии от rclone

     
     
  • 3.17, Аноним (10), 16:19, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    > на обоих сторонах

    а для rclone что должно присутствовать на обЕих сторонах? :)

     
     
  • 4.41, Crazy Alex (ok), 23:37, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    А rclone умеет родной API стораджей
     
  • 2.22, pfg21 (ok), 19:35, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +1 +/
    сколь помню rclone умеет брать хеши файлов с облаков напрямую.
    т.е. минус куча работы по получению содержимого файла с облака и его полного хеширования.
     
     
  • 3.36, Аноним (36), 15:51, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    Первая синхронизация долгая так как файлы копируются, а далее действительно сравниваются хэши. Я синхронизировал GDrive и AWS S3
     

  • 1.7, Аноним (7), 12:15, 19/03/2022 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    >  В команде hashsum реализована возможность генерации хэша для данных, поступающих через стандартный входной поток.

    вот бы это можно было переиспользовать чтобы сразу рядом где-то положить sha256sum или вообще полноценную структуру выглядящую как вывод tree + sha256, ну или хотя бы sha1

     
     
  • 2.15, OpenEcho (?), 15:00, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    find -not -empty -type f -printf "%s\n" | xargs -I{} -n1 find -type f -size {}c -print0 | xargs -0 sha256sum
     
     
  • 3.16, Аноним (16), 15:51, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +1 +/
    > find -not -empty -type f -printf "%s\n" | xargs -I{} -n1 find
    > -type f -size {}c -print0 | xargs -0 sha256sum

    mtree -c -k sha256 -p .


     
  • 3.31, Аноним (7), 09:12, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +2 +/
    не перевелись ещё люди, которым нужно объяснять что костыли - это плохое непереносимое решение, равно как и бегать по нескольким ТБ данных только что пролетевших в памяти повторно только ради хэша
     
     
  • 4.39, Аноним (39), 17:09, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    Да это ничего, что костыли. Можно потерпеть, лишь бы пацаны с опеннета не заподозрили в облаколожстве.
     
  • 4.49, OpenEcho (?), 17:12, 21/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    > это плохое непереносимое решение

    О ! Очередной не признанный гений, обладающий телепатией и единстенно правильным мнением !!!

    Он правда не знает, что помимо ZFS, есть еще флэшки с exFAT, что не везде можно поюзать par2, что есть удаленные хосты которым нет доверия, но пернуть в лужу для гения, - без этого день не день...


     

  • 1.9, Аноним (9), 12:19, 19/03/2022 [ответить] [﹢﹢﹢] [ · · · ]  
  • +4 +/
    шикарная утилита, респект разработчику!
     
     
  • 2.21, Аноним (21), 18:13, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +1 +/
    С какой вероятностью удаляет файлы пользователей?
     
     
  • 3.23, pfg21 (ok), 19:36, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +1 +/
    с той вероятностью которую ты напишешь в параметрах запуска.
     
     
  • 4.25, Аноним (10), 00:42, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • –1 +/
    Ты, похоже, новости вообще не читаешь.
     
  • 3.32, Аноним (7), 09:13, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +1 +/
    Реже, чем это делают работники WB
     

  • 1.18, Ддд (?), 17:12, 19/03/2022 [ответить] [﹢﹢﹢] [ · · · ]  
  • +1 +/
    А на свой удаленный сервак с убунтой лучше rsync или rclone чтобы  локальную папку с серверной синхронизировать? Ну чтоб закинул файл в локальную и он появился на сервере
     
     
  • 2.24, pfg21 (ok), 19:37, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    для своих облаков есть синхфинг.
     
     
  • 3.33, Аноним (7), 09:14, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +1 +/
    Ещё можно не разобравшись в ногу стрелять
     
     
  • 4.50, pfg21 (ok), 13:38, 22/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    > Ещё можно не разобравшись в ногу стрелять

    если "не разобравшись" то даже на велосипеде можно навернуться и сломать себе всё.

     

  • 1.19, Аноним (19), 17:21, 19/03/2022 [ответить] [﹢﹢﹢] [ · · · ]  
  • +3 +/
    Какие еще облака? Всё еще не дошло чтоль? :-)
     
     
  • 2.20, Аноним (20), 17:55, 19/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    Да сколько можно? Все облака в соседнем подвале, иначе и быть не может. Это у всех так. У кого не так, те скоро познакомятся, к чему это приводит.
     
  • 2.27, Аноним (39), 03:32, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • –1 +/
    Да вроде там перечислены какие. А что должно было дойти?
     

  • 1.28, Аноним (39), 04:41, 20/03/2022 [ответить] [﹢﹢﹢] [ · · · ]  
  • –2 +/
    > Backblaze B2

    Самая низкая цена за гигабайт на рынке.

    > Mail.ru Cloud и Яндекс.Диск

    А это уже не актуально никому.

     
     
  • 2.30, iCat (ok), 05:49, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +1 +/
    >Самая низкая цена за гигабайт на рынке.

    NextCloud

     
     
  • 3.34, Аноним (7), 10:04, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +2 +/
    ещё SeaFile нахваливают
     
  • 3.37, Аноним (39), 17:06, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • –2 +/
    Ну если все твои данные это коллекция аниме и бэкапы сейвов Майнкрафта, то можно и NextCloud. Но я о данных, которые для бизнеса важны. Там несколько иные требования, если понимаешь о чём я.
     
     
  • 4.40, iCat (ok), 20:22, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    > Ну если все твои данные это коллекция аниме и бэкапы сейвов Майнкрафта,
    > то можно и NextCloud. Но я о данных, которые для бизнеса
    > важны. Там несколько иные требования, если понимаешь о чём я.

    А если это БИЗНЕС-данные, то о каких  таких "облаках" речь?

     
     
  • 5.43, Crazy Alex (ok), 23:41, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • –1 +/
    О самых обыкновенных. Майкрософты, Гуглы, Амазоны всякие. 99% вменяемых бизесов - в облаках, дёшево и надёжно. нынешнее время - лишнее тому доказательство - даже если в стране чёрт знает что - переехал и работаешь как прежде.
     
  • 5.48, Аноним (39), 17:09, 21/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    В новости перечислено о каких, почитай. За исключением никому не нужных мэйлру и яндекса, любое подойдёт. Дёшево, надёжно, удобно.
     
  • 4.45, Crazy Alex (ok), 23:44, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    Требованиям-то соответствовать можно, вот только стоимость не понравится.
     
     
  • 5.47, Аноним (39), 16:45, 21/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    > стоимость не понравится.

    Это что за бизнес такой у тебя, что не можешь себе позволить бэкапы хранить в облаке? Домашний лимонад на обочине продаёшь что ли?

     
  • 2.35, Аноним (35), 14:13, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +1 +/
    Актуально тому, кто 1ТБ или 100ГБ бесплатно смог получить.
     
     
  • 3.44, Crazy Alex (ok), 23:43, 20/03/2022 [^] [^^] [^^^] [ответить]  
  • +/
    А того же бэкблейза терабайт аж 5 баксов в месяц стоит (с некоторыми нюансами). У Амазона, MS, гугла - порядка десятки, что тоже не проблема совершенно.
     

     Добавить комментарий
    Имя:
    E-Mail:
    Текст:



    Спонсоры:
    PostgresPro
    Inferno Solutions
    Hosting by Hoster.ru
    Хостинг:

    Закладки на сайте
    Проследить за страницей
    Created 1996-2022 by Maxim Chirkov
    Добавить, Поддержать, Вебмастеру