ITSM Дао 😎

Сегодня среда и в рубрике #посредственнаятудза поговорим об утилите rclone (https://rclone.org/). Давно я не удивлялся (приятно) утилиткам. 🥺 А rclone меня удивил тем, что при лаконичности и простоте использования под катом оказалось действительно много возможностей. Причем rclone делает, по сути, одну вещь, но делает ее превосходно (ооо unix way 👼) – она, как написано на github в mdшнике – «manage files on cloud storage». То есть сценариев то не много. Есть удаленное хранилище, есть хост и мы можем скопировать в хранилище файлы, забрать файлы, удалить, перенести файлы и синхронизироваться с удаленным хранилищем. Получается такой rsync но для облаков. Правда есть еще интересные моменты – кроссплатформенность, это шифрование на лету, расчет хэшей, экспорт списков файлов в JSON, скачивание больших файлов чанками и монтирование удаленных хранилищ в локальную файловую систему через FUSE. 🐙 Самый сок в том, какие хранилища поддерживаются. Конечно S3, но еще SFTP, HTTP, WebDAV, FTP и DLNA. То есть это не иной взгляд на aws, это комбайн. Я посчитал, нативно поддержвиается 115 провайдеров, включая самого распространенного в мире - The local filesystem Впечатляет. Но что мне понравилось особо – это милосердие к пользователю. 👁 Можно не писать 100500 ключей подключаясь к разным стораджам, можно не править JSON или YAML 😅 с профилями подключений. Можно настроить профиль в приятном текстовом мастере. Это здорово, потому что тебе не надо читать доку в поисках ключей, которые нужны для конкретного странного S3 (мы же помним, что S3 это концепция+API, а потом каждый делает что хочет 🤡). Да, есть общие параметры access_key_id, secret_access_key, region, но например endpoint хоть и является обязательным, для Amazon остается пустым, а параметр force_path_style ставится в true для всех провайдеров, которые на поддерживают URL virtual-hosted-style, а это и MinIO, и Ceph, и кажется Cloud.ru. Короче часть работы делают за нас, и это очень хорошо. Вот базовые команды:

rclone config – мастер настройки
rclone ls remote:path – получить список файлов
rclone lsd remote:path – и директорий
rclone copy src/ remote:dst/ - скопировать без удаления в dst)
rclone sync src/ remote:dst/ - синхронизировать src с dst. Милая деталь, если в src какого-то файла нет, а в dst он есть, то файл удалится 😐
rclone check src/ remote:dst – безопасно свериться
rclone mount remote:path /mnt/point – смонтировать в локальную ФС.

А еще есть … Web-GUI. Запускается командой

.\rclone rcd --rc-web-gui --rc-user admin --rc-pass mypassword

У меня правда только под VPN завелся, поскольку из РФ нельзя скачать часть бинарей. Про то, как это можно обернуть в юнит systemd и синхронизироваться по timer рассказывать не буду. Кажется выше на канале все есть 🪄 На этом все! #поСредственнаяТулза