Как перенести файлы с одного облака на другое минуя свой ПК

[deseven]

Никогда еще не слышал чтобы терабайты называли тоннами…

[serejk]

Я тоже:) зато помню, как мегабайты называли метрами :)

[resetme]

А я помню как килобайты называли килограммами и килобасами.

[Ryav]

Яндекс перестал резать скорость?

[RSagittarius]

Ещё как режет :) Видимо поэтому, использование в качестве площадки для развёртывания Rclone вычислительного ресурса с более высоким гарантированным аптаймом, чем домашний ПК — выглядит предпочтительней.

[RSagittarius]

ИМХО, я так думаю

[ComodoHacker]

узел под ОС Windows, для соответствия условиям нашего ТЗ, настраивается легче, чем под другие ОС

Что-то есть сомнения. Вам даже браузер пришлось отдельно устанавливать.

какая «тема не раскрыта» и в каком ключе стоит продолжать

Не хватает инструкций по настройке под Linux, без GUI. Я уверен, в этом варианте они будут намного короче :)

А если GIU так нужен, то можно и со своего браузера зайти.

По самому rclone такой вопрос. Каковы требования к ОЗУ и диску при синхронизации из облака в облако? В идеале хотелось бы видеть графики мониторинга в процессе.

[RSagittarius]

узел под ОС Windows, для соответствия условиям нашего ТЗ, настраивается легче, чем под другие ОС.

Что-то есть сомнения. Вам даже браузер пришлось отдельно устанавливать.
…
А если GIU так нужен, то можно и со своего браузера зайти.

«Настраивается легче» здесь следует читать как — «требует меньше экспертных знаний от пользователя». Издержки редакторских правок:)

Согласно тому, что браузер с авторизацией в Яндекс открывается на том хосте, где стоит Rclone, установка нового браузера в WinGUI требует значительно меньше экспертности от пользователя, чем в случае установки и использования консольного браузера или установки GUI для Linux.

какая «тема не раскрыта» и в каком ключе стоит продолжать

Не хватает инструкций по настройке под Linux, без GUI. Я уверен, в этом варианте они будут намного короче :)
…
По самому rclone такой вопрос. Каковы требования к ОЗУ и диску при синхронизации из облака в облако? В идеале хотелось бы видеть графики мониторинга в процессе.

Что короче, я бы не сказал, а вот то, что интересней — это точно. Если через описанный WebGUI можно только пока копировать данные, то через СLI ещё перемещать и синхронизировать с проверкой целостности переносимых данных. Если эта тема будет интересна, то о ней готов рассказать во следующем посте.

Учитывая то, что Rclone поддерживает более 45 видов и типов хранилищ, а производительность решения зависит от ширины каналов между площадками, количеством и размером перемещаемых файлов, количеством потоков миграции и настройками — дать рекомендации по требованиям по производительности и сделать графики для всех возможных вариантов миграции данных — задача не очень тривиальная. Но если нужно рассмотреть реальный частный случай, то давайте прототипируем.

От себя могу сказать, что для своих целей я использую Raspberry PI 3B. Но у меня основной трафик внутри локальной сети.

[ComodoHacker]

браузер с авторизацией в Яндекс открывается на том хосте, где стоит Rclone

О, это меняет дело. Об этом обязательно следовало упомянуть в статье!
А без браузера и вообще без человека авторизоваться никак нельзя?

[RSagittarius]

А без браузера и вообще без человека авторизоваться никак нельзя?

Без браузера на узле миграции для авторизации в Яндексе — нет. Но это необходимо сделать только один раз для одной учётной записи. На других хранилищах можно.

Без человека, вернее без доступа к его учётной записи на хранилище, авторизоваться на нём, боюсь, будет никак нельзя.

[Naves]

Зачем вам браузер на узле миграции, в параметрах rclone укажите чтобы он запускался на всех интерфейсах, а не только localhost.
После это подключаетесь удаленно. Либо задайте пароль, либо вы и так используете «защищенную виртуальную сеть»
Ну и использование целой windows для такой задачи, это как-то странно.

[RSagittarius]

Зачем вам браузер на узле миграции, в параметрах rclone укажите чтобы он запускался на всех интерфейсах, а не только localhost.
После это подключаетесь удаленно. Либо задайте пароль, либо вы и так используете «защищенную виртуальную сеть»

На узле миграции он нужен только для авторизации в Яндекс. Лично я, даже несмотря на то, что у меня есть доступный только для доверенных узлов защищённой виртуальной сети WebGUI Rclone в составе приложений RPI-Monitor, спокойно обхожусь инструментами консоли. Как консольным браузером, так и командами настройки подключения хранилищ и запуска процессов миграции данных.

Ну и использование целой windows для такой задачи, это как-то странно.

Что касается Винды, то она была выбрана как наиболее понятный для неискушённого пользователя инструмент с графическим интерфейсом для создания «какого-нибудь файлового менеджера» для решения задач, указанных в вопросе начала статьи.

[IgorGS]

Большое спасибо за статью!
Как раз есть VPS c Windows Server 2012R2
Буду пробовать… )

[angapov]

Для таких целей имхо дешевле взять прерываемую виртуалку в Яндекс Облаке в автоскейлинг группе и настроить автостарт rclone при загрузке.