[Ответить в тред] Ответить в тред

09/07/16 - Новое API для капчи - внимание разработчикам приложений
03/04/16 - Набор в модераторы 03.04 по 8.04
26/03/16 - Конкурс: Помоги гомункулу обрести семью!


[Назад][Обновить тред][Вниз][Каталог] [ Автообновление ] 63 | 7 | 22
Назад Вниз Каталог Обновить

Бэкапов и облаков тред Аноним (Microsoft Windows 10: Microsoft Edge) 01/07/16 Птн 14:42:23  1769255  
14673733432630.jpg (435Кб, 2880x1800)
Давайте поговорим о сабже.

Ситуация 1 - есть ~100ГБ личной инфы(музыка, сохранённые пикчи, всякая литература и т.д.). Этот архив постоянно пополняется, но старые данные не меняются(не записываются, но иногда считываются). Потерять всё это крайне не хочется. Как должна решаться такая ситуация?
Хранить на диске на компьютере - нельзя, диск однажды может наебнуться(даже RAID).
Хранить в облаке - нельзя, облаков такого размера не существует нормальных, выбор платить миллионы или доверять данные китайским ноунеймам есть всегда, разбить данные на несколько облаков как-то тупо, да и зонды никто не отменял.
Записать всё на DVD-диски - нельзя, 2016 год на дворе и через 10 лет, если привод сломается, новый будет уже не купить.
Записать всё на внешний ЖД - нельзя, он тоже может наебнуться, если его постоянно подключать, чтобы прочитать что-либо. Да и без этого это крайне ненадёжная вещь.
Да и как часто добавлять новые данные в бэкап? Раз в месяц? Крайне ненадёжно. Каждый день? Ебануться можно вручную постоянно всё заливать. Как-то это автоматизировать? Но автоматизировать можно только работу с облаками(наверное), а они не подходят.

Ситуация 2 - есть небольшое количество нужных данных, которые постоянно меняются(сейвы к игорям, проекты, истории сообщений мессенджеров и т.д.). Терять это также не хочется. Как должна решаться такая ситуация?
Хранить на диске на компьютере - см. этот пункт в ситуации #1.
Хранить в системе контроля версий - нельзя, ибо будет работать только на проекты, будет видно всему миру, да и противна мне идея хранить всякое говно мамонта вида "версия за 05.06.2011" и "версия 06.06.2011". Эти версии мне никогда не пригодятся и я не хочу их у себя держать.
Хранить в облаке - зонды в подобных вещах не так критичны, а размера облаков должно хватить. Остановимся на этом пункте.

С облаками есть другая проблема - а по какому принципу это всё делать? Сразу заливать данные на облако при создании и не хранить локальных копий? При отсутствии интернета данных к тебя не будет, да и скорость будет удручать. Обновлять? Тогда как часто? И опять же, как это автоматизировать?

В общем, способов бэкапа и софта для бэкапа нить иди.
Аноним (Microsoft Windows 10: Firefox based) 01/07/16 Птн 14:43:47  1769257
>>1769255 (OP)
Никак. Вьеби говна и не выебывайся.
Скопируй на майлру
Аноним (Microsoft Windows 10: Microsoft Edge) 01/07/16 Птн 14:46:16  1769260
>>1769257
Не доверяю я им. Завтра они удалят все мои данные, если я не поставлю браузер Амиго. Без предупреждения, они могут.
Аноним (Linux: Firefox based) 01/07/16 Птн 14:49:15  1769262
1. Забэкапь на два харда, вероятно того, что у тебя в один день наебнуться три харда КРАЙНЕ МАЛА. И вообще достаточно одного запасного.

2. Идёшь на рынок, покупаешь там две флешки.
Скриптом раз в неделю копируешь мелкие нужные данные сначала на одну, а затем на вторую флешку.
???
PROFIT!
Аноним (Microsoft Windows 10: Chromium based) 01/07/16 Птн 14:49:25  1769263
>>1769255 (OP)
>Записать всё на внешний ЖД - нельзя, он тоже может наебнуться

Да ладно , раз в неделю сделать бэкап важных данных самое то.
Аноним (Microsoft Windows 10: Microsoft Edge) 01/07/16 Птн 14:59:41  1769267
>>1769262
1. Да, можно, но как это автоматизировать, опять же?
2. Для этого необходимо держать флешки вставленными, чтобы вручную скрипт не запускать.
Аноним (Linux: Firefox based) 01/07/16 Птн 15:03:30  1769270
>>1769267
Скриптами. Найди свободный часик, вхуярь все девайсы в свою машинку и запусти скрипты. Разве это так сложно?
Аноним (BSD: Firefox based) 01/07/16 Птн 15:11:48  1769275
>>1769255 (OP)
про DVD поржал. Даже ленты до сих пор продаются.
но твои потребности реаются покупкой N винтов больщого объема и раных производителей.
бекапишь на них, раз в год проверяешь как оно вообще читается или нет, смотришь смарт и прочая диагностика. Винт накрывается - покупаешь новый.
ВСЕ.

ну а чем там бекапить - вопрос 10ый. Тем более твои потешные 100Гигов.
Аноним (Microsoft Windows 7: Firefox based) 01/07/16 Птн 15:31:28  1769301
14673762883460.jpg (39Кб, 562x437)
>>1769255 (OP)
>облаков такого размера не существует
>~100ГБ личной инфы

Аноним (Microsoft Windows 10: Microsoft Edge) 01/07/16 Птн 15:58:33  1769329
>>1769301
Среднее облако - 10-15 ГБ. Очень хорошее облако - 30-40 ГБ.

>>1769270
Точно так же, как можно просто забыть забэкапить, так же можно и забыть воткнуть девайсы. Или не найти на это время. Или отложить на потом. Это должно делаться в тихом режиме, без уведомления пользователя.

>>1769275
>чем там бекапить - вопрос 10ый
Доска о софте. Тред про софт для бэкапов. Далеко не десятый вопрос.
Аноним (Apple Mac: Firefox based) 01/07/16 Птн 16:13:37  1769344
14673788173750.png (199Кб, 1276x954)
>>1769255 (OP)
>timemachine
>syncthing
>4.5$ vps
Аноним (Microsoft Windows 7: Firefox based) 01/07/16 Птн 16:17:03  1769348
14673790235980.png (9Кб, 209x689)
>>1769329
>Среднее облако - 10-15 ГБ. Очень хорошее облако - 30-40 ГБ.

okay.jpg
Аноним (Microsoft Windows 10: Microsoft Edge) 01/07/16 Птн 16:26:33  1769364
>>1769348
>>1769344
А если я перестану платить(ну вот закончатся деньги, на мели буду), то они сразу всё потрут?
Аноним (Microsoft Windows 7: Firefox based) 01/07/16 Птн 16:27:54  1769367
>>1769364

заплати за жджва года вперде.
Аноним (Microsoft Windows 10: Microsoft Edge) 01/07/16 Птн 16:37:52  1769378
>>1769367
Хм. Тогда я забуду заплатить через 2 года.
Аноним (Microsoft Windows 7: Firefox based) 01/07/16 Птн 16:46:14  1769385
>>1769378

через джва года терабайт памяти будет у тебя в телефоне.
Аноним (Linux: Firefox based) 01/07/16 Птн 16:53:40  1769389
>>1769255 (OP)
Соус пика?
Аноним (Linux: Firefox based) 01/07/16 Птн 16:59:25  1769396
14673815650380.png (182Кб, 806x703)
>>1769389
А я уж думал какую-то годноту сняли.
Аноним (Linux: Chromium based) 03/07/16 Вск 06:00:57  1770666
Я думаю, в идеале должна быть такая схема:
Для частых бекапов (ежедневных или еженедельных) достаточно облака. Поскольку данные отдаешь на сторону, перед отдачей шифровать.

Где-то раз в год, когда на ящик посыпятся письма о том, что облако перепонено и пора платить бабло за увеличение места, переносить с облака бекапы на жесткие диски.

Для каких-то очень важных данных, которые низачто не хочется потерять - DVD диски, причем последние лучше дома не хранить. Всякое бывает - пожары, разгневанные тян и т.п. Зашифруй на них инфу и отдай другану. Ну или закопай во дворе.

По поводу редкости dvd приводов, особо не волнуйся. Даже сейчас, если сильно захотеть, можно прочитать 5 дюймовые дискеты, поскольку бекапы с DVD дисков будут так же на тех жеских дисках, о которых я писал выше, скорее всего, читать с DVD тебе ничего не понадобится.

Проблема с DVD в их малом объеме. Даже те жалкие 100ГБ - уже 25 дисков. Если хранить в 2-3 экземпляров, получается уже херова куча болванок. Но зато DVD надежнее чем HDD.

Касательно софта, все зависит от твоих требований и ОС. Мне под линуксом хватает duplicity. К таким программам, по факту, 3 требования:
1) Возможность шифрования
2) Возможность инкрементальных бекапов, когда у тебя сохраняется не каждый раз все 100ГБ, а лишь разница между текущими данными и старыми бекапами.
3) Возможность посмотреть , что же в бекапах хранится и восстановить один конкретный файл. С инкрементальными бекапами, еще желательно иметь возможность восстанавливать конкретный файл за опеределенную дату.
В duplicity это все есть.

И да, все носители, желательно в нескольких экземплярах, включая облака. И всегда шифровать.
Аноним (Linux: Chromium based) 03/07/16 Вск 06:04:55  1770668
Да, с флешками и ssd дисками говорят бывают траблы - типа, для поддержания заряда их надо время от времени втыкать в компьютер, т.ч. они сразу отпадают.
Аноним (Microsoft Windows 7: Firefox based) 03/07/16 Вск 11:24:14  1770761
>>1770666
>Где-то раз в год, когда на ящик посыпятся письма о том, что облако перепонено и пора платить бабло за увеличение места, переносить с облака бекапы на жесткие диски.

А что мешает удалить бэкап которому сука год и который был 360 раз после этого переписан новыми? Или это такой особый вид психологической болезни, когда бекапишь все говно и хранишь одинаковые бекапы всего говна всю жизнь?
Аноним (Microsoft Windows 7: Firefox based) 03/07/16 Вск 12:35:47  1770783
>>1769255 (OP)
Так расписал словно жесткий диск начинает разваливаться по дороге из магазина.

Кажется мы стали забывать про dvd и синелуч для хранения файлов
Аноним (Microsoft Windows 8: Firefox based) 03/07/16 Вск 16:56:21  1770895
>>1769255 (OP)
>Записать всё на внешний ЖД - нельзя
Льзя. Вероятность того, что навернутся одновременно два винта -- внешний и внутренний -- крайне мала.
Аноним (Google Android: Chromium based) 03/07/16 Вск 19:02:28  1770995
>>1770761
Причем тут дублирование бекапов? Суть в том, что на облака писать удобно, а внешний жесткий диск подключать влом. Поэтому бекапы постоянно делать только в облако, а на жеский диск перекидывать раз в полгода, когда на облаке накопится порядочный объем. Так и проще для человека и диски целее будут.
Аноним (Google Android: Chromium based) 03/07/16 Вск 19:19:37  1771003
С бекапами бывают разные тонкости.
Для нормальных бекапов не достаточно хранить одну последнюю копию. В бекапах должна храниться именно история изменения файлов, т.к. невозможно проверять целостность всех файлов перед каждым бекапом.
Объясняю на пальцах: если у тебя в бекапах хранится одна последняя копия, то если у тебя повредятся файлы (вирус-шифровальщик, бедблоки на диске + ебнутая файловая система, типа нтфс, не поддерживающая чексуммы на каждый блок, случайно удалил файл и не заметил и т.п.), то в очередной раз выполняется бекап, затирающий старый и твои файлы херятся, вместе с ненужным бекапом.
Поэтому в бекапах нужно хранить несколько копий файлов, за разное время. Тут как раз сильно выручают инкрементальные бекапы.
Насколько часто делать такие хранимые копии, зависит от важности данных/уровня параноидальности. В идеале, промежутки между хранимыми копиями должны лежать на какой-то логарифмической шкале: т.е. последние 2 месяца хранить копии за каждую неделю, следующие 10 месяцев хранить копии раз в месяц, последующие годы - раз в год.
Аноним (Microsoft Windows 7: Firefox based) 03/07/16 Вск 22:17:09  1771085
>>1770995

А нахуй вообще на диски их из облака копировать? Или ты реально думаешь что энтерпрайз-рейд в т3 цод с бОльшей вероятностью наебнется, чем твой говнохард в говнохрущевке?
Аноним (Microsoft Windows 7: Firefox based) 03/07/16 Вск 23:20:10  1771131
>>1769255 (OP)
в маил.ру 1тб, храню там кое-что, часть храню на флешках 32гб, часть храню на втором компе. Думаю не потеряется. Но в будущем планирую еще один хард покупать для бекапов и внешний для использования (разумеется с tryecrypt) и бекапа на других устройствах
Аноним (Google Android: Chromium based) 04/07/16 Пнд 09:21:15  1771245
>>1771085
Тем, что на бесплатных облаках тебе никто ничего не гарантирует, а платные стоят столько, что соответсвующий им объем hdd окупится за год. И если с облаков переносить данные на диски, то в случае чего, ты потеряешь данные лишь за последний период, причем эти данные, скорее всего, будут еще на основном компе.
Аноним (Apple GayPhone: Firefox based) 04/07/16 Пнд 12:32:18  1771360
14676247381380.png (426Кб, 750x1334)
>>1771245

>стоят столько

Сразу послал тебя на хуй time4vps backblaze тысячи их
Аноним (Linux: Chromium based) 05/07/16 Втр 08:19:16  1772015
Сисадмины, а как часто пригождаются бэкапы? Классические, инкрементальные. Есть где статистику подглядеть?

Пилю стартап на тему дешёвых ленточных бэкапов.
Аноним (Linux: Chromium based) 05/07/16 Втр 08:23:23  1772016
>>1772015
>Пилю стартап на тему дешёвых ленточных бэкапов.
Вот расчётные цены, кстати (в рублях, если не указано обратное):

Ценник на закачивание данных, за 1 гигабайт 7,6189149339
Ценник на закачивание данных, за 1 гигабайт, в долларах 0,1194749088
Ценник за хранение данных, за 1 гигабайт 0,002857728
Ценник за хранение данных, за 1 терабайт 2,857728
Ценник за выкачивание, за 1 Гб 34,2901234568
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 08:29:17  1772018
>>1769348
опять свою парашу пиаришь?
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 12:29:54  1772113
как реализована работа в дропбокс, они обещали какой-то клиент на уровне ядра или типа того. что бы можно было работать как с обычными файлами?
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 15:08:24  1772207
>>1772018

запилишь парашу с более лучшим ценником - буду твою парашу пеарить.
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 15:08:59  1772208
14677205392160.jpg (30Кб, 604x604)
>>1772113
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 15:31:51  1772222
>>1772207
параша может быть хоть с бесплатным ценником, она от этого не перестанет быть парашей. так что съеби, литовский фошист.
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 15:57:37  1772237
>>1772208
что бы место на жд освободить, очевидно же.
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 15:58:31  1772239
>>1772222

и чем именно тебя не устраивает их сервис?
конкретно, где параша?
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 15:59:10  1772240
>>1772237

дропбокс зачем?
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 16:00:58  1772242
>>1772240
ну они же про это говорили.
Аноним (Google Android: Firefox based) 05/07/16 Втр 16:01:41  1772243
Всем Яндекс.Диск, посоны.
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 16:05:26  1772249
>>1772243
да, дешевле всего, но он в РФ. еще есть майкрософт, но там какой-то хуйни наворочено, что аж страшно, офисы какие-то, привязка к пк.
Аноним (Google Android: Firefox based) 05/07/16 Втр 16:08:15  1772251
>>1772249
>но он в РФ
Как и твои харды. Что дальше?
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 16:10:22  1772253
>>1772251
как и я сам((
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 16:11:46  1772255
>>1772242

Про что "это"?
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 16:14:59  1772258
>>1772255
ну блять, я не помню, была такая тема, что они там что-то хотят реализовать на уровне ядра, что бы с удаленным диском можно было работать как с обычным и бла-бла-бла.
потому что то, что существует сейчас это программы, которые синхронизируют данные, которые уже есть на жд, или уебанские протоколы типо вебдав.
Аноним (Google Android: Firefox based) 05/07/16 Втр 16:17:07  1772259
>>1772253
Ну дык. Пользуйся благами Родины, епта.
Аноним (Google Android: Firefox based) 05/07/16 Втр 16:18:25  1772260
>>1772258
Да FUSE под шиндовс они велосипедят, походу.
Аноним (Microsoft Windows 8: Firefox based) 05/07/16 Втр 16:32:59  1772264
>>1769344
Сложно вобще сервер этот настроить который покупаешь?
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 16:41:33  1772267
>>1772264

"Сложно" понятие относительное.

По гаедам в тырнетах в гараже можно термоядерный реактор собрать.
Аноним (Microsoft Windows 8: Firefox based) 05/07/16 Втр 17:01:39  1772276
>>1772267
Щас посмотрел немного поковырялся, сделал синхр с телефоном, вроде всё не очень сложно, некоторые строчки не понятны, но думаю в будущем разберусь, спасибо что спалил годноту такую.
Аноним (Microsoft Windows 7: Firefox based) 05/07/16 Втр 18:41:11  1772333
>>1772276

Это был не я. Я топлю за литовцев и бэкблейз.
Аноним (BSD: Firefox based) 05/07/16 Втр 19:01:09  1772345
zfs на freebsd. Пул из зеркал по 2-3 харда. Наебнуться не может. Только не порт под линукс, постоянно вижу треды, где zfs сломалось под линуксом.

У меня сейчас конфигурация из 2 хардов 4 Тб в зеркале
Аноним (Google Android: Firefox based) 05/07/16 Втр 20:55:20  1772423
>>1772345
Debian kFreeBSD можно? А то с обычной фряхой как-то уж долго ебаться.
Аноним (Google Android: Chromium based) 06/07/16 Срд 05:09:30  1772696
>>1772345
Да, и что ты булешь делать со своими пулами, когда очередной bumblebee затрет твой /usr ? Рейды не являются бекапами.
Аноним (Microsoft Windows 7: Firefox based) 06/07/16 Срд 07:52:27  1772752
>>1772696
Это NAS для бэкапа, как я понял. Хотя для эффективного бэкапа, ZFS должна и на ПК быть. Вообще, раз уж тут бэкап-тред, есть ли что-то кроме ZFS (и недоделки btrfs), позволяющее посылать дифф между снапшотами? Именно на блочом уровне, я ебал читать mtime у миллионов файлов при каждом бэкапе.
Аноним (Linux: Chromium based) 06/07/16 Срд 08:41:32  1772767
>>1772752
>Вообще, раз уж тут бэкап-тред, есть ли что-то кроме ZFS (и недоделки btrfs), позволяющее посылать дифф между снапшотами?
любая юниксовая бэкапилка, да хоть tar

только там это называется "уровень инкрементального бэкапа", если я не ошибаюсь
Аноним (Linux: Chromium based) 06/07/16 Срд 08:43:54  1772768
>>1772767
вспомнил - классические backup/restore
Аноним (Microsoft Windows 7: Firefox based) 06/07/16 Срд 08:58:19  1772773
>>1772767
Ты еблан?
Аноним (Google Android: Firefox based) 06/07/16 Срд 09:25:12  1772779
>>1769255 (OP)
> Нельзя
> Зонды
> Наебнётся
> Платить не хочу
Говна въеби
Аноним (Linux: Chromium based) 06/07/16 Срд 12:13:32  1772849
>>1772773
это ты еблан. снэпшоты только в zfs и есть толком работающие, остальное - через инкрементальные бэкапы получается ровно так же
Аноним (BSD: Firefox based) 06/07/16 Срд 18:30:50  1773107
>>1772423
Понятия не имею. По мне проще именно FreeBSD
Аноним (BSD: Firefox based) 06/07/16 Срд 18:32:27  1773108
>>1772696
zfs rollback

или

cp -r /<mountpoint>/.zfs/snapshots/<snapshot_name>/<foo> <foo>
Аноним (BSD: Firefox based) 06/07/16 Срд 18:41:28  1773111
>>1772752
HAMMER в DragonFlyBSD. Он у меня стоял на отдельном компьютере именно для файлопомойки, роутера и торрентов.

Там есть элементы версионности (т.е. каждое изменение файла хранится и доступно по номеру транзакции). Например, /mountpoint/filename -- твой файл, а /mountpoint/@@0x123456789abcdef/filename -- его версия в прошлом. Снепшот -- это просто transaction id, прикрепленное специальной записью в фс. Вся история, кроме снепшотов чистится командой hammer cleanup. А снепшоты сохраняются при очистки, пока ты сам их не удалишь или не пройдёт 60 дней (по дефолту).

Послать копию можно на другую фс, в том числе по ssh командой hammer mirror-copy. Причём если копия уже есть, то шлется, соответственно, только разница. Потом копию можно примонтировать в read-only режиме. Можно слать инкрементальный поток командой mirror-stream. Это почти как online зеркало по сети

[Назад][Обновить тред][Вверх][Каталог] [Реквест разбана] [Подписаться на тред] [ ] 63 | 7 | 22
Назад Вверх Каталог Обновить

Топ тредов