Люди, а как вы бэкапитесь?

У меня закончился винт на который я бэкапился (1TB). Можно конечно что-то из старых бэкапов подтереть было, но решил взять больший (2TB) и не возиться.
Пришел ко мне этот винт и я начал на него все с старого переносить и почему-то (поздно было и голова не варила), я сделал Move вместо Copy. Процесс правда длинный и дай бог я 1/3 перелили (оба винта USB). Решил на следующий день продолжить игрища… и обнаружил, что у нового винта застрял шпиндиль (или как там его зовут) и не заводится он не в какую.

В общем, буду его отсылать назад, ну и минус 1/3 набэкапленного ушла в никуда.

Ну а заодно задумался о трех вещах
1) Может поставить себе Raid, а то винт backup’ный вполне может тоже склеять ласты и тогда уйдут 100% backup’ов (что гоораздо обидней)
2) Даже Raid не слишком помогает от того, что в квартире протечет крыша и винт зальет целиком. Может быть Online backup? Но в online backup’ах тоже
есть свои нюансы (известные компании требуют приличных денег, особенно за 1TB данных). Малоизвестные компании могут помереть забыв предупредить, чтобы
из них забрали данные.

Требуется совет зала, кто как решает этот вопрос?

63 комментария to “Люди, а как вы бэкапитесь?”

  1. vg:

    Как говорил один мой знакомый: «Если информация не находится в трех географически разнесенных местах, то, можно сказать, она не находится нигде».

    RAID не решает проблему бэкапа. Он помогает ускорить восстановление из-за аппаратных проблем. Но слабо помогает от программных сбоев, форс-мажоров и т.п.

    Я решил так — попросил друзей поставить мой винчестер к себе в не нагруженный сервер + доступ по ssh/sftp. И так два раза (в разных городах 🙂 ). После чего rsync’ом заливаю туда свои бэкапы.

    • Victor Ronin:

      Насчет Raid — да, это решает в основном проблему померших винчестеров.

      Насчет винт у друзей — интересная идея.

  2. неважно:

    Стереть все порно, остальное забэкапить на дискетку?

  3. думаю на Amazon S3 вам помогут ) http://aws.amazon.com/s3/

    • Victor Ronin:

      Смотрел. $0.10/GB/month за хранение. На 1TB получается $100 в месяц, что явный (как по мне) перебор для персональных нужд.

  4. а что у тебя на 1Тб?

    фотки и прочае у меня просто на 2х машинах + двд переодически бабушкам-дедушкам. особо интересное на пикасе.

    код или на гитхабе или на гуглкоде.

    остального так мало, что 8Гб флешки много….

    • Victor Ronin:

      Вопрос хороший.

      Backup’ы за достаточно долгое время (большинство из них дифференциальные, но были некоторое количество и полных).

      Внутри бэкапов — большинство таки фотки и код. Код выложить на github нельзя.

      Но в целом с идеей согласен, нужно пересмотреть параметры бекапа.

      • Pecha:

        Юзаю VisualSVN, папку Repositories синкую с Dropbox — там 2 ГБ, для кода хватит, а если нет, заводим еще один аккаунт 🙂 для кода данная схема работает отлично.

  5. Все просто, раз в год покупаю новый HDD, а старый увожу на деревню дедушкам 🙂 Информацию просто копирую при смене hdd. Для важного есть email и dropbox.

    • Victor Ronin:

      Ну в случае помирания нового, на руках может остаться backup годичной давности, что достаточно жестоко.

    • Victor Ronin:

      Да, dropbox — это в целом идея. Но опять же, нужно тщательно отобрать ващное.

      • centur:

        Важные вещи — синхронизация на 3 машины + онлайн хранилище через Windows Live Mesh — по 5 гигов онлайн хранилища на аккаунт. Онлайн траффика жрет больше чем dropbox (ну раньше точно было больше, т.к. dropbox диффы слал а mesh полным файлом обменивался), но зато в пределах сети — неограниченный объем папок для синхронизации, ограничения только на онлайн хранилище.

        Возможно подключить несколько дополнительных аккаунтов как «общие папки» и поиметь очень приличное по объему _синхронизируемое_ онлайн хранилище.

        SkyDrive 25Gb — фото и всякая мелкая мультимедия. Есть бесплатный плагин (неофициальный) для подключения его как псевдодиска в Windows, доступ из web, приватные и публичные каталоги. Тоже есть общие каталоги, но я еще ни разу не уперся в лимит в 25 гб чтобы имело смысл заморачиваться.

        Дистрибутивы — у меня все программы «публичные» или\и бесплатные — я храню только список файлов и синхронизирую на LiveMesh

        В целом при использовании некоторых простых манипуляций можно получить очень даже много места — на 4 аккаунта Windows Live Id в совокупности будет 100гб SkyDrive и 20GB синхронизируемого хранилища — мне кажется даже для «очень запасливых хомячков» — достаточно =)

        А вообще конечно терабайт в инете особо не похранишь, многовато, надо бэкапить только то что важно, а не то что можно всегда скачать.

      • centur:

        Важные вещи — синхронизация на 3 машины + онлайн хранилище через Windows Live Mesh — по 5 гигов онлайн хранилища на аккаунт. Онлайн траффика жрет больше чем dropbox (ну раньше точно было больше, т.к. dropbox диффы слал а mesh полным файлом обменивался), но зато в пределах сети — неограниченный объем папок для синхронизации, ограничения только на онлайн хранилище.

        Возможно подключить несколько дополнительных аккаунтов как «общие папки» и поиметь очень приличное по объему _синхронизируемое_ онлайн хранилище.

        SkyDrive 25Gb — фото и всякая мелкая мультимедия. Есть бесплатный плагин (неофициальный) для подключения его как псевдодиска в Windows, доступ из web, приватные и публичные каталоги. Тоже есть общие каталоги, но я еще ни разу не уперся в лимит в 25 гб чтобы имело смысл заморачиваться.

        Дистрибутивы — у меня все программы «публичные» или\и бесплатные — я храню только список файлов и синхронизирую на LiveMesh

        В целом при использовании некоторых простых манипуляций можно получить очень даже много места — на 4 аккаунта Windows Live Id в совокупности будет 100гб SkyDrive и 20GB синхронизируемого хранилища — мне кажется даже для «очень запасливых хомячков» — достаточно =)

        А вообще конечно терабайт в инете особо не похранишь, многовато, надо бэкапить только то что важно, а не то что можно всегда скачать.

        NB: Как интересно — этот комментарий первый раз не опубликовался но висит в БД и защита от дубликатов не дает его повторно отправить

        • Victor Ronin:

          Собственно говоря, у меня особо трех машин то и нету. Все на одном notebook’е. Ставить вторую машину, чисто для backup’а — конечно можно, но по цене выходит дороговато.

  6. VladStar:

    2 винта, на одном стоит система, на другом — данные. ОС ежедневно бэкапит данные с диска с данными на диск с системой (с компрессией, естественно). Время от времени в компутер втыкается третий винт, с загрузочного CD запускается CloneZilla и делает клонирование системного винта на этот третий винт, который после завершения операции уносится подальше от рабочего места.

    Ну, как-то так. 🙂

    Кстати, я не верю, что у тебя там фоток на терабайт. 🙂 Скорее несмотрированное видео. 🙂 Которое надо смонтировать, закатать на DVD-шки и убить. Тогда бэкапы сразу уместятся гигов в сотню.

    К слову, у GoDaddy 250Gb хостинг стоит порядка 5-8 баксов в месяц.

    • VladStar:

      Кстати, у GoDaddy же:

      ULTIMATE PLAN
      Unlimited Space+ & Bandwidth!
      1mo: $14.99/mo
      12mos: $7.99/mo (on sale)
      36mos: $6.99/mo (on sale)

      • Vitaly:

        Как правило на таких ТП мелким шрифтом в TOS пишут про no video, no mp3, no fotos, no backups. И что и что при сильном отличии контента от среднестатистического веб-сайта они такого клиента попросят. Так что не вариант :(. Если хранить в инете, надо специальные backup-планы искать.

      • Alexey:

        У меня хостинг от SErvage.net — там 750 гигов места за 5,75 баксов (со скидкой если) в месяц.
        проблем с ограничением контента не встречал.
        основная проблема — скорость доступа.
        скажем выше 220 кБ не получалось достич. (причем и у меня и у НИХ все нормально со скоростями. причину так и не выяснили. может сами режут конечно — но клятвенно божились что нет)
        в Итоге что-то объемное (сотни гигабайт) очень неудобно туда класть. медленно.

        С другой стороны если вам автоматически туда заливать что-нить, то должно быть пофик. лишь бы за ночь успевало.

        Ну и да. пересмотрите размер бэкапа. терабайт НУЖНЫХ ЛИЧНЫХ данных, я с трудом могу себе такое представить.

      • Victor Ronin:

        Интересно…интересно — надо глянуть.

    • Михаил:

      А ты пробовал хоть раз восстанавливать так систему?
      Спрашиваю, потому что я был уверен в том, что акронис известная фирма и веников не вяжет, а в результате восстановить не смог. Хорошо, что все было на отдельном хдд.
      Кстати, один раз юсб-хдд тоже выходил из строя.

      • Victor Ronin:

        Да, пару раз таки востанавливал. Хотя я скорее пользвуюсь не полным востановлением, а просто тем, что можно backup recovery point просмотреть и востановить отдельные файлы.

      • VladStar:

        Да, успешно восстанавливался с клонированного диска. 🙂 Акронису и прочим N.Ghost’ам я как-то не доверяю, только клонирование. Экслер, кстати, недавно об акронисе писал, что тот не смог восстановить его упавшую систему.

    • Victor Ronin:

      Не… фоток нету на терабайт. В целом просто накопилось бекапов на этот самый 1Tb.

  7. Vitaly:

    У меня ценных данных чуть поменьше — ок 850 Гб. Из них ~ 800 — фотки и немного видео. Хранится в трех экземплярах — на рабочем компе (truecrypt рулит), на домашнем, и на внешнем винте. Синхронизируется ручками 🙁 Не самый удобный вариант, но лучшего пока не нашел. Искал программы синхронизации «хранилищ» через оффлайн (флешку/переносной винт), нашел две штуки — но обе пытаются для первоначальной синхронизации сначала слить на переносной носитель все 850 Гб, а потом — но до этого я не доходил, т.к. у меня переносной винт лишь 500 Гб.

    • Victor Ronin:

      У меня рабочий и домашинй комп это одно и тоже и в этом некоторая проблема 🙂

  8. Сергей:

    Код в git на unfuddle. Картинки, видео на dreamhoste и в пикасе.

  9. Возможно у вас другие подходы, но по мне, все что я не трогаю более полугода, можно выкидывать. Фотки на DVD и на полочку. Код дублирован на 2х винтах и на флешке.

    • Victor Ronin:

      Таки подход другой. Не знаю для чего, но очень не люблю стирать старые данные.

  10. Недавно столкнулся с подобной проблемой, т решил её покупкой TS-439 Pro II Turbo NAS

    http://swimma2.livejournal.com/54017.html

    Остался очень доволен девайсом.

  11. Здраствуйте, Виктор.

    Есть еще два варианта: если основные машины работают под Windows, можно использовать Windows Live Mesh. Предидущая реинкарнация Mesh была и под Mac, не уверен, что сейчас это верно. Live Mesh позволяет синхронизировать данные p-2-p без лимитов, или через централизованное хранилище Sky Drive, правда, лимит — 5 GB. Я это использую для хранения действительно важных файлов и документов. Например, файл MS Money, расходы в котором я веду с 2002 🙂 Ну и еще парочка. Некоторые файлы я синхронизирую через Live Mesh между домашним десктопом и рабочим лептопом в p-2-p. Все это чтобы решить проблему с географической разнесенность. Для бекапов дома я бы очень посоветовал устройства на базе Windows Home Server. Куча плющек, бекапы образов компьютеров (включая дельты), удаленный доступ к документом, малое потребление электроэнергии, работают без клавиатуры и монитора и т.п. И мне нравится алгоритм создания копий: вместо того, чтобы делать RAID-ы и прочее, Home Server просто «зеркалирует» назначенные папки между дисками. Поэтому потеря свободного места на диске — минимальная. Например, я хочу «зеркалировать» папки с фотографиями, потому что они мне важны, но я абсолютно переживу потерю папки с записанными ТВ программами. Поэтому ТВ программы будут храниться на одном диске и занимать только то место, которое надо, а фотографии будут скопированны на другие диски. И так как это не RAID, любой диск можно вынять и вставить в Windows компьютер и он его поймет.

    С уважением,
    Рустам.

    • centur:

      А Mesh теперь разрешает MS Money ? в старом варианте (до того как он стал Windows Live частью) файлы от Money были запрещены

      • Здраствуйте,

        Я просто переименовал .mny в .money и ассоциировал MS Money с этим расширением.

        С уважением,
        Рустам.

    • Victor Ronin:

      Да я Mesh видел, но все таки 5GB — это тоьлко для самого-самого критического.

      Одна из моих особенности что рабочий комп и домашний комп у меня один и тот же notebook.

  12. Anatoly Popov:

    Это про домашний комп или рабочие системы? Методики то разные.

    • Victor Ronin:

      Для меня это одно и тоже. Собственно notebook на котором все лежит.

      • Anatoly Popov:

        Не совсем. Я неверно выразился. «Домашний комп» или «1 клиентская машина» бэкапится по принципу «раз в день мы скидываем критичные данные в дропбокс\ещё куда-то».

        А рабочие машины, сервера, их имеет смысл бэкапить полностью, образами, с софтом, ос и т.д.

        имхо.

  13. Guest:

    использую Windows Home Server.

    можно ставить в него диски произвольного размера, данные хранятся на шарингах, для каждого шаринга можно указать дублировать его или нет, это не райд а некое упрощенное подобие, система сама распределяет данные по дискам, что нужно дублирует, что не нужно — нет.

    плюс к этому может бекапить до 10ти рабочих станций (XP и выше), полностью образ системы и последующую побитную разницу через заданный период. при проблемах с рабочей станцией можно загрузится со специального компакт диска и восстановить забекапленый образ системы. Так же можно получить доступ к отдельным файлам бекапа рабочей станции.

    сам сервер тоже имеет механизм бекапа, один из добавленых дисков можно пометить как «для бекапа» и туда по заданному графику делать копии выбранных шарингов и бекапов рабочих станций.

    например может быть два внешних диска, один находится off-site или в несгораемом сейфе, а второй подключен к серверу. переодически менять их местами.

    В случае проблем с сервером, даже не имея бекапных дисков, к данным можно получить доступ вставив диски сервера в любой виндовс компьютер, могут быть разбросаны по дискам, но структура папок сохранена. Бекапные диски соответственно будут иметь просто копию данных без разброса.

    сервер имеет функционал удаленного доступа к самому серверу и к рабочим станциям находящимся рядом с ним по https. серверу может быть присвоено имя.homeserver.com с валидным ssl сертификатом.

    Windows Home Server сам по себе это Windows Server 2003 c дополнительным функционалом и упрощенным управлением. может работать на компьютере класса п3 если завалялся или атома на файлшаринг и бекапы ему хватит за глаза. у меня стоит на п4

    есть add-in-ы для добавления новых функций. если по теме, то например оффсайт бекапа на амазон и прочих.
    стриминг, шаринг фоток бабушкам тоже можно сделать.

    К концу года должна быть новая версия (codename VAIL), там есть кое какие изменения, как например новая файловая система (т.е. уже не будет так просто забрать данные подключив диск к любому компьютеру), встроенный стриминг медиа контента. он уже будет на базе Windows Server 2008 64bit, что поднимает планку требований к железу.

    сама ос, если покупать отдельно обойдется что-то в пределах 100-150 USD

    есть готовые варианты от HP, Asus, Tranquilpc, Acer и др. они все думаны как headless и некоторые не имеют разъема для подключения монитора, что меня как пользователя более продвинутого немного отпугивает из-за сложности траблшутинга, если с сервером что-то произойдет. как плюс у них как правило более компактные и заточенные под NAS корпуса.

    • Victor Ronin:

      понял. хотя вариант достаточно уже дорогой выходит. собственно говоря, это уже полноценная машина с несколькими винтами.

  14. Deniska:

    Для рабочих файлов изобрёл велосипедину для настоящих скряг:
    Тщательно отбираются файлы, подлежащие ежедневному бэкапу (по маскам). В итоге один бэкап занимает порядка 50 метров, который ежедневно скидываю на флешку (храню на ней только последние 3 бэкапа, которые периодически скидываю на домашний винт), и на рабочий винт. Как на рабочем винте набирается 3 гига — прореживаю (оставляю каждый 5-й бэкап) и скидываю на CD. Последние CD с бэкапами постоянно ношу с собой, старые складирую. С рабочего винта удаляю.

    И таки да, не ленюсь периодически вручную вычищать спам из почтовой базы.

    Фотки эпизодически скидываю на DVD.
    С видео пока не знаю, что делать. Больно здоровые.

  15. timt:

    Критически важные данные, коих не так уж и много, держаться на большой шифрованной на уровне устройства флэшке, которая периодически и часто бэкапируется на винт рабочей системы в шифрованный же архив — это на случай случайного удаления файла. Эти копии периодически, но реже, сливаются на DVD, которые а) уносятся на работу, б) отдаются родственнику в сейф. Пароль от архивов лежит у _другого_ родственника на бумажке.

    Всякое же полезное, но не критически важное можно таки хранить на RAID’овых (RAID1 aka mirroring) дисках по схеме один дома, один в хранилище и ротировать. Благодоря использованию RAID’а не нужен никакой дополнительный софт, а копия всегда готова к использованию. Но диски хорошо бы шифровать на уровне всего диска.

  16. 1. Time Machine
    2. Фотографии дополнительно еженедельно копируются на отдельный RAID1 NAS
    3. Особо важные данные хранятся также и в облаке

  17. У меня много информации, при потерей которой я расстроюсь.
    Но нет такой, потеря которой было бы трагедией.
    Нельзя привязываться к информации, равно как и к вещам.
    Зачем тебе этот багаж терабайтов к старости?

    • Victor Ronin:

      Тю, так о трагедии никто и не говорит. Собственно у меня 1/3 (хотя не слишком важная) грохнулась и ничего — день лоб поморщил.

      Но вот, информации которую неприятно было бы потерять вполне таки прилично.
      — фотографии
      — бухгалтерия
      — контакты людей
      — наработки
      и т.п.

  18. Есть еще сервис adrive. Юез денег дают 50GB.
    Но как они они эо все хранят непонятно, да и вообще инфы по ним как-то меньше чем хотелось бы.

    На бессплатном аккауте закачка по http (без «s»), так что паролить надо все еще на своей стороне.

  19. Владимир Железняк:

    Дважды в день автобэкап (винрар по расписанию + ActiveSync на мобильник) изменившихся файлов по маске.
    Фотки (их не очень много) — в SkyDrive. Неудобно хочу отказываться.Видео — пока никак.
    Пахнет винтом в банковской ячейке (ячейка уже есть) и ручной синхронизацией раз в пару месяцев для фоток/видео.

    PS: не дружит этот блог с LJ OpenID + Chrome.

    • Victor Ronin:

      Дважды в день — это серьезно.

      Насчет банковской ячейки, возни получается много — пойти забрать винт, забекапиться, вернуть на место.

      Насчет недружбы — погляжу, как время образуется.

  20. xkip:

    RAID 2 (1Gb) внешний, на несколких компах у родственников и друзей, синкается через LiveSync, видео, музыка, фото, в разных городах. Да, первый раз с новым мембером будет месяц синкаться, потом не замечаешь.

  21. AYA:

    Из онлайн бэкапов интересны упомянутый здесь backblaze.com, http://www.mozy.com и рекомендую http://www.crashplan.com

    Последний помимо онлайн бэкапа умеет делать бэкап на любую другую машину (в т.ч. и удаленно находящуюся) и имеет «семейный» план который очень выгоден по сравнению с другими онлайн-сервисами. Ну и неограниченное место, да.

    • Victor Ronin:

      Не знаю. Пока у online back’ов много недостатков.

      а) Выгрузить скажем 50Gb (что не так уж много) по обычному каналу достаточно долгое занятие.
      б) Не понятно, что у них там с шифрованием, так что шифровать надо у себя
      в) Не понятно, что у них там с физическим распределением
      г) А что будет если их фирма разориться?

  22. Young:

    Люди, а можно я расширю вопрос — вот тут все советуют онлайн системы для бекапов, но как вы ими польщуетесь?

    Вот dropbox — все хорошо, вот думаю сейчас рабочую папку туда сделаю ссылку и все будет бэкапиться.
    Но блин это медленно! При старте системы он минут 15-20 просто тупо грузит винт индексаций. И там файлов то пока мало, ну ну 100к максимум. Что будет если туда более менее реальный проект залить (основанный например на исходинках андроида) и страшно подумать.

    Если делать самому архивы и туда пихать то смысл инкрементированного бекапа пропадает, плюс чтобы откататься к предыдушей версии файла придеться качать весь архив — т.е. смысл теряеться.
    Делать диск в файл — потеря скорости, и опять же фиг откатишься к предыдшей версии файла.

    Онлайн сервисы к сожалению в реальных условиях не работают у меня 🙁

    • Pecha:

      Я там выше уже писал, что юзаю VisualSVN (это если под виндой) и что саму папку Repositories, которую использует VisualSVN синкую с Dropbox.

      Если используешь Subversion или еще какую-нибудь систему хранения исходников, то синковать можно саму папку где система хранит данные все, обычно данные эти будут уже сжаты.

      Канал у меня 100 мегабит и никаких тормозов я не наблюдал 🙂

  23. AYA:

    Young, ну тут может от каналов зависит? 😉 У меня где-то 10Мбит, в crashplan я закачал порядка 200 гиг (ну сколько надо было :)) — но при этом он больше 2-3Мбит upload редко когда использовал.

    А в остальном — просто пользуюсь, стоит фоном, бэкапит изменения, хранит историю версий (самое классное), лепота.

    • Young:

      Не, я не о каналах, я о работе с диском. Локальным. 200 гиг это сколько файлов? Вот у меня например рабочий проект — всего 6 гигов но порядка 2.5кк файлов. Так вот дроббокс просто тупо затыкаеться на таком количестве файлов.
      Ему же по любом нужно их все пробежать при старте, а это минут 40 нагрузки винта.
      Хотя git например справляетья в разы быстрее.

      Ждать при старте системы 40 минут пока будет возможность нормально работать и качать изменения как-то не кайфово.

      Хотя причины я понимаю.

      Кстати, crashplan как работае с сим и хардлинками под маком и виндой, если в его бекапной директории будет линк на другу папку он нормально это воспримет?

  24. Young:

    Посмотрел все эти онлайн сервисы — пользоваться ими как полноценным инкрементным бекапом рабочей папки нельзя.
    Все потому что они сами определяют когда удалить старые версии файлов, и в прекрасный момент может оказаться что откатиться к старой версии файлы ты не можешь 🙁

  25. AYA:

    > Кстати, crashplan как работае с сим и хардлинками под маком и виндой, если в его бекапной директории будет линк на другу папку он нормально это воспримет?

    я бэкапил симлинки на другие папки в сети — он их видит, бэкапит. Deduplication у него встроенный, поэтому дважды он их не бэкапит (или если скажем файл перекинул на другой диск/папку)

    > Все потому что они сами определяют когда удалить старые версии файлов, и в прекрасный момент может оказаться что откатиться к старой версии файлы ты не можешь

    Это не понял. CrashPlan чем хорош (вроде в Mozy так же, BlackBaze не знаю) — он ВООБЩЕ не удаляет файлы, т.е. удалили файл — он всё равно остается в бэкапе, ну и история версий есть конечно, можно восстановить файл за любую дату. Там просто бесплатная версия вроде раз в сутки (или Х часов, не помню) архивирует автоматом (можно вручную как угодно часто), а платная — постоянно мониторит и архивирует.
    (ну удалить файл из бэкапа можно конечно — надо снять галку «делать бэкап» с него/папки и запустить maintenance бэкапа :))

    У них правда эта версия старовата, от марта, скоро вот-вот обещают новую, с массой изменений. Эта немного своеобразно по интерфейсу, ну тут надо учесть, что они типа на простых пользователей ориентируются и постоянно на грани между «сложный интерфейс» и «простота использования», поэтому некоторые вещи неочевидны (типа «как удалить файл и все его копии изменений из бэкапа»)

    Проще скачать и попробовать, тем более что он бесплатный 😉 А бэкап им что локальный (в папку скажем), что на online storage выглядит одинаково 🙂

  26. Антон:

    Бэкаплю банально с tar’ом. На серверах каждую ночь из крона вызывается тар и пакует данные на предоставленный компанией удалённый сервер самба. Туда же и база отдельными таблицами, но с шифрованием публичным ключом. Время от времени забираю это богатство rsync’ом. Локалку тоже таром. Пока не подводило.