Каковы варианты резервного копирования для ленивого, но параноидального пользователя dSLR?

Мой основной компьютер — ноутбук, поэтому место на диске в большом почете. Я делал фотографии в формате RAW в течение 18 месяцев, и теперь меня беспокоит место на диске. Какие у меня есть варианты резервного копирования моих файлов? Запись всей партии на DVD кажется трудоемким процессом. У меня был неудачный опыт с внешними жесткими дисками. Есть ли другие варианты, которые мне не хватает?

  • Запись всей партии на DVD кажется трудоемкой и неудобной.
  • Внешние жесткие диски выглядят разумным вариантом, но у меня была одна поломка, поэтому я не хочу, чтобы моя единственная резервная копия была на одном диске. Два внешних жестких диска?
  • Онлайн-резервное копирование кажется возможным, но я полагаю, что хранить ~ 40 ГБ+ фотографий будет дорого.

Есть ли другие варианты, которые мне не хватает? Какой совет вы можете дать мне в отношении трех вышеперечисленных категорий, как действовать дальше?

[изменить: идеальное решение было бы с открытым исходным кодом и изначально работало в Linux]

Это хороший вопрос в целом, но я не думаю, что он относится конкретно к фотографии. Как правило, у нас есть большие объемы невоспроизводимых данных, но с точки зрения резервного копирования я не думаю, что в этом есть что-то уникальное. Этот вопрос был бы лучше для superuser.com или, учитывая ваше редактирование, для unix.stackexchange.com .
Какова емкость вашего текущего жесткого диска и сколько места используется?
Также актуально: photo.stackexchange.com/questions/292/…
если вы используете внешний жесткий диск, обязательно обратите внимание на что-то автоматическое, например Syncback!
С внешними жесткими дисками вы можете купить носители, которые будут принимать два необработанных диска (без корпусов) и подключаться к компьютеру через USB. Вы подключаете два диска, rsync или копируете изображения на один, а затем дублируете первый внешний на второй. Храните HD-диски в упаковке, в которой они были доставлены, один за пределами площадки.
2 жестких диска, один локальный и один внешний. Я договорился с другом. Каждый из нас купил по одному внешнему жесткому диску. Мы еженедельно делаем резервную копию наших данных на одном жестком диске, а на следующей неделе мы меняем диски, поэтому все мои данные копируются на 2 разных диска, один у меня дома, другой вдали (да, одна резервная копия существует между 7-14 днями). Если вы беспокоитесь о конфиденциальности, вы можете зашифровать свой раздел, чтобы ваш друг не мог видеть ваши данные.

Ответы (17)

У вас должно быть локальное решение (простое, быстрое и дешевое), а также внешнее хранилище (если что-то случится с вашим домом (наводнение, пожар, ограбление), вы потеряете все).

Решение на месте простое. Как уже говорилось, лучше всего использовать внешние диски, тогда у вас будет множество приложений, которые помогут вам синхронизировать их. Избегайте ручного резервного копирования, так как в конечном итоге вы забудете об этом и поймете, когда вам нужно будет восстановить файлы.

За внешним решением я отправился на Amazon S3 . Он чрезвычайно надежен и довольно дешев. Проверьте их цены . в конце концов, эта небольшая плата не поможет защитить ваши самые важные файлы. Из их калькулятора ежемесячной платы хранение 40 ГБ будет стоить около 5 долларов в месяц. Вам также придется платить еще меньшую комиссию за переводы (загрузка ГБ стоит 0,10 $).

Это будет эквивалентно бутерброду в месяц, чтобы ваши файлы были в безопасности и всегда были доступны в случае проблем с вашим ноутбуком и локальным хранилищем.

Мне также нравится Carbonite.com. 59 долларов в год, неограниченное пространство... но это на один компьютер, а не на сетевые диски. Для одного компьютера... это работает хорошо для меня. Также вы можете получить удаленный доступ к файлам через их веб-приложение или приложения для мобильных телефонов... в конце +1 к LudoMC... вам нужно на сайте и за его пределами.

Я бы сказал, что внешний жесткий диск и онлайн-резервное копирование — единственные реалистичные варианты:

  • Внешний жесткий диск — самое дешевое решение; обратите внимание, что даже если внешний жесткий диск сломается, у вас все равно будет копия данных на вашем компьютере (стоит около 50 долларов за диск емкостью 500 ГБ).

  • Онлайн-резервное копирование — самое безопасное, но самое дорогое решение

    • Dropbox: 9,99 долл. США/50 ГБ/месяц или 19,99 долл. США/100 ГБ/месяц (т . е. 20 центов/ГБ/месяц ), автоматическая добавочная синхронизация; см . особенности .

    • Amazon S3 : начиная с; хранение: 14 центов/ГБ/месяц , загрузка: 10 центов/ГБ , загрузка: 15 центов/ГБ . Синхронизация должна выполняться пользователем; нет встроенной функции синхронизации.

Мой совет — использовать внешний жесткий диск; он окупается за полгода, если в противном случае вы использовали бы Dropbox. Ваш предыдущий неудачный опыт, вероятно, обусловлен случайностью.

В качестве примечания вы можете изучить RAID , хотя настройка массива RAID довольно сложна и возможна только в том случае, если на вашем ноутбуке есть второй отсек для дисков.


Если вам не хватает места на жестком диске вашего ноутбука, я бы порекомендовал купить жесткий диск большего размера для вашего ноутбука, а затем использовать жесткий диск вашего ноутбука в качестве резервного диска. Вы можете купить корпус для резервного диска примерно за 20 долларов. Процесс переноса данных и самих дисков довольно прост, но потребует некоторых технических знаний, помощь с которыми вы можете найти на сайте superuser.com .

Если вы не хотите возиться с дисками, вам придется либо купить два внешних жестких диска, либо использовать онлайн-сервис резервного копирования, такой как Dropbox.

Дело в том, что, поскольку место на жестком диске ограничено, я бы удалил оригиналы со своего ноутбука, чтобы резервная копия была фактически единственной копией файлов. Вот почему я беспокоюсь о провале HD.
Если ваши данные ценны, используйте оба из них. Локальная копия удобна и защищает вас на случай, если онлайн-сервис внезапно выйдет из строя. А онлайн-копия защитит вас как от сбоя диска, так и от более трагических сценариев. (Предыдущий опыт, вероятно , был случайностью, но это тот случай, который на самом деле неизбежен и его стоит планировать.)
Доступны огнестойкие корпуса, а также по крайней мере один огнестойкий сейф, который я нашел с USB-кабелем, который позволяет подключать USB-накопитель изнутри сейфа. Таким образом, если онлайн не подходит из-за текущих затрат, один из них может добавить некоторую дополнительную безопасность для более локального решения.
Ха, интересно. Конечно, улавливая все тепло, вы увеличиваете вероятность отказа обычного диска. Не могу победить. :)
Что ж, для небольших дисков, питающихся от USB, наверное, это не проблема. Конечно, по мере того, как твердотельные накопители становятся больше и дешевле, я думаю, что это становится еще меньшей проблемой. Техника совершенствуется. :)
@Seamus: я отредактировал свой ответ в соответствии с вашим комментарием.
Я хотел бы указать на распространенную поговорку «RAID не является резервной копией». Даже внешний жесткий диск гораздо лучше подходит для резервного копирования, потому что его можно настроить так, чтобы он был более безопасным (например, если вы или вирус случайно удалили файл, он может сохранить копию), и он не подвержен аппаратным сбоям, таким как отказ источника питания. аппаратные компоненты. Тем не менее, онлайн-резервное копирование лучше всего, потому что оно защищает от таких катастроф, как пожары. Я не могу позволить себе настоящую резервную копию в Интернете, но я размещаю jpeg-копии своих любимых фотографий где-то в Интернете.
Я думаю, что этот ответ можно было бы улучшить, указав на преимущества использования Dropbox. Например, файлы синхронизируются между несколькими компьютерами, а также в сети (поэтому, если позволяет ваша работа, установите Dropbox на свой рабочий компьютер, и все ваши фотографии будут сохранены там). Вы также можете получить доступ к своим фотографиям в любом месте, и это отлично подходит для быстрых фотоальбомов — просто сбрасывайте файлы в папку с фотографиями. Мне кажется, сравнение внешнего жесткого диска и Dropbox в долларах несправедливо. (Я не работаю в Dropbox, но я плачу за 50 ГБ и использую их для резервного копирования/синхронизации всех моих файлов RAW и моего каталога Lightroom.
@Chris: Спасибо за совет. Однако я хочу, чтобы этот ответ был кратким и беспристрастным, поэтому я упомянул только автоматическую добавочную синхронизацию и предоставил ссылку. Я также включил информацию о ценах и ссылку на Amazon S3, чтобы спрашивающий мог составить собственное мнение.

Два стандартных жестких диска — самое простое и экономичное решение для резервного копирования. Один диск хранится вне офиса на случай, если ваш дом сгорит. Вы можете использовать обычные (и дешевые) внутренние жесткие диски, если на вашем компьютере есть внешние порты SATA. Если у вас есть место для хранения резервного диска на работе, если вы берете его домой один вечер, две недели вполне подойдут.

Каждые 12–18 месяцев заменяйте диски новыми вдвое большей емкости, чтобы не отставать от растущей коллекции фотографий.

Этот метод отлично работает под Linux с небольшим количеством сценариев оболочки!

+1, это тоже мое решение. Я использую Унисон
Я не знаком с Unison, но я проверю его самостоятельно — по разным причинам, связанным с ОКР, мне нравится полностью контролировать свое решение для резервного копирования, поэтому я предпочитаю писать собственное программное обеспечение в дополнение к владению оборудованием. К счастью, написать скрипт для синхронизации с файлами не так уж сложно!
У меня есть сценарий для этого; см. reidster.net/software , если вам интересно.
rsnapshot — еще одно хорошее решение, это оболочка вокруг rsync.

Как и другие здесь, я верю в уровни защиты своих данных.

  1. RAID — это не резервное копирование, но снижает риск сбоя устройства и потери всех моих данных.
  2. Съемный жесткий диск, локальная резервная копия (2 ТБ)
  3. Удаленное резервное копирование в CrashPlan (3 доллара в месяц за неограниченное хранилище — сейчас у меня есть резервная копия около 140 ГБ данных)

В какой-то момент я планирую увеличить 3, используя возможность CrashPlan для резервного копирования на компьютер друга, на котором также работает CrashPlan.

Две вещи, которые, я думаю, делают CrashPlan достойным внимания, помимо низкой стоимости. Они отправят вам пустой диск (один ТБ ISTR) для выполнения первоначального резервного копирования, чтобы избежать необходимости делать это первое резервное копирование через Интернет. Затем они отправят диск с вашими резервными копиями, чтобы вы могли быстрее восстановиться.

RAID без надлежащего RAID-контроллера полезен только для ускорения системы. Программный RAID небезопасен и приводит к приятным ошибкам.
@Leonidas - Аппаратные рейд-контроллеры также содержат программное обеспечение, и они не безошибочны. С рейдом на уровне ОС у вас по крайней мере есть несколько вариантов, когда что-то пойдет не так.
@ Леонидас - ссылки? Я уже много лет без проблем запускаю программные RAID-массивы на несколько ТБ. Действительно, у меня было больше ошибок с аппаратными RAID-контроллерами.
Ссылка? Как ваше неподтвержденное свидетельство, моя неподтвержденная ссылка плюс знание, что SW-RAID внезапно включает процессор, основную память и шину, а не только выделенный контроллер и жесткий диск. Простой расчет MTBF + закон Мерфи.
@Leonidas, этот выделенный контроллер добавляет процессор, память и т. д. Действительно, вы добавили сложности и потенциально повысили вероятность сбоя . Я думаю, что Мерфи на моей стороне в этом вопросе ;) Конечно, если у вас есть что-то, на что вы можете мне указать, мне интересен ваш опыт, хотя я бы посоветовал, чтобы это лучше воспринималось как SuperUser / SeverFault. чем здесь.

На данный момент я не считаю онлайн-резервное копирование реалистичным вариантом. экономической эффективности для больших коллекций нет. Если вы остановитесь и посмотрите, сколько времени потребуется на восстановление после катастрофического сбоя, временной аспект сейчас убивает. Возможно когда-нибудь.

жесткий диск — ваш единственный реальный вариант, и он экономически эффективен. Несколько копий и внешнее хранилище — ваши лучшие варианты.

Я писал об этом -- см.:

http://www.chuqui.com/2009/11/more-than-you-wanted-to-know-about-backups/

http://www.chuqui.com/2009/11/some-more-thoughts-on-backups/

http://www.chuqui.com/2009/12/following-my-own-advice-on-backups/

http://www.chuqui.com/2010/03/what-to-do-when-you-realize-youre-running-out-of-disk/

в последнем рассказывается о конкретной ситуации — сидите за ноутбуком и понимаете, что у вас заканчивается диск, и что я с этим делал. Защитить себя от серьезной потери данных несложно, но это означает, что нужно серьезно заняться чем-то и выработать привычки и рабочий процесс, которые помогут это осуществить. легко облениться и позволить этому скользить, а затем понять, что у вас есть дыры в резервных копиях именно тогда, когда они вам нужны...

Стоит взглянуть на CrashPlan — они отправят вам диск (даже с доставкой на следующий день) с вашей резервной копией, чтобы вы могли быстрее восстановиться.
+1, работа с полунадежными (см. Wikileaks) поставщиками онлайн-хранилищ через не обязательно существующие соединения без реальных возможностей для правильного шифрования (возможно, частных изображений) вообще не является реальной стратегией резервного копирования. Некоторые дублированные HD с хорошим TrueCrypt всегда поместятся в банковском хранилище и в доме ваших родителей.

У меня была точно такая же проблема, но с более чем 100 ГБ фотографий. Раньше я хранил резервную копию на внешнем жестком диске, но после пожарной тревоги я понял, что хочу резервную копию за пределами площадки. Я настроил сервер в другом месте и теперь синхронизирую фотографии. Все мои машины работают под управлением Linux - пока все работает хорошо.

Давайте признаем тот факт, что вещи терпят неудачу, и если вы действительно хотите, чтобы фотография сохранялась вечно, то печать — единственный вариант, и это еще одна дискуссия о том, какой тип печати длится!

В ближайщем будущем

Если вы хотите создать собственное решение, я бы предложил одно из следующих:

Либо

  • 1x ПК White Box с двухъядерным процессором и 2 ГБ ОЗУ или выше
  • 1x500+Gb HDD для основной ОС
  • Несколько жестких дисков 1xTB для хранилища данных

Теперь вы можете установить GNU/Linux (или FreeNAS ) на основной жесткий диск, а затем использовать ZFS (через предохранитель при использовании GNU/Linux) для настройки другого жесткого диска в ZFS Raid . Это дает избыточность и гарантирует, что ваши фотографии защищены от битрота , и является наиболее надежным решением с учетом современных технологий и опций.

ИЛИ ЖЕ

Thecus NAS, который позаботится об этом за вас и избавит вас от головной боли, связанной с сборкой собственного ПК .

Мы не будем беспокоиться о производительности, поскольку нас больше интересует обеспечение надежности данных в краткосрочной перспективе.

После того, как у вас есть это, вам теперь нужен способ получить эти данные на месте для дополнительного плана избыточности. По сути, это сводится к использованию любого из следующего:

  • Воспроизведите вышеупомянутую настройку и синхронизируйте через Интернет (конечно, используя VPN!)
  • Используйте внешний жесткий диск меньшего размера (с зеркальными дисками для резервирования) для репликации и ротации внешнего хранилища.
  • Используйте Blueray DVD для записи вашего каталога и хранения его вне сайта. Не забывайте всегда делать полный прожиг, так как срок службы этого носителя, вероятно, составляет около 2-5 лет.

Долгосрочный

У меня нет реального ответа здесь, и это то, о чем я беспокоюсь сам. Это проблема цифровой эпохи. Смогу ли я через 25 лет получить доступ к своим данным или даже прочитать свои данные?

У меня нет плана на этот счет, и я в основном слепо верю, что голографическое хранилище будет доступно до конца моей жизни, поскольку все магнитные / оптические носители информации уязвимы для элементов определенного периода времени.

Это звучит как очень параноидальное решение. Я также не понимаю, почему вы беспокоитесь о том, что произойдет через 25 лет; зеркальный RAID-массив может обеспечить сохранность ваших данных на неопределенный срок.
@Josh - я думаю, только если у вас есть высококачественные продукты, которые могут очищать ваши данные, чтобы обеспечить совпадение контрольных сумм. Я считаю, что Raid 6 не защитит от битрота, но я рад, что ошибся!
В долгосрочной перспективе важны биты, а не медиа. Копируйте данные на новые носители каждые несколько лет, и все будет в порядке.
Вероятно, мы сейчас отклоняемся от темы, но запись данных каждые x месяцев/лет не решит проблему с битротом. Raid 6 также может справиться с потерей секторов для записи, но не с поврежденными битами в байте, я верю, что он с радостью воспроизведет это в любой сектор, который также может быть успешно записан / чередован.

Хотя внешнее хранилище может быть хорошим решением, оно по-прежнему является внутренним, и если что-то случится, вы все равно потеряете все (имея два диска и сохраняя их разделенными, по-прежнему требуется больше работы).

Я принял решение изучить онлайн-провайдеров резервного копирования. Мне не нужна была синхронизация, поэтому в целом немного дешевле (большие пакеты).

Если это только для домашнего использования, я могу порекомендовать MozyHome. Это будет стоить 4,99 доллара в месяц за неограниченное хранилище (сейчас я использую ~ 80 ГБ).

Если вы выберете решение для резервного копирования, сообщите нам об этом, все всегда ищут лучшее.

С уважением,

Матиас Вэнс

Я рассмотрел этот вопрос некоторое время назад и решил использовать внешнее хранилище с локальной копией для удобства. У меня есть полный пост об этом в моем блоге , но, перефразируя, мое решение было следующим:

  1. Делайте много снимков
  2. Импортируйте изображения в каталог Lightroom под названием «Оригиналы».
  3. В Lightroom используйте функцию публикации, чтобы загружать оригиналы прямо из снимков камеры в SmugMug, который имеет неограниченный размер хранилища файлов и размещен на серверах Amazon S3.
  4. Импортируйте и редактируйте фотографии в каталоге Lightroom под названием «Рабочие».

Хотя у меня все локально, у меня также есть оригиналы (в формате JPG), хранящиеся на SmugMug. Для действительно отличных фотографий я храню файлы RAW в формате DNG на своем сайте JungleDisk (также размещенном на серверах Amazon S3).

Все это можно легко сделать, используя инструменты с открытым исходным кодом или просто веб-порталы для SmugMug и JungleDisk. Я разместил файлы за пределами сайта на случай, если случится что-то действительно плохое, а также сделал доступными без «моего компьютера» на случай, если он выйдет из строя.

Мое решение — использовать Apple Time Machine, таким образом мне не нужно ничего настраивать, и резервная копия актуальна. Когда я импортирую файлы RAW на свой Mac, Time Machine создает их мгновенные копии. Tine Machine — это дифференциальная (или инкрементальная) резервная копия, поэтому она сохраняет только новые данные.

Уже хорошо, но недостаточно. Если в вашем доме возникнет проблема (ограбление, пожар...), вы потеряете все.

Вы путаете резервные копии и простое расширение памяти:

Вам потребуется как минимум две копии каждого файла на отдельных устройствах, чтобы иметь так называемую резервную копию. Я бы порекомендовал внешний HDD для этого. Ваш предыдущий опыт с внешним HDD только подтверждает, насколько это необходимо - внутренние жесткие диски технически ничем не отличаются от внешних, поэтому ваш внутренний может точно так же выйти из строя.

Кроме того, если у вас слишком мало памяти на внутреннем жестком диске, вам понадобятся два внешних.

Резервное копирование — это одна из тех вещей, где у каждого своя стратегия. Для меня запись DVD больше не вариант, потому что он слишком мал (может быть, если бы у меня был Blu-ray), поэтому в настоящее время у меня есть гибрид двух других вариантов:

  1. Внешние диски: автоматическое резервное копирование фотографий на внешние диски, и я планирую создать дома небольшой NAS/сервер резервного копирования, чтобы расширить это.
  2. Интернет-хранилище: регулярно загружайте небольшое количество моих фотографий, обычно те, которые я выбрал для работы, вещи, которые я загрузил на сток или распечатки.

Но каким бы ни был ваш выбор, помните: это должен быть автоматизированный процесс и должно быть несколько копий.

Внешний диск, который немного мощнее и безопаснее, чем один типичный внешний жесткий диск, должен иметь несколько клонированных дисков для избыточности. Они поставляются в виде готовых единиц, таких как эта модель буйвола:

текст ссылки

Также есть отличное бесплатное программное обеспечение для автоматизации копирования файлов/папок в несколько мест. Я использую его на фермах веб-серверов, и он никогда меня не подводил. Вот ссылка: текст ссылки

USB-накопители + Carbonite.com

Прежде всего: молодец, что задал очень важный и (к сожалению) редко задаваемый вопрос!

Я использую Карбонит .
Неограниченное резервное копирование с одного ПК стоит около 5 фунтов стерлингов в месяц.
Единственным недостатком является то, сколько времени требуется для первоначальной загрузки. После этого все в порядке.

В сочетании с этим у меня есть 2 USB-накопителя по 500 ГБ.
Я держу один в своем рабочем офисе и меняю его всякий раз, когда делаю резервную копию.

На самом деле вам нужно решить три проблемы:

1) Недостаток места на ноутбуке для хранения всех изображений

2) Бэкап всех образов

3) Внешнее хранение всех изображений

Так что я бы посоветовал пару внешних жестких дисков и огнеупорный сейф.

Храните на ноутбуке данные за 3 месяца (или любой другой удобный для вас период, в зависимости от количества имеющихся у вас данных) и при необходимости синхронизируйте их с внешним жестким диском. Я использую rsnapshot , но есть и другие подобные решения, позволяющие делать это автоматически. Теперь у вас есть 2 копии самых последних данных и 1 копия исторических данных.

Теперь примерно раз в неделю меняйте внешний диск на диск в сейфе. Теперь у вас есть 2 копии исторических данных и 2 копии последних данных. Единственные данные, которым угрожает опасность, — это любые данные, созданные после последней замены, и они подвержены риску пожара или кражи. Вы можете изменить частоту подкачки (или убедиться, что каждый раз, когда вы делаете снимки, вы копируете их на оба диска), если это действительно вас беспокоит.

Общая стоимость этого может быть очень разумной - у Costco есть несколько небольших сейфов с рейтингом огня и воды менее чем за 100 долларов.

Похоже, ваши интересы только что пересеклись со Slashdot:

http://ask.slashdot.org/story/11/07/20/0121248/Ask-Slashdot-Best-Offline-Storage-Method-For-Large-Archives

Обратите внимание на ответы.

Пожалуйста, прочтите это относительно резервного копирования в Интернете - в зависимости от вашего интернет-провайдера, вы можете пожалеть об этом. Именно это случилось с фотографом, который использовал Carbonite для своих резервных копий: Политика ограничения данных Day Comcast убила мой Интернет на один год.

Лично я использую digikam для организации своих фотографий на Gentoo Linux, я использую возможность синхронизации файлового менеджера Krusader для легкой синхронизации следующим образом:

  1. Импортирую фото с карты в дигикам коллекцию через дигикам.
  2. После завершения импорта, прежде чем вносить какие-либо изменения, я использую ранее определенный профиль синхронизации в Krusader для синхронизации резервного внешнего жесткого диска, который всегда подключен. В идеале этот диск не следует оставлять прикрепленным, так как в этом случае он будет изнашиваться с той же скоростью, что и исходный диск.
  3. У меня есть портативный жесткий диск, который я обычно держу на работе. Через равные промежутки времени я беру его домой и синхронизирую так же, как описано выше. В этот момент и только в этот момент я удаляю оригиналы с SD-карты.
  4. Я держу отдельный диджикам-альбом для любых фотографий, которые хочу подправить, я никогда не трогаю оригиналы, за исключением случаев удаления снимков, которые считаю непригодными. Я пытаюсь сделать это в камере, прежде чем импортировать. Вся идея состоит в том, чтобы предотвратить единственную точку отказа или двойной отказ, который может уничтожить ваши данные.

Таким образом, я бы посоветовал изучить Krusader, особенно если вы используете KDE.