Návod: Jak zálohovat fotografie na pevné disky

K tomuto článku mě přivedla dlouhá, bolestná cesta testování, zkoušení a laborování, slepých uliček a krachů. Najdete tady návod, jak mít fotografie vždy k dispozici a jak je mít spolehlivě zálohovány. Samozřejmě lze tento postup použít pro zálohování i jiných digitálních dat.

Celý systém a postup zálohování fotografií v digitální podobě jsem nejdříve vyzkoušel, nastavil, používal 5 let a teprve teď jsem si troufnul vám nabídnout postup pro zálohování fotografií.

***Než vstoupíte do článku, přijměte prosím informaci, že jsem nechtěl na tomto místě zatěžovat všemi detaily ohledně různých zálohovacích médií, nastavení, popisy typů a výhod RAIDů, uvádění statistik a porovnávání chybovostí médií, apod. Prostě jsem chtěl napsat stručnou odpověď na jeden z vašich nejčastějších dotazů. A jak vidíte, nestručnější odpověď zabrala několik stránek.

Chrlíme stále více digitálních fotografií, jen málo jich máme zálohovaných

V době filmů nebo diapozitivů tvořilo samotné médium originální data a záloha se rovnala archivaci, mohla být buď ve formě přefocení filmu na jiný film, sken filmu na skeneru nebo vytvoření fotografií z filmu. Bylo to šíleně pracné a drahé a dneska nepředstavitelné.

V digitálním světě, kdy fotografové chrlí 300 miliónů fotografií denně jenom na Facebook (viz můj článek o publikování fotografií na Facebooku tak, aby vám fotografie nezničil) jsme zahlceni také vlastními fotografiemi. A ruku na srdce, kdo máte tu sílu drsně, nekompromisně a denně promazávat? Objem digitálních fotografií tedy výrazně roste. A kardinální zní je: JAK OMEZIT JEJICH ZTRÁTU?

Prošel jsem si cestu od filmu (těch mám plné šuplíky) až po DVD (které jsem po několika letech nepřečetl a jsou straaaaašššššnnnnněěěěě pomalé). 

Cena média není rozhodující

Podle této tabulky je na tom hardisk a DVD médium velice podobně, co rozhoduje je rychlost přístupu k datům (hledat jednu fotografii na 200 DVD discích není vůbec jednoduché, ani rychlé).

Nakonec jsem vymyslel řešení s malým serverem a zálohováním na externí disky.

Rád bych se s vámi podělil o své řešení, které mám zaběhnuté, a zatím  - nechci to zakřiknout - jsem neřešil žádný vážný incident. Dokonce, i disky se všechny točí již mnoho let, 4-6 roků. Mé požadavky se odvíjely od požadavku na zálohu celkového objemu cca 1,5 TB dat s RAW fotografiemi a 1 TB dat vlastních videí, většinou MOV. Celkový počet zálohovaných souborů je 291 000, počet fotoaparátů 79, objektivů 179 (to mi řekl můj Lightroom).

Jaké jsem měl požadavky na zálohy fotografií

Samozřejmě, že v ideálním případě bych si vybrat nějakou metodu zálohování na Cloud (ale stejně bych na to nespoléhal). Dnešní rychlosti internetu jsou takové, že zrovna rychlost připojení není až takový problém. Ale...

Pro zálohy na cloud ale vystupují jiné problémy:

• objem - Yahoo omezilo rozsah cloudového uložiště, Microsoft to očesal také a Google nic takového nemá - má tedy pouze placené služby. Bavíme se tady o požadovaném prostoru řádově 2-3 TB.
• objem dat při úpravě snímku - jelikož například RAW má 20 MB a Lightroom pro jeho úpravu potřebuje mít k dispozici originál, Lightroom si ji nejdříve stáhne k sobě, dekóduje do paměti a pak se přepne do modulu Develop. Znamená to pro každou fotku čekat klidně třeba 4,5 sekundy (teoreticky), a to je problém.

Požadavky pro zálohování fotografií - cena rozhoduje

• Řešení zálohování fotografií mělo být levné - v nejlepší variantě byl měla pořizovací cena být do 10 000 (bez disků)
• Řešení zálohování fotografií musí být snadno spravovatelné/administrovatelné - chtěl jsem legální řešení takové, abych sám (i na dálku přes internet) byl schopen dosáhnout na libovolný soubor/fotografii
• Řešení zálohování fotografií mělo byt snadno opravitelné z hlediska hardwaru a softwaru - jakákoliv část musí být snadno opravitelná nebo vyměnitelná v rámci 12 hodin
• Řešení zálohování fotografií musí být dostupné z internetu

Vybrat si jednoúčelový box pro zálohu? Proč ano/ne.

Nejdříve se mi zalíbilo řešení na míru, takové ty jednoúčelové NAS, které koupíte od 1000 korun výše, ale spíše kolem 4-8 tisíc, dáte do nich prostě dva nebo více disků, nakonfigurujete a pustíte. Umístíte někam do kouta a nestaráte se. Jejich výhody:

• dají se krásně a rychle spravovat přes webové rozhraní,
• nízká spotřeba - umí disky uspávat,
• a jsou docela výkonné.

Já jsem si před 6 lety vybral QNAP model TS-409, který měl uvnitř 4 hot swap sloty na SATA disky. Nakonfiguroval jsem si je tak, že dva disky byly v mirroru - RAID 1 (kdo nevíte, viz tady) a další dva disky volně jen jako uložiště. Krasně to fungovalo. Uložiště jsem používal jako vzdálený disk na síti.

Problém jednoúčelového řešení pro zálohování fotografií:

• malá výkonnost pro rsync (to je taková utilitka pro přenos souborů přes síť, ale s inteligencí, takže se přenáší jen část změněná, nikoliv celý soubor)
• rozšiřování o další disky je omezené - sloty byly jen 4 a dál jsem mohl růst jedině, že jsem prodal straé disky, koupil nové, větší a zaměnil je
• je problém, když dojde k poruše, protože musíte sehnat podobné zařízení (se stejným řadičem), aby jste se k datům dostali

Jak si sestavit vlastní řešení pro ukládání a zálohování fotografií

Finální řešení vykrystalizovalo po zkušenostech. Malý server s pevnými disky a zálohování na externí pevné disky vypadalo přístupně cenově a z pohledu spolehlivosti.

Postupem času, cca dvou let, jsem došel k závěru, že musím změnit výkon NAS. Na dosah mi bylo řešení založené na PC architektuře (měl jsem zbytky jednoho servříku - desku, procesor, paměti) a Linuxu (zdarma a mám ho rád, protože je to modulární open source řešení). Rozhodl jsem se postavit PC s Linuxem, do něj jsem umístil všechny své potřebné disky (a mám je tam stále). Linux NAS běží de-facto nonstop bez výpadků, nemám ho na UPS (měl jsem).

Hardware: PC architektura, deska, procesor nějaký AMD, paměť 8 GB, SATA disky, celkem mám v NAS 5 disků

• 1 disk Linux OPENSUSE
• 2 disky v RAID 1, mirror s nejdůležitějšími fotografiemi a videem
• 1 disk bez RAID
• 1 disk bez RAID

Postup: jak nahrávám fotografie do počítače do katalogu a jak dělám zálohu fotografií

Celé řešení se tak skládá ze serveru s online fotografiemi dostupnými kdykoliv + sadou externích pevných disků, na které zálohuji.

A teď to nejdůležitější - jak to celé funguje, jaký je workflow? Zde popíšu přesné důvody a postup, jak putují fotografie z fotoaparátu, karty, do Katalogu, jak se dostanou na NAS server, na RAID 1 pole, až na zálohu.

• Kartu s fotografiemi vždy vyjmu z fotoaparátu a vložím do čtečky (kvůli rychlosti)
• Čtečka je připojena k pracovní stanici (na stejné gigabitového ethernetové síti jako Linux NAS)
• Fotografie a videa importuji z karty do katalogu Adobe Photoshop Lightroom, jako kopie (COPY), import do Adobe Photopshop Lightroomu provádím pouze kopírováním, aby na kartě vždy zůstaly fotografie uloženy pro případ problému na disku
• Katalog (.lrcat) leží na SSD disku
• Karty po importu založím na spodek stohu SD nebo CF karet, takže na řadu se dostanou za několik měsíců = pořád na nich tedy zůstávají fotografie, které mám v Lightroomu, na NAS a na záloze
• Zálohu katalogu dělám +- průběžně jednou za měsíc, záloha katalogu (.lrcat) leží na stejném serveru NAS na RAID 1, a tedy také na zálohovaných discích
• Fotografie se fyzicky kopírují přímo na server NAS na inkriminované pole RAID1, kde jsou přístupné pro Adobe Photoshop Lightroom pro každodenní vyvolávání fotografií

Postup, jak probíhá zálohování fotografií z NAS serveru na externí disky

Na NAS serveru mám 5 disků, 1 systémový (nezálohuju, protože Linux lze obnovit hravě, ani už nevím, co tam je za verze), 1 disk data, 1 disk data, jedno pole RAID 1 se dvěma disky a nejdůležitějšími fotografiemi a videi. V serveru jsou disky s ostrými fotografiemi, se kterými pracuji, pak existují zálohy těchto fotografií (mimo kancelář) a zálohy záloh fotografií (v bance). Postup zálohy fotografií vypadá takto:

• Disk, kam zálohuji fotografie, vložím do externího USB boxu
• Externí box připojím k NAS serveru
• V NAS serveru spustím zálohu z vnitřního disku pomocí rsync a provedu zálohu fotografií (pouze změny) obsahu diskového pole RAID 1 na externí disk
• To opakuji pro každý interní disk na NAS serveru a zálohu provedu jeho externí záložní disk na USB externím boxu
• Méně častěji donesu disky z banky a udělám zálohu na ně

Tento postup funguje již 5 let. Kdybych ztratil některé fotografie...

• mám cca 4měsíční fotografie na kartách - mám jich požehnaně, takže se tam vždycky něco najde
• fotografie mám na RAID 1
• fotografie mám na záložních discích mimo kancelář
• fotografie mám na záložních discích v bance

Nejkrizovější scénář ztráty fotografií (disků)

Jak je řešen výpadek některého disku

• Výpadek jednoho disku na RAID 1: jelikož nejdůležitější obsah leží na NAS serveru v RAID 1, v případě výpadku některého z disků zůstávají fotografie přístupné na druhém z nich (vadný disk mohu vyměnit za nový a RAID 1 pole obnovit (otázka několika hodin)
• Výpadek obou disků disku na RAID 1: vezmu zálohu ležící mimo server NAS
• Výpadek všeho: vezmu disk ze sejfu z banky
• Ztráta jen některých novějších fotografií - stále mi leží na kartách
• A nakonec i výpadek disku, který je v sejfu, máme problém Hustone!