Montag, 6. April 2015

Datensicherung (Bilder) auf ein NAS mit rsync

Fotos aus dem Urlaub oder wichtige Dokumente will man nicht verlieren, doch an eine Sicherung dieser teilweise nicht wieder beschaffbaren Dateien denken die wenigsten. Ein Backup ist so lange überflüssig, bis eines Tages der Ernstfall eintritt, sei es durch versehentliches Löschen, einen Festplattendefekt oder durch einen Virenbefall. Falls dann keine Sicherung vorhanden ist, sind die meist jahrelang angesammelten Daten für immer verloren.

Vorbelastet durch meinen Beruf ist und war mir dieses Thema schon früh bewusst und wichtig, daher verfolgte ich schon immer das Prinzip, das Daten nur sicher sind, wenn sie mindestens zweimal besser dreimal vorhanden sind.

Um dies verständlicher zu machen, will ich einmal kurz die Arbeitsschritte beschreiben, wie ich Bilder von der SD-Karte lade und diese anschließend auf dem NAS im Archiv landen.

Als Erstes werden die Bilder mit dem schon vorgestellten Script (Wie kommen die Bilder von der Speicherkarte auf den Rechner) von der SD-Karte auf die am Rechner verbundene Festplatte kopiert. Anschließend erfolgt die Bildbearbeitung in darktable. Wenn diese abgeschlossen ist, werden die Bilder mit den nachfolgenden Skripten auf das NAS synchronisiert. Die SD-Karte wird auch dann erst wieder formatiert, wenn alle anderen voll sind und eine “neue” benötigt wird.
Speicherorte
  1. Bilder auf der SD-Karte
  2. USB Disk mit zwei Festplatten im RAID1
  3. NAS mit vier Festplatten im RAID5
  4. Unregelmäßige Sicherung auf eine weitere USB Festplatte die dann auch extern gelagert wird
Dateien auf das NAS synchronisieren
#!/bin/bash 
#Variables
SOURCE=/media/rs/My\ Book/\!Picture_Backup/
DESTINATION=/home/rs/PicturesNAS/
LOG=/media/rs/My\ Book/rsync_logs/rsync.log

#Rotate the rsync log file
sudo mv "$LOG" "/media/rs/My Book/rsync_logs/rsync_`date +%Y_%b_%d_%k:%M:%S`.log"

#Start rsync
rsync --log-file="$LOG" -r -t -h -D -l -P --stats --update --exclude=.DS* --exclude ._* "$SOURCE" "$DESTINATION"

Dateien auf das NAS synchronisieren und lokal gelöschte Dateien ebenfalls auf dem NAS löschen
#!/bin/bash 
#Variables
SOURCE=/media/rs/My\ Book/\!Picture_Backup/
DESTINATION=/home/rs/PicturesNAS/
LOG=/media/rs/My\ Book/rsync_logs/rsync_delete.log

#Rotate the rsync log file
sudo mv "$LOG" "/media/rs/My Book/rsync_logs/rsync_delete_`date +%Y_%b_%d_%k:%M:%S`.log"

#Start rsync with delete, delete files from destination that no longer exists in source
rsync --log-file="$LOG" -r -t -h -D -l -P --delete --stats --update --exclude=.DS* --exclude ._* "$SOURCE" "$DESTINATION"

Freitag, 13. März 2015

AUGEN AUF! - 100 Jahre Leica Fotografie - Vernissage 2015

Mika war schon in den Hamburger Deichtorhallen bei der Ausstellung „AUGEN AUF! - 100 Jahre Leica Fotografie“ gestern waren wir dann auf der Eröffnungsvernissage im Fotografie Forum Frankfurt.

In Frankfurt werden noch bis zum 31. Mai 2015 immer von Dienstag bis Sonntag unter anderem Arbeiten von Nobuyoshi Araki, Jane Evelyn Atwood, Bruno Barbey, René Burri, Henri Cartier-Bresson, Bruce Davidson, Michel Vanden Eeckhoudt, William Eggleston, Ralph Gibson, F. C. Gundlach, Elisabeth Hase, Fred Herzog, Barbara Klemm, Herbert List, Paula Luttringer, Susan Meiselas, Ulrich Mack, Joel Meyerowitz, Paolo Roversi, Jeanloup Sieff, Christer Strömholm, Kai Wiedenhöfer, Paul Wolff und Tom Wood gezeigt. In Summe werden mehr als 200 Fotografien, ergänzt um dokumentarisches Material und Kameramodelle auf zwei Etagen ausgestellt.

An dieser Stelle können wir für die Ausstellung eine Besuchsempfehlung aussprechen, wir gehen sicher auch noch einmal hin. Für alle die auch zufällig in Hamburg waren es gibt auf jeden Fall noch neue Bilder zu sehen.

Weitere Informationen auf der Webseite des Fotografie Forums Frankfurt.
  • Straßenansicht des Fotografie Forums Frankfurt
  • Gut gefülltes Fotografie Forum Frankfurt
  • Komplementärkontrast

Mittwoch, 28. Januar 2015

Bildbearbeitungsrechner zweiter Teil

Hier nun wie angekündigt der Bericht zu dem Aufbau unseres neuen Bildbearbeitungsrechner. Vor dem Zusammenbau stand erst mal das Auspacken auf dem Plan. Die Bestellungen der verschiedenen Komponenten hatten wir auf insgesamt fünf Anbieter verteilt und dank Preisvergleichsportalen trotzt der anfallenden Versandkosten so noch den ein oder anderen Euro sparen können.

Der Zusammenbau verlief ohne größere Probleme und war innerhalb von zwei Stunden erledigt. Als Tipps, insofern ihr auch so einen großen CPU Kühler wie den Thermalright HR-02 Macho Rev.B verbaut kann ich noch mitgeben. Installiert vor der Kühlkörpermontage als erstes die Memory Module andernfalls, ist ein Einbau des Moduls in CPU Nähe so gut wie unmöglich. Als zweiten Tipp kann ich euch mitgeben, dass ihr die zwei ATX 12V Strom Kabel vor dem Einschrauben des Boards in die vorgesehen Buchsen steckt, ansonsten ist ein montieren nur sehr schwer oder mit sehr kleinen und biegsamen Fingern möglich. Ich habe auf jeden Fall, nach einigen Fehlversuchen, das Mainboard nochmals kurz herausgeschraubt und dann war der Aufbau auch schon beendet.

Nach dem alles zusammengesteckt war kommt immer der große Moment des ersten Einschaltens, dabei traten keine Überraschungen auf und die Installation von Ubuntu 14.04 LTS konnte von einem USB-Stick erfolgen. Dank SSD war dies auch keine zeitraubende Angelegenheit und nach circa einer Stunde stand das System inklusiver zurückgesicherter darktable Datenbank und aller notwendigen Programme zum ersten Performancetest zur Verfügung. Ernüchternd stellte ich erst einmal fest, dass darktable die OpenCL Unterstützung verweigerte. Nach einiger Internetrecherche konnte ich das Problem lösen und darktable arbeitet nun wie gewünscht mit Grafikkartenunterstützung.

Wie im letzten Beitrag geschrieben dauerte der Export von 252 Bildern etwas mehr als 16 Stunden, mit dem nun neuen System war diese Aufgabe in 10 Minuten erledigt. Ich bin mehr als zufrieden mit dieser Performancesteigerung.

Auspacken:
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 001
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 002
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 003
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 004
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 005
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 006
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 007
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 008
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 009
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 010
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 011
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 012
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 013
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 014
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 015
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 016
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 017
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 018
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 019
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 020
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 021
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 022
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 023
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 024
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 025
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 026
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 027
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 028
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 029
  • neuer Rechner für die Bildbearbeitung auspacken / new system for image processing unboxing 030
Zusammenbau:
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 001
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 002
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 003
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 004
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 005
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 006
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 007
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 008
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 009
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 010
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 011
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 012
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 013
  • neuer Rechner für die Bildbearbeitung zusammenbau / new system for image processing mounting 014

Mittwoch, 14. Januar 2015

Neuer Rechner primär zur Bildbearbeitung

Im Moment bearbeiten wir unsere Bilder auf einem Laptop mit Intel i7 M620 CPU (2,67 GHz) der mit 8GB RAM und integrierter Grafikkarte sowie einer SSD ausgestattet ist.

Nachdem der letzte Konvertierungsprozess, aus Darktable (RAWs) in JPEGs, von 252 Bildern sage und schreibe 16 Stunden in Anspruch genommen hat, stand die Anschaffung eines neuen Rechners für die Bildbearbeitung ganz weit oben auf der Wunschliste. Wie bei allem steht man nun wieder vor der Qual der Wahl. Nach längerer Recherche und Abwegen der Verschiedenen für und wieder der Einzelteile habe ich mich für die nachfolgenden Komponenten entschieden. Primär soll der Rechner für die Bildbearbeitung verwendet werden aber ebenso noch genügend Performancereserven bieten, um ab und zu ein Spielchen wagen zu können.

Komponentenliste:
*Amazon Affiliate Links

Einen objektiven Vergleich liefern die folgenden Seiten, dort werden die jeweiligen Komponenten direkt gegenübergestellt.
Grafikkartenvergleich:
http://gpuboss.com/
Prozessorenvergleich
http://cpuboss.com/
SSD-Vergleich
http://ssdboss.com/

Hier mal noch ein Beispiel Vergleich der neuen und alten CPU
http://cpuboss.com/cpus/Intel-Xeon-E3-1231V3-vs-Intel-Core-i7-620M

Im Moment warten wir auf die Lieferung der Teile, sobald wir alles zusammenhaben, werde ich einen kleinen Auspack- und Aufbaubeitrag hier veröffentlichen.