IT-Projekt: nichtredundantes Set erzeugen und verwalten

Thread Status
Hello, There was no answer in this thread for more than 30 days.
It can take a long time to get an up-to-date response or contact with relevant users.
McClane schrieb:
Ich kann dir ja mal einen Vergleich aus der Industrie geben. Ich komme zwar vom Lande, also gibt da nicht so viele riesige Konzerne, aber ein paar sind schon dabei die z.B. große CAD/CAM Daten speichern müssen.
Ich kenne keine Firma die viel mehr als 1TB Speicher in ihren Servern hat. Eine kommt da in etwa dran. Die haben zu diesem Zweck ein per Fibre-Channel angebundens SAN mit 14 SCSI Festplatten. Die sind in 2*7 Raid5 Systemen zusammengefaßt. Gesichert wird das ganze über einen, auch per Fibrechannel, angeschlossenen Autoloader mit 2 LTO2 Laufwerken und 30 Bändern Kapazität.
Die reinen Hardwarekosten dafür liegen bzw. lagen damals bei geschätzten 25000€, wenn nicht sogar noch mehr (Server usw. nicht mit eingerechnet).
Gut, man könnte aufs Fibrechannel verzichten und statt SCSI ein SATA Raidverbund nehmen, aber wenn es funktionieren soll und du nicht eines Tages ohne Daten da stehen willst, wird es teuer.
Daten speichern ist heute so billig wie nie. Aber die Datensicherung ist extrem teuer, wenn man sicher stellen will das man durch Eigenverschulden oder durch Hardwaredefekte keinen Verlust erleidet.

Ach noch was: Wenn das Raid5 als einziges Backup dienen soll dann kannste die Daten auch gleich löschen. Festplatten sind, wenn es drauf ankommt, extrem unzuverlässig. Die verabschieden sie immer dann wenn man es gerade nicht braucht. Und dann gleich Serienweise. Bei vielen Festplatten ist die Chance sehr hoch das sich 2 Platten gleichzeitig verabschieden. Und dann kannst du so gut wie nichts mehr von deinen Bildern um Raid5 retten. Ich hatte den Fall eines defekten Raid5 mehr als einmal. Und das bei Profisystemen, nicht bei billigen Konsumergeräten.

Raid5 mit mehr als 10 Platten ist nicht zu empfehlen. 7 wäre bei mir die Grenze.


genau ;)
 
Kommentar
Anzeigen
@Maik
Da ich den Ausführungen meines Vorredners 100% zugestimmt habe, habe ich einfach mal den grossen "Zitieren" Knopp unten rechts gedrückt und ein Fullquote in Kauf genommen...
Ich hoffe, Du kannst mir noch einmal verzeihen??????

Gruß
Kay

PS: vielleicht sollten die Admins den Knopf einfach wegtun...
 
Kommentar
Hallo,

habe mal den Thread dafür genutzt ein kleines Programm
zu schreiben das bisher folgendes leistet:

1. durchsucht Verzeichnisse (auch rekursiv)
nach allen NEF's, und Jpg's
2. speichert die Daten mit Originalverzeichnis/name
in einer Oracle-DB
3. speichert aller EXIF Informationen
in der Oracle-DB
4. hat eine Thumbnailvorschau für die Verzeichnisse
5. zeigt das Originalbild inkl. Zoom und Histogramm
6. Suchkriterien nach Name / Verzeichnis / aller Exifdaten
7. Qualitätsbewertung einzelner Bilder 0-9
8. Kategorisieren (manuell)

dazu wird demnächst kommen:

a. eindeutige Namensgenerierung in der DB
b. komfortablere Selektion einzelner Bilder
c. Kopierfunktion der Selektion auf zusätzlichen Datenträger
entweder im Originalnamen oder durch Namensgenerierung
d. Bereinigung und Verschönerung der GUI

und wenn ich etwas mehr Zeit habe :schlaf:

e. Generieren und ablegen in der DB eines Vorschaubildes
(das kostet aber massig Platz da ich hier mind. 800x600 speichern wollte)
Das hat den Vorteil das man nur durch die DB die Bilder
anschauen kann ohne die Datenträger auf dem Rechner haben muß


z.Zt. benötigt der Import von ca. 2000 Nefs ~ 2min :dizzy:


Wäre das ein interessanter Ansatz :nixweiss:

hier mal ein paar screenshots (habe die als Anhang hochgeladen
hoffe das hat geklappt)

Grüße

peter
 

Anhänge

  • nars_001.jpg
    nars_001.jpg
    34,2 KB · Aufrufe: 22
  • nars_002.jpg
    nars_002.jpg
    6,4 KB · Aufrufe: 18
  • nars_004.jpg
    nars_004.jpg
    28 KB · Aufrufe: 17
Kommentar
Oh man, du hast doch langeweile :fahne:

Worin hast du die GUI Entwickelt?
Du speicherst die Daten selbst in der Datenbank oder nur den Pfad? Inkl. Daten wäre der Import wirklich schnell. Von Originaldaten in einer DB halteich allerdings nichts.
Naja, wenn du noch Thumbs generierst dann ist der bei 2000 Bildern in 2 Minuten verdammt schnell. Das schafft keines der Programme die ich bisher getestet habe.
Auf was für einer Maschine hast du das getestet?
 
Kommentar
Hallo,

nur die Daten, also Pfad exifs und so was - natürlich ohne die originale
das ganze war an 2 abenden in delphi soweit das ich jetzt gut damit
arbeiten kann. Habe heute morgen die thumbnails in die DB integriert
wird dadurch etwas langsamer - tests folgen noch....

arbeite jetz noch an der kategorisierung und an einem kleinen bug
bei der thumbnail darstellung :dizzy:

achso - das ganze auf einem Thinkpad T60 mit einer externen USB Platte 60 GB

Grüße
peter
 
Kommentar
Ah, ich hatte einen Kollegen der auch dauernd irgendwelche Tools in Delphi zusammengeschrieben hat. Scheint unter Leuten die nicht ausgelastet sind sehr verbreitet zu sein :)
Verwendest du die freie Oracle DB?
Thinkpads sind fein. Hab das Z61.

Gruß,

Manuel
 
Kommentar
-Anzeige-
Zurück
Oben Unten