Dell PERC 9 H730P Raid 5 Problem

[Syntex]

Hallo,

ich habe ein Problem bzgl. meines Dell PERC 9 H730P Raid Controllers in Verbindung mit meinen Raid 5.

Konfiguriert sind 4x Seagate IronWolf 10TB HDD in Raid 5 Verbund. Das Lief bisher auch tadellos.
An einen Morgen habe ich festgestellt dass das Raid nicht mehr im Windows zur Verfügung steht. 3 von 4 Festplatten blinkten orange. Ich habe den Server heruntergefahren und nach fünf Minuten wieder eingeschaltet.
Jetzt habe ich das Problem, dass die Konfiguration als "Fremde Konfiguration bzw. "Foreign Configuration" erkannt wird. Die Virtual Disk welches dem Raid 5 entspricht ist nicht mehr vorhanden. Die Festplatten sind von den Led's alle wieder im grünen Zustand.
Der Versuch des Importieren der Foreign Configuration schlägt leider auch fehl.

Hat jemand eine Idee wie ich die Daten zumindest Lesbar bereitstellen kann?


Vielen Dank im Voraus für Eure Tipps.

 

[Firebl]

Was steht den im IDRAC in den Log-Files zum PERC? Da muss ja was aufgelaufen sein wenn alle Festplatten orange geblinkt haben

 

[Syntex]

Hallo,

folgende Einträge sind zufinden:

2019-10-28 23:04:42 PDR8 Disk 3 in Backplane 1 of RAID Controller in Slot 4 is inserted.
2019-10-28 23:04:42 PDR4 Disk 3 in Backplane 1 of RAID Controller in Slot 4 returned to a ready state.
2019-10-28 23:04:24 VDR19 Reconfiguration of Virtual Disk 1 on RAID Controller in Slot 4 has failed.
2019-10-28 23:04:24 VDR41 Virtual Disk 1 on RAID Controller in Slot 4 read policy has changed.
2019-10-28 23:04:24 VDR30 Virtual Disk 1 on RAID Controller in Slot 4 write policy has changed.
2019-10-28 23:04:24 PDR5 Disk 3 in Backplane 1 of RAID Controller in Slot 4 is removed.
2019-10-28 23:04:24 PDR87 Disk 3 in Backplane 1 of RAID Controller in Slot 4 was reset.
2019-10-28 23:04:24 VDR7 Virtual Disk 1 on RAID Controller in Slot 4 has failed.
2019-10-28 23:04:24 PDR3 Disk 3 in Backplane 1 of RAID Controller in Slot 4 is not functioning correctly.
2019-10-28 23:04:24 PDR6 Disk 2 in Backplane 1 of RAID Controller in Slot 4 is offline.
2019-10-28 23:04:24 PDR6 Disk 1 in Backplane 1 of RAID Controller in Slot 4 is offline.
2019-10-28 23:04:24 PDR6 Disk 0 in Backplane 1 of RAID Controller in Slot 4 is offline.
2019-10-28 23:04:19 PDR87 Disk 3 in Backplane 1 of RAID Controller in Slot 4 was reset.
2019-10-28 23:03:19 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:03:19 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:03:03 PDR87 Disk 3 in Backplane 1 of RAID Controller in Slot 4 was reset.
2019-10-28 23:02:52 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:52 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:52 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:52 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:47 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:47 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:47 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:47 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:41 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:41 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:41 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:41 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:41 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:41 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:36 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:36 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:36 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:36 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:31 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:31 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:31 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:31 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:25 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:25 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:25 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:25 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:25 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:25 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:20 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:20 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:20 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:20 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:15 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:15 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:04 PDR47 A block on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was punctured by the controller.
2019-10-28 23:02:04 PDR64 An unrecoverable disk media error occurred on Disk 3 in Backplane 1 of RAID Controller in Slot 4.
2019-10-28 23:02:04 LOG007 The previous log entry was repeated 31 times.
2019-10-28 00:24:12 PDR54 A disk media error on Disk 3 in Backplane 1 of RAID Controller in Slot 4 was corrected during recovery.
2019-10-28 00:24:12 LOG007 The previous log entry was repeated 1 times.

 

[bigghost]

Ich würde die foreign config löschen sofern vorhanden. Das RAID im Bios neu anlegen und danach Disk3 direkt manuell offline schalten. Weil die scheint Probleme gemacht zu haben.

Natürlich bei den Enhanced Settings alles aus machen. Damit die Platten nicht neu Inialisiert werden.

 

[Syntex]

Ich würde die foreign config löschen sofern vorhanden. Das RAID im Bios neu anlegen und danach Disk3 direkt manuell offline schalten. Weil die scheint Probleme gemacht zu haben.

Natürlich bei den Enhanced Settings alles aus machen. Damit die Platten nicht neu Inialisiert werden.

Damit komme ich wieder an die Daten?

Das bedeutet für mich, erst einmal die Foreign Configuration von den 4 Festplatten löschen.
Sind danach nicht wirkliche alle Daten verloren?


Nun ein neues Raid 5 erstellen. Was muss ich genau bei den Einstellungen einstellen?

 

[bigghost]

Nicht über das IDRAC. Beim Booten mit CTRL-R ins RAID Bios springen und dort mit CTRL-N in den letzten Screen springen und Foreign Config Clear machen.
Dann auf der Hauptseite erst mal prüfen ob deine 4 Platten in ihren Slots überhaut als configured good da stehen. Falls nicht hat das ganze eh keinen Sinn.

Solltest du den UEFI Mode nutzen musste erst BIOS Mode umstellen sonst kommste nicht in das RAID Bios.

Sollten alle vier Platten als verfügbar da sein. Über F2 neues RAID erstellen und die Slots hinzunehmen.
Bei den erweiterten Settings sollte Initialisieren aus sein weil sonst plättet er alles.

Sollte Disk3 (Im Log stand Slot4) als good da stehen kannste die auch erst mal mit drin lassen.

Habe oft schon beim coden mit Scripten MegaCLI/Perccli mist gemacht beim Splitten eines RAID1 und mir die falsche Platte unterm Hintern weggezogen.
Dann im RAID Bios kompletes Clear Config gemacht und einfach das RAID neu erstellt und gebootet. Alles Daten waren wie vorher da.

Garantie gibts natürlich nie. Aber das eine laufende RAID Config sich zerstört und selbst als Foreign Config nicht mehr importiert werden kann hatte ich auch noch nicht.

Aber du hast ja eh keine Wahl mehr.

 

[Syntex]

Habe deinen Rat gefolgt. Leider ohne Erfolg.

UEFI => BIOS

CTRL-R um ins Raid Management zu kommen. Die Foreign Configuration gelöscht. Interessant war, dass dort beim Preview die 4 Physikalischen Disks aufgeführt sind. Davon waren
00:01:00 - Offline
00:01:01 - Offline
00:01:02 - Offline
00:01:03 - Online

Obwohl alle HDD's eingesteckt sind.

Die Konfiguration gelöscht und ein neues Raid 5 erstellt mit den gleichen Disks ohne Intitialisierung. Konsistenzcheck habe ich beendet. Leider kein Erfolg... Im Windows wird der Datenträger als "RAW" angezeigt...

 

[bigghost]

Versuch war es Wert. Fakt scheint aber zu sein das deine Platten doch in Ordnung sind.
Nur irgendwas hat deine Raid Config gekillt und wahrscheinlich auch das Filesystem.
Schon probiert Daten zu retten mit irgendwelche Tools ?

 

[Syntex]

Ich habe die 4 Festplatten jetzt als Non-Raid Konfiguriert damit diese direkt in Windows durchgereicht werden. Derzeitig probiere ich EasyUs aus, dass findet wirklich sehr viele Dateien, nur leider ohne Pfad und Dateiname...

Oder gibt es noch einen Tip wie ich mir das alles ersparen kann?

 

[bigghost]

Diese Idee war nicht gut. Bei einem Raid5 werden die Schreibzugriffe verteilt inkl. Parity auf alle Platten verteilt. Es liegt also niemals eine Datei komplett am Stück auf einer HD.
Wenn Recover dann nur im Orginalzustand.

Einzige Idee die ich noch hätte wäre unter Linux. Dort kann eine zerstörte GPT Partitiontable wieder hergestellt werden. Tools wie gdisk cdisk evtl. sogar fdisk finden mit Glück eine Kopie der Table und fragen ob sie diese wiederherstellen dürfen.

Schau mal hier rein gibt auch Windows Tools für sowas.

The Most Effective Method for GUID Partition Table Recovery

 

[Syntex]

Also wie soll ich jetzt am besten vorgehen?

Aus den Non-Raid ein Raid 5 wieder machen mit 64KB Sektoren ohne zu Initialisieren und dann das genannte Tool drüber laufen lassen?

- - - Updated - - -

Diese Idee war nicht gut. Bei einem Raid5 werden die Schreibzugriffe verteilt inkl. Parity auf alle Platten verteilt. Es liegt also niemals eine Datei komplett am Stück auf einer HD.
Wenn Recover dann nur im Orginalzustand.

Einzige Idee die ich noch hätte wäre unter Linux. Dort kann eine zerstörte GPT Partitiontable wieder hergestellt werden. Tools wie gdisk cdisk evtl. sogar fdisk finden mit Glück eine Kopie der Table und fragen ob sie diese wiederherstellen dürfen.

Schau mal hier rein gibt auch Windows Tools für sowas.

The Most Effective Method for GUID Partition Table Recovery

Hier mal zwei Screenshots vllt hilft es weiter...

 

[bigghost]

Genau back to raid 5 und wenn das Bild von dir ist ? Scheint er ja Partitionen gefunden zu haben die er zurückholen kann.

 

[Syntex]

Genau back to raid 5 und wenn das Bild von dir ist scheint er ja Partitionen gefunden zu haben die er zurückholen kann.

Also D: hatte er schon beim Starten gefunden. Soweit so gut. Jetzt läuft das Tool etwas, und hat eine weitere Partition gefunden.... bei 4x10TB wird das nur etwas brauchen...

In Windows kann ich nicht drauf zugreifen, Dateisystem "RAW"....

 

[bigghost]

Sieht die gefunden Partionierung den aus wie sie vorher war ? Falls ja würde ich sie Wiederherstellen lassen. Aber das haste ja anscheind schon gemacht wenn das Filesystem RAW ist, dann ist wohl Hopfen und Malz verloren. Hatte gehofft das die Sektoren mit dem Filesystem i.O wäre.

 

[Syntex]

Sieht die gefunden Partionierung den aus wie sie vorher war ? Falls ja würde ich sie Wiederherstellen lassen. Aber das haste ja anscheind schon gemacht wenn das Filesystem RAW ist, dann ist wohl Hopfen und Malz verloren. Hatte gehofft das die Sektoren mit dem Filesystem i.O wäre.

Nein, RAW ist es derzeitig ohne eine Wiederherstellung... ich lasse den quick Scan bis zum Schluss laufen....

Welcher Datei Recovery Tool ist zu empfehlen?

 

[bigghost]

Erfolg gehabt ?

 

[Syntex]

Erfolg gehabt ?

Also mit dem Wiederherstellen der Partition und den GUID Table bin ich nicht weitergekommen...

Jetzt lasse ich ****** Data Recovery drüber laufen... das läuft seit 24 Stunden, und hat ca 1/3 der Dateien gefunden/indexiert.


----


In Slot 4 ist die Festplatte jetzt heruntergestuft, die scheint wohl einen Fehler zu haben.

Meinst du es macht ggf. Sinn den Server Herunterzufahren, die HDD in Slot 4 zu entfernen und noch einmal zu starten? Eventuell habe ich dann eine Chance an das Dateisystem zu kommen.
160800 Dateien wurden schon gefunden...

 

[bigghost]

Nein das macht keinen Sinn. Rette was geht und kopiere danach alles runter von dem Pool. Kaputte Disk gegen eine neue austauschen und Pool neu erstellen.
Oder kleineren Pool mit den drei ganzen Disk erstellen. Evtl. auch auf sichere Dateisysteme ala BTRFS/ZFS etc setzen.
Sieht man mal wieder das ein RAID5 auch keine Garantie gegen Ausfälle ist.

 

[martingo]

Sorry, aber das Vorgehen hat etwas von Jugend forscht. Irgendwann ist es zerschossen, dass nicht mal ein Profi mehr Daten retten könnte.

Mal Butter bei die Fische. Welche Daten sind das? Regelmäßige Backups? Wann zuletzt?

 

[bigghost]

Gäbe es Backups würde Syntex wohl nicht so viel Arbeit reinstecken

 

[Syntex]

Es gibt leider kein Backup, sonst wäre das sicherlich längst eingespielt.
Sehr ärgerlich das ich gerade dabei war, einen zweiten Server für das Backup einzurichten....

Ich benötige hauptsächlich die Word, Exel und PDF Dokumente. Die Bilder wären auch gut.

 

[Ceiber3]

Sieht man mal wieder das ein RAID5 auch keine Garantie gegen Ausfälle ist.

Ich hatte solche Probleme eigentlich noch nie, bis auf ein Software Raid von einem Mainboard. Ist schon extrem viele Jahre her.

Deswegen sollte man immer Backups machen. Auch wenn das nun mal bissel Geld kostet.

Sehr ärgerlich das ich gerade dabei war, einen zweiten Server für das Backup einzurichten....

Leider zu spät, für backups reicht eigentlich mega schwache Hardware oder externes Gehäuse. Soll ja nur Backupen.

 

[katzenhai]

Stellt sich natürlich die Frage, ob Dell überhaupt 10TB Platten für den Server/Controller vorgesehen hat. Alle Platten Offline sieht so aus, als wenn die Plattenfirmware nicht mit der Controllerfirmware harmoniert. Wenn man schon keine Originalplatten nimmt, dann sollte man zumindest eine Platte nehmen, die den Originalplatten entspricht. Also bei preiswerten Platten Entry Level Server Platten und keine NAS- oder gar Consumerplatten. Üblicherweise sind nur Entry Level Server Platten für den Betrieb an Hardware RAID Kontrollern vorgesehen.

 

[Syntex]

So wie es für mich aussieht, fehlt der Index des Dateisystems.
Es war vorher mit NTFS Formatiert.

Besteht die Möglichkeit diesen irgendwie Wiederherzustellen? Die Dateien sehen soweit i.O. aus.

 

[katzenhai]

TestDisk DE - CGSecurity

 

[martingo]

Wenn das RAID grundsätzlich noch in Ordnung ist, würde ich auf weitere Experimente am RAID System verzichten.
Die Geschichte mit den Recovery-Systemen ist so eine Sache. Viele leisten das, was Du beschreibst. Ein Arsch voll Dateien ohne Namen und Pfade.
Ich hatte auch schon Probleme dieser Art mit Notebook von der Schwiegermutter, Windows-initialisertem USB-Stick, der von der Gattin versehentlich formatiert wurde usw.
Leider ist das schon mind. 8-10 Jahre her und ich weiß meine Empfehlungen nicht mehr.
Sinnvoll wären 1:1 Kopien der Laufwerke, dass man auch Mal experimentieren kann (z.b. mit dd unter Linux herzustellen).

Wenngleich ich z.B. den USB-Stick unter Windows mit irgendwas wieder komplett herstellen konnte (keine Ahnung mehr, mit was), so würde ich doch eher zu einem Unix/Linux basierten System raten. Die klackende Festplatte im Notebook konnte ich z.b. zu annähernd 100% mit der Ultimate Boot oder Rescue CD wiederherstellen. Das war soweit ich mich erinnere, aber eher existierendes Linux-Wissen und sehr viel Kommandozeile, keins der bunten Icons auf dem Desktop.

Ich würde Dir empfehlen: 1:1 Kopien, evtl. nach einem Dell Recovery Tool schauen und dann viel mit unterschiedlichen Tools zu experimentieren. Notfalls sogar Mal die Platten zwei Wochen im Regal liegen lassen, um den Kopf frei zu bekommen. Wenn Du jemanden mit vernünftiger Linux-Erfahrung kennst, dann erst Mal den fragen.
Bisher kam ich immer mit 0€ Tools zurecht, aber deine Daten scheinen Dir, dass Du auch 100€ in die Hand nimmst.
Ich konnte sogar Mal ReFS mit Bitlocker verschlüsselte Laufwerke auf meinem Windows Storage Space wiederherstellen, obwohl ich schon alle Hoffnungen fahren ließ und mein 3 - 6 Monate altes Backup aus dem Schließfach holen wollte.