Raid 5 Ausfall

[Rheinschiffer]

Hallo Zusammen,

Wie schon im Titel zu lesen, habe ich einen Raid 5 Ausfall.
Um 4:12 heut Nacht viel die 1. von 3 Platten aus, dann 30 Sekundenspäter die 2. Platte von 3.

Status: faild

Zum System:

Server mit W2K3 als Betriebssytem
Board: Gigabyte GA-EP45 UD3P
Bootplatte ST3120026AS (120 GB) am GA Controller
Raid 5 - 3x ST3500320NS am Intel ICH10
+1 Ersatzplatte im Schrank

Der Server läuft noch ohne das etwas geändert oder angefasst wurde.
Im Gerätemanager sind die beiden ausgefallen Platten nicht mehr gelistet.

Port 0 = 9QM0J2LB Platte läuft noch
Port 1 = 9QM0JZ65 ausgefallen
Port 2 = 9QM0JZVL ausgefallen


Tja so sieht es aus, ich hoffe auf den Ernst und seine Hilfe.
Unkerufe Datensicherung usw. bitte unterlassen.
Ich weiß ein Raid ersetzt keine Datensicherung.

Mfg

Rheinschiffer

 

[Tiger_UP23]

Server abschalten, von jeder der "defekten" Platten ein Abbild machen (z.b. dd oder ähnliches)

wenn die platten auf einem anderen PC nicht gehen -> Datenwiederherstellung (á 1300 €) über eine externe Firma

falls sie doch gehen sollten -> danach andere ports am MB probieren -> schauen ob danach es raid wieder geht -> Intel Handbuch nachlesen ob es einen Raid-Reset gibt (gab es bei mir beim adaptec von 16 platten 2 defekt -> danach das meiste noch da, jedoch große teile mit crc fehlern!)

und dann kann man noch mit RAID-Wiederherstellungstools probieren aufgrund der images etwas sinnvolles zusammenzustellen - Name leider gerade entfallen

 

[Mr. Poe]

da is nix mehr zu retten...

das beide fast gleichzeitig ausgefallen sind, könnte darauf hindeuten, das dein controller nen schlag weg hat...
schließ mal andere platten an dien ports an und schau ob diese erkannt werden.
schließ auch mal die "kaputten" platten an andere ports an...

 

[eRacoon]

Bei einem Raid 5 darf eigendlich nur eine Platte ausfallen.
In deinem Fall wenn beide Platten wirklich Defekt sind, wäre das Raid hinüber.

Der Server läuft noch ohne Probleme?

 

[Sir_Sascha]

Ich weiß ein Raid ersetzt keine Datensicherung.

ok, dann mach jetzt noch schnell eine Sicherung. Aber was ist deine eigentliche Frage?
Nach der Sicherung Server aus, Platten wechseln und wieder einbinden lassen, hoffen das dabei nicht die andere Platte hops geht.

 

[Rheinschiffer]

Eine Sicherung kann man ja nicht mehr machen. 2 Platten sind zur Zeit offline. Raid Status FAILED.

Meine Frage ja das ist gut. Ich hoffe auf den Raid-Gott ernst@at um das Raid eventuell zu flicken also min. 1 Platte wieder einzuhängen um im degreeded Staus die Daten weg zu sichern.

 

[soomon]

was willst denn sichern wenn das raid nich mehr geht XD
platten tauschen --> sicherung einspielen

 

[Pupp3tm4st3r]

Also noch kein reboot gemacht? Vlt. erkennt er die Platten dann wieder und du bist in der Lage nen Rebuild anzuschubsen oder er erkennt es wenigstens als degraded?

 

[Ernst@at]

Muss erst wieder ein Admin den Krempel ins Aquarium werfen, damit hier die sinnlosen Posts aufhören?

Wie sieht es inzwischen mit Ersatzplatten aus?
die ST sind gut aber alle, WD5003ABYX wäre vielleicht besser zu beschaffen.
Erstmal prüfen, ob die rausgefallenen Platten mit anderen Stromsteckern anlaufen(Bei Netz ein und Stopp im BIOS-Menü).
Hängen die vielleicht gemeinsam an einem Strang?

 

[Rheinschiffer]

Hallo Ernst,

so habe den Server runtergefahren. Alle Platten aus dem 3er ICY-Dock gezogen und beschriftet. Dann habe ich die Ersatzplatte genommen (die aus dem Schrank) und habe diese dann Schacht für Schacht bis zum Raidbios booten lassen. In allen 3 Schächten wurde die Platte nicht richtig erkannt. Der ICH zeigt ja beim Biosscreen zuerst alle 6 Ports an, mit den daran angeschlossenen Platten. Dort war aber keine Platte aufgelistet. Erst nach der Raid-Abfrage kam dann die Platte mit der Anzeige NON MEMBER. Was ja auch richtig ist.
Nur komisch das die Platte nicht vorher angezeigt wird.
Also Platte ohne ICY Dock angeschlossen und siehe da die Platte wird oben und unten aufgelistet.
Dann habe ich die 3 Raid Platten genommen und diese einzeln nur mit Strom versogt und gehorcht ob diese anlaufen und die Initialisierung durchgeführt wird.
Das habe ich mit allen 3 Platten gemacht und die hörten sich alle gleich an und ganz normal.

Das ist der Stand der Dinge.

Ich denke das die Backplane des ICY Dock den Geist aufgegeben hat.

Wie sollen wir jetzt weitermachen?

Alle Platten ohne Dock anschließen und booten?

Gruß Rheinschiffer

 

[Ernst@at]

Alle Platten ohne Dock anschließen und booten?

Nein.
Wie sieht es mit der Belegung des GSATA-Controllers, wo die Systemplatte hängt, aus?
ist da der zweite Slot frei?
Im Moment ist leider der Gigabyte-Server mit dem alten Forum nicht erreichbar, wo die Beta-Biosse der Boards, für die das BIOS-Backup auf die Platte abgeschaltet werden kann, Auskunft geben, ob wir gefahrlos an einem internen Anschluss arbeiten können.
Welche BIOS-Version ist da aktuell drauf? FFb, FD, FB oder FA?
Ansonsten solltest Du Dich nach einem USB/SATA Adapter umsehen.

 

[Rheinschiffer]

Ja am GSATA ist noch ein Port frei.
Das Bios hat die Version F8.

 

[Ernst@at]

Also ein Uralt-BIOS vom 24.2.2009 auf einem Rev. 1.0 oder 1.1 Board, und keine Info, ob da der programmierte Fußpilz drauf ist...
Kannst Du einen SATA/USB Adapter oder ein ext. 3,5" USB-Case auftreiben, um die Platten da drin zu inspizieren?
Das letzte, was wir brauchen können, ist eine HPA auf den Platten, womit die RAID-Infos futsch sind und ein Volume dann kleiner als früher angelegt wird

 

[Rheinschiffer]

also auf die schnelle habe ich hier meinen Client, der hat 4 SATA Ports wobei 1er belegt ist mit der Systemplatte. W7-64 Bit als BS. Ich kann aber auch nach hause fahren und den gewünschten Adaper holen,
wie Du magst.

 

[Ernst@at]

Ist die Frage, welches Board der drinnen hat (auch Fußpilz )

 

[Rheinschiffer]

Na ja es ist ein ASROCK - M3N78D - NVIDIA nForce 720D

 

[Jto]

Zur Klarstellung: Die Gigabyte-Boards schreiben u.U. ein BIOS-Backup auf die angeschlossene(n?) SATA-Platte(n). Schreibzugriffe auf die betroffenen Platten gilt es aber zu verhindern. Also entweder sicher gehen, dass dieses Backup nicht geschrieben wird (BIOS-Version, Optionen) oder andere Methode wählen (USB-Case, anderer PC).

 

[Ernst@at]

Danke, wie Du vielleicht gelesen hast, meiden wir diese Falle wie die Pest

@Udo:
Dann nichts wie rein mit den 3 Platten, HD Sentinel inspizieren, und dann gehts mit HxD los.
Schaffen wir bis 16:00, das Ding wieder zum laufen zu kriegen

Spoiler: 1. extrahieren MBR/GPT/RAID Metadaten Member Disks

Im HxD sind die physical hard disk x Nummern um 1 höher als in der Datenträgerverwaltung angezeigte Datenträgernummern

HxD Aufruf unter User mit Administratorrechten (oder rechtklick/ausführen als... Administrator)

- Menü: Extras/open disk/physical disk/hard disk x (Häkchen bei "open as readonly" NICHT entfernen)

========= extrahieren Sektor 0-7
- Menü: Edit/select block/start-offset: 0 , length: 1000, hex, OK
- Menü: Edit/copy as.../ editor view (überträgt den markierten Inhalt in die Zwischenablage)
- Menü: File/New (es erscheint in der Anzeige ein zweiter Reiter "untitled1")
- in das kleine punktierte Rechteck rechts unter ... 0E 0F klicken
- Strg+V (überträgt den Inhalt aus der Zwischenablage) im popup "file size change": OK
- den Cursor an der Endposition belassen, nicht in der Anzeige herumklicken!

========= extrahieren maxLBA-4 (RAID-Metadaten)
- auf Reiter "harddisk x" klicken
- in der Menüzeile rechts auf den Button ">|" anklicken, danach auf "<" drei Mal klicken (Positionierung auf letzten Sektor und dann drei Sektoren nach vorne)
- Menü: Edit/select block/(den eingetragenen Start-Offset belassen) length: 800, hex, OK
- Menü: Edit/copy as.../ editor view (überträgt den markierten Inhalt in die Zwischenablage)
- Reiter "untitled1" anklicken, nicht in die Anzeige klicken
- Strg+V (überträgt den Inhalt aus der Zwischenablage) im popup "file size change": OK
- Menü: File/Save as... einen Ordner auswählen und als Dateinamen "HDDx.txt" /speichern
- HxD beenden

Das gleiche machst Du auch mit den anderen beiden
Die .txt gezippt in den Anhang

 

[Rheinschiffer]

HD Info's

Port 0: 9QM0J2LB = Keine Fehler
Port 1: 9QM0JZ65 = keine Fehler
Port 2: 9QM0JZVL = oha

Versagen möglich - Attribute: 5 Reallocated Sectors Count, Anzahl Sektoren, deren Daten in freie Bereiche verschobenen wurden. Weist auf ein Problem mit der Plattenoberfläche oder den Schreib-/Leseköpfen hin.
Es gibt 2272 schlechte (Bad) Sektoren auf der Plattenoberfläche. Der Inhalt dieser Sektoren wurde in einen freien Bereich verschoben.
Während des Selbsttests gefundene schlechte Sektoren: 3
Es wurden 3 schlechte (Bad) Sektoren auf der Plattenoberfläche gefunden. Diese können bei späterer Verwendung der Platte remappt werden.
Festplatte sofort ersetzen.

Es wird empfohlen, die Daten sofort zu sichern, um Datenverlust zu verhindern.


Hier die gewünschten INFO's

 

[Ernst@at]

Was man nicht so alles findet, gelle?

Spoiler: 2. Auswertungsergebnis

[FONT="Lucida Console"][SIZE="3"]
Analyzing: \\Pc10\shareddocs\Udo RAID5\HDD1.txt

===== MBR INFORMATION ===== at LBA=0
00000001FE 55AA              Boot signature='55AA'... valid
.                            ... Partition Table entry 1 ...
00000001C2 07                Partition Type: NTFS
00000001BE 80                Boot indicator: *** ACTIVE ***
00000001BF 010100            Start CC-HH-SS:    0-001-01
00000001C3 FEFFFF            End   CC-HH-SS: 1023-254-63 (not CHS addressable)
00000001C6 3F000000          Start    (LBA):          63 0-1-1
00000001CA 82597074          Size  (Blocks):  1953520002 121600-254-0  953867MiB   931.51GiB
.                            ... Partition Table entry 2 ...
00000001D2 00                Partition Type: unused partition entry
.                            ... Partition Table entry 3 ...
00000001E2 00                Partition Type: unused partition entry
.                            ... Partition Table entry 4 ...
00000001F2 00                Partition Type: unused partition entry 

Analyzing: \\Pc10\shareddocs\Udo RAID5\HDD1.txt
Analyzer Version: 2009072701

===== RAID MPB INFORMATION ===== when MaxLBA=976773168 then from Sector==>976773166 downwards
7470C05C00 496E74656C205261  . RAID
7470C05C08 69642049534D2043  .. Controller
7470C05C10 6667205369672E20  ... Signature: Intel Raid ISM Cfg Sig.
7470C05C18 312E322E3032      .... Version: 1.2.02
7470C05C1E 0000              <reserved>
7470C05C20 811B1B66          MPB checksum: unknown type
7470C05C24 14020000          MPB size: 532
7470C05C28 F316DA69          family ID <first time checksum>
7470C05C2C 363F6C00          Generation <# MPB updates>: 7094070
7470C05C30 F00F0000          Error Log Size: 4080
7470C05C34 00000080          MPB Attributes: checksum verify
7470C05C38 03                # configured disks: 3
7470C05C39 01                # configured volumes: 1
7470C05C3A 02                error log position: 2
7470C05C3B 00                <reserved>
7470C05C3C 00000000          <cache size>
7470C05C40 F316DA69          original family ID: -0
7470C05C44 00000000...       <148 Bytes unused>
.                            --- HDD [0] ---
7470C05CD8 39514D304A5A3635  .
7470C05CE0 0000000000000000  .. Serial: "9QM0JZ65"
7470C05CE8 3060383A          Sectors total: 976773168
7470C05CEC 00000200          SCSI ID: Port 0 Path 0 Target 2 Lun 0
7470C05CF0 3A                Status Flags: Disk is: Member, Usable, Detected, Claimed,
7470C05CF1 01                Status Flags: contains metadata,
7470C05CF2 00                Status Flags:
7470C05CF3 00                Status Flags: <unused>
7470C05CF4 00000000          owner config number.
7470C05CF8 0000000000000000  .
7470C05D00 0000000000000000  .. <16 bytes unused>
.                            --- HDD [1] ---
7470C05D08 39514D304A324C42  .
7470C05D10 0000000000000000  .. Serial: "9QM0J2LB"
7470C05D18 3060383A          Sectors total: 976773168
7470C05D1C 00000000          SCSI ID: Port 0 Path 0 Target 0 Lun 0
7470C05D20 3A                Status Flags: Disk is: Member, Usable, Detected, Claimed,
7470C05D21 01                Status Flags: contains metadata,
7470C05D22 00                Status Flags:
7470C05D23 00                Status Flags: <unused>
7470C05D24 00000000          owner config number.
7470C05D28 0000000000000000  .
7470C05D30 0000000000000000  .. <16 bytes unused>
.                            --- HDD [2] ---
7470C05D38 39514D304A5A564C  .
7470C05D40 0000000000000000  .. Serial: "9QM0JZVL"
7470C05D48 3060383A          Sectors total: 976773168
7470C05D4C 00000100          SCSI ID: Port 0 Path 0 Target 1 Lun 0
7470C05D50 3E                Status Flags: Disk is: Member, *** Failed ***, Usable, Detected, Claimed,
7470C05D51 01                Status Flags: contains metadata,
7470C05D52 00                Status Flags:
7470C05D53 00                Status Flags: <unused>
7470C05D54 00000000          owner config number.
7470C05D58 0000000000000000  .
7470C05D60 0000000000000000  .. <16 bytes unused>
.                            --- Volume [0] ---
7470C05D68 7261696435000000  .
7470C05D70 0000000000000000  .. Map Name: "raid5"
7470C05D78 0098707400000000  Sectors: 1953536000
7470C05D80 8C                Status Flags: read coalescing, write coalescing, verify and fix
7470C05D81 00                Status Flags:
7470C05D82 0000              <reserved>
7470C05D84 00000000          Reserved Sectors: 0
7470C05D88 00000100          <migration priority,# subvolumes,target id,cng master disk>
7470C05D8C 01010000          <cache policy[2],cng state,cng substate>
7470C05D90 00000000...       <40 Bytes unused>
7470C05DB8 98707400          <curr migr unit>
7470C05DBC 00000000          <check point ID>
7470C05DC0 00                Volume migration state: 0 <normal or migrating>
7470C05DC1 02                Volume migration type: 2 <initializing, rebuilding,...>
7470C05DC2 03                Volume dirty: 3
7470C05DC3 FF                Volume fs state: 0xFF
7470C05DC4 0000              <verify errors>
7470C05DC6 0000              <verify bad blocks>
7470C05DC8 00000000...       <16 Bytes unused>
7470C05DD8 00000000          volume LBA0 offset(LBAs or stripes? - LBAs will run in >2TiB bug): 0
7470C05DDC 084D383A          # Sectors/member: 976768264
7470C05DE0 98707400          # Stripes/member: 7631000
7470C05DE4 8000              # Sectors/Stripe: 128 ==> stripesize=64KB
7470C05DE6 02                Volume status: DEGRADED
7470C05DE7 05                RAID Level: RAID-5 Array
7470C05DE8 03                # member disks: 3
7470C05DE9 01                # domains: 1
7470C05DEA 02                failed disk: HDD[2]
7470C05DEB 01                <unused, always 01>
7470C05DEC 00000000...       <28 Bytes unused>
7470C05A08 00000000          member order 1: HDD[0] <Serial=9QM0JZ65>
7470C05A0C 01000000          member order 2: HDD[1] <Serial=9QM0J2LB>
7470C05A10 02000001          member order 3: HDD[2] <Serial=9QM0JZVL> *** BAD ***
7470C05A14 === end of metadata ===     

Analyzing: \\Pc10\shareddocs\Udo RAID5\HDD2.txt
Analyzer Version: 2009072701

===== RAID MPB INFORMATION ===== when MaxLBA=976773168 then from Sector==>976773166 downwards
7470C05C00 496E74656C205261  . RAID
7470C05C08 69642049534D2043  .. Controller
7470C05C10 6667205369672E20  ... Signature: Intel Raid ISM Cfg Sig.
7470C05C18 312E322E3032      .... Version: 1.2.02
7470C05C1E 0000              <reserved>
7470C05C20 7C1B1466          MPB checksum: unknown type
7470C05C24 14020000          MPB size: 532
7470C05C28 F316DA69          family ID <first time checksum>
7470C05C2C 353F6C00          Generation <# MPB updates>: 7094069
7470C05C30 F00F0000          Error Log Size: 4080
7470C05C34 00000080          MPB Attributes: checksum verify
7470C05C38 03                # configured disks: 3
7470C05C39 01                # configured volumes: 1
7470C05C3A 02                error log position: 2
7470C05C3B 00                <reserved>
7470C05C3C 00000000          <cache size>
7470C05C40 F316DA69          original family ID: -0
7470C05C44 00000000...       <148 Bytes unused>
.                            --- HDD [0] ---
7470C05CD8 39514D304A5A3635  .
7470C05CE0 0000000000000000  .. Serial: "9QM0JZ65"
7470C05CE8 3060383A          Sectors total: 976773168
7470C05CEC 00000200          SCSI ID: Port 0 Path 0 Target 2 Lun 0
7470C05CF0 3A                Status Flags: Disk is: Member, Usable, Detected, Claimed,
7470C05CF1 01                Status Flags: contains metadata,
7470C05CF2 00                Status Flags:
7470C05CF3 00                Status Flags: <unused>
7470C05CF4 00000000          owner config number.
7470C05CF8 0000000000000000  .
7470C05D00 0000000000000000  .. <16 bytes unused>
.                            --- HDD [1] ---
7470C05D08 39514D304A324C42  .
7470C05D10 0000000000000000  .. Serial: "9QM0J2LB"
7470C05D18 3060383A          Sectors total: 976773168
7470C05D1C 00000000          SCSI ID: Port 0 Path 0 Target 0 Lun 0
7470C05D20 3A                Status Flags: Disk is: Member, Usable, Detected, Claimed,
7470C05D21 01                Status Flags: contains metadata,
7470C05D22 00                Status Flags:
7470C05D23 00                Status Flags: <unused>
7470C05D24 00000000          owner config number.
7470C05D28 0000000000000000  .
7470C05D30 0000000000000000  .. <16 bytes unused>
.                            --- HDD [2] ---
7470C05D38 39514D304A5A564C  .
7470C05D40 0000000000000000  .. Serial: "9QM0JZVL"
7470C05D48 3060383A          Sectors total: 976773168
7470C05D4C 00000100          SCSI ID: Port 0 Path 0 Target 1 Lun 0
7470C05D50 3A                Status Flags: Disk is: Member, Usable, Detected, Claimed,
7470C05D51 01                Status Flags: contains metadata,
7470C05D52 00                Status Flags:
7470C05D53 00                Status Flags: <unused>
7470C05D54 00000000          owner config number.
7470C05D58 0000000000000000  .
7470C05D60 0000000000000000  .. <16 bytes unused>
.                            --- Volume [0] ---
7470C05D68 7261696435000000  .
7470C05D70 0000000000000000  .. Map Name: "raid5"
7470C05D78 0098707400000000  Sectors: 1953536000
7470C05D80 8C                Status Flags: read coalescing, write coalescing, verify and fix
7470C05D81 00                Status Flags:
7470C05D82 0000              <reserved>
7470C05D84 00000000          Reserved Sectors: 0
7470C05D88 00000100          <migration priority,# subvolumes,target id,cng master disk>
7470C05D8C 01010000          <cache policy[2],cng state,cng substate>
7470C05D90 00000000...       <40 Bytes unused>
7470C05DB8 98707400          <curr migr unit>
7470C05DBC 00000000          <check point ID>
7470C05DC0 00                Volume migration state: 0 <normal or migrating>
7470C05DC1 02                Volume migration type: 2 <initializing, rebuilding,...>
7470C05DC2 01                Volume dirty: 1
7470C05DC3 FF                Volume fs state: 0xFF
7470C05DC4 0000              <verify errors>
7470C05DC6 0000              <verify bad blocks>
7470C05DC8 00000000...       <16 Bytes unused>
7470C05DD8 00000000          volume LBA0 offset(LBAs or stripes? - LBAs will run in >2TiB bug): 0
7470C05DDC 084D383A          # Sectors/member: 976768264
7470C05DE0 98707400          # Stripes/member: 7631000
7470C05DE4 8000              # Sectors/Stripe: 128 ==> stripesize=64KB
7470C05DE6 00                Volume status: NORMAL
7470C05DE7 05                RAID Level: RAID-5 Array
7470C05DE8 03                # member disks: 3
7470C05DE9 01                # domains: 1
7470C05DEA FF                failed disk: - NONE -
7470C05DEB 01                <unused, always 01>
7470C05DEC 00000000...       <28 Bytes unused>
7470C05A08 00000000          member order 1: HDD[0] <Serial=9QM0JZ65>
7470C05A0C 01000000          member order 2: HDD[1] <Serial=9QM0J2LB>
7470C05A10 02000000          member order 3: HDD[2] <Serial=9QM0JZVL>  
7470C05A14 === end of metadata ===  

Analyzing: \\Pc10\shareddocs\Udo RAID5\HDD3.txt
Analyzer Version: 2009072701

===== RAID MPB INFORMATION ===== when MaxLBA=976773168 then from Sector==>976773166 downwards
7470C05C00 496E74656C205261  . RAID
7470C05C08 69642049534D2043  .. Controller
7470C05C10 6667205369672E20  ... Signature: Intel Raid ISM Cfg Sig.
7470C05C18 312E322E3032      .... Version: 1.2.02
7470C05C1E 0000              <reserved>
7470C05C20 8B791767          MPB checksum: unknown type
7470C05C24 14020000          MPB size: 532
7470C05C28 F316DA69          family ID <first time checksum>
7470C05C2C 3A3F6C00          Generation <# MPB updates>: 7094074
7470C05C30 F00F0000          Error Log Size: 4080
7470C05C34 00000080          MPB Attributes: checksum verify
7470C05C38 03                # configured disks: 3
7470C05C39 01                # configured volumes: 1
7470C05C3A 02                error log position: 2
7470C05C3B 00                <reserved>
7470C05C3C 00000000          <cache size>
7470C05C40 F316DA69          original family ID: -0
7470C05C44 00000000...       <148 Bytes unused>
.                            --- HDD [0] ---
7470C05CD8 39514D304A5A3635  .
7470C05CE0 3A30000000000000  .. Serial: "9QM0JZ65:0"
7470C05CE8 3060383A          Sectors total: 976773168
7470C05CEC FFFFFFFF          MISSING!
7470C05CF0 06                Status Flags: Disk is: Member, *** Failed ***, *** Unusable ***, *** Undetected ***,
7470C05CF1 00                Status Flags:
7470C05CF2 00                Status Flags:
7470C05CF3 00                Status Flags: <unused>
7470C05CF4 00000000          owner config number.
7470C05CF8 0000000000000000  .
7470C05D00 0000000000000000  .. <16 bytes unused>
.                            --- HDD [1] ---
7470C05D08 39514D304A324C42  .
7470C05D10 0000000000000000  .. Serial: "9QM0J2LB"
7470C05D18 3060383A          Sectors total: 976773168
7470C05D1C 00000000          SCSI ID: Port 0 Path 0 Target 0 Lun 0
7470C05D20 3A                Status Flags: Disk is: Member, Usable, Detected, Claimed,
7470C05D21 01                Status Flags: contains metadata,
7470C05D22 00                Status Flags:
7470C05D23 00                Status Flags: <unused>
7470C05D24 00000000          owner config number.
7470C05D28 0000000000000000  .
7470C05D30 0000000000000000  .. <16 bytes unused>
.                            --- HDD [2] ---
7470C05D38 39514D304A5A564C  .
7470C05D40 3A30000000000000  .. Serial: "9QM0JZVL:0"
7470C05D48 3060383A          Sectors total: 976773168
7470C05D4C FFFFFFFF          MISSING!
7470C05D50 06                Status Flags: Disk is: Member, *** Failed ***, *** Unusable ***, *** Undetected ***,
7470C05D51 00                Status Flags:
7470C05D52 00                Status Flags:
7470C05D53 00                Status Flags: <unused>
7470C05D54 00000000          owner config number.
7470C05D58 0000000000000000  .
7470C05D60 0000000000000000  .. <16 bytes unused>
.                            --- Volume [0] ---
7470C05D68 7261696435000000  .
7470C05D70 0000000000000000  .. Map Name: "raid5"
7470C05D78 0098707400000000  Sectors: 1953536000
7470C05D80 8C                Status Flags: read coalescing, write coalescing, verify and fix
7470C05D81 00                Status Flags:
7470C05D82 0000              <reserved>
7470C05D84 00000000          Reserved Sectors: 0
7470C05D88 00000100          <migration priority,# subvolumes,target id,cng master disk>
7470C05D8C 01010000          <cache policy[2],cng state,cng substate>
7470C05D90 00000000...       <40 Bytes unused>
7470C05DB8 98707400          <curr migr unit>
7470C05DBC 00000000          <check point ID>
7470C05DC0 00                Volume migration state: 0 <normal or migrating>
7470C05DC1 02                Volume migration type: 2 <initializing, rebuilding,...>
7470C05DC2 01                Volume dirty: 1
7470C05DC3 FF                Volume fs state: 0xFF
7470C05DC4 0000              <verify errors>
7470C05DC6 0000              <verify bad blocks>
7470C05DC8 00000000...       <16 Bytes unused>
7470C05DD8 00000000          volume LBA0 offset(LBAs or stripes? - LBAs will run in >2TiB bug): 0
7470C05DDC 084D383A          # Sectors/member: 976768264
7470C05DE0 98707400          # Stripes/member: 7631000
7470C05DE4 8000              # Sectors/Stripe: 128 ==> stripesize=64KB
7470C05DE6 03                Volume status: FAILED
7470C05DE7 05                RAID Level: RAID-5 Array
7470C05DE8 03                # member disks: 3
7470C05DE9 01                # domains: 1
7470C05DEA 02                failed disk: HDD[2]
7470C05DEB 01                <unused, always 01>
7470C05DEC 00000000...       <28 Bytes unused>
7470C05A08 00000001          member order 1: HDD[0] <Serial=9QM0JZ65:0> *** BAD ***
7470C05A0C 01000000          member order 2: HDD[1] <Serial=9QM0J2LB>
7470C05A10 02000001          member order 3: HDD[2] <Serial=9QM0JZVL:0> *** BAD ***
7470C05A14 === end of metadata ===[/SIZE][/FONT]

Interpretation erfolgt sogleich ...

Die korrekte Reihenfolge der Platten

Serial=9QM0JZ65 MBR stripe in Analyse:HDD1.txt - als zweites ausgefallen - vorheriger Zustand degraded
Serial=9QM0J2LB Datastripe in Analyse:HDD3.txt - als einzige verblieben - letzter Zustand failed
Serial=9QM0JZVL Paritystripe in Analyse:HDD2.txt - als erstes ausgefallen - vorheriger zustand normal - DEFEKT

type: RAID5
volume name: raid5
stripesize=64KB

alles stimmig, weitere Anweisungen folgen sogleich

Spoiler: 3. Sichern&Löschen MBR

HxD Aufruf unter User mit Administratorrechten (oder per Rechtsklick mit ausführen als...)
========= Überprüfen fileseizechange-popup
Menü: Extras/Options... /General: Hier muss bei "confirm insertion/deletion of bytes" das Häkchen gesetzt sein.
- Menü: Extras/open disk/physical disk/hard disk 1 (Häkchen bei "open as readonly" diesmal schon entfernen)
In der Menüzeile rechts neben dem Sektoreingabefeld muss "of 976773168" stehen - wenn nicht, bist Du auf einer falschen Platte - Abbrechen!
Im Sektor 0 muss in der Zeile mit Offset 1B0/1C0(hex) folgendes zu finden sein:
00000001B0 00 00 00 00 00 2C 48 6E 25 D7 07 9D 00 00 80 01 .....,Hn%×....€.
00000001C0 01 00 07 FE FF FF 3F 00 00 00 82 59 70 74 00 00 ...þÿÿ?...‚Ypt..
falls nicht, abbrechen - falsche Platte!

========= löschen MBR Member A
- Menü: Edit/select block/start: 0 ; length: 200 , hex, OK
- Strg+C (Kopiert in die Zwischenablage)
- Menü: Edit/Fill selection/hex values: 00/OK
- Menü: Edit/select block/start: 200 ; length: 200 , hex, OK
- Strg-V (Überträgt aus der Zwischenablage)
- Menü: File/Save (schreibt es auf die Platte zurück) Wenn Fenster Längenänderung aufpoppt, Abbrechen!
- Menü: File/Close

Spoiler: 4. Löschen RAID Volume

- Menü: Extras/open disk/physical disk/hard disk 1 (Häkchen bei "open as readonly" diesmal schon entfernen)
In der Menüzeile rechts neben dem Sektoreingabefeld muss "of 976773168" stehen - wenn nicht, bist Du auf einer falschen Platte - Abbrechen!

========= löschen RAID Metadata A,B,C
mit ">|" und "<" zum vorletzten Sektor positionieren und in der ersten Zeile dieses Sektors das I von Intel von 49 auf 00 ändern
1D1C1115C00 49 6E 74 65 6C 20 52 61 69 64 20 49 53 4D 20 43 Intel Raid ISM C)
- Menü: File/Save (schreibt es auf die Platte zurück)
- Menü: File/Close

Das wiederholst Du mit hard disk 2 und hard disk 3
-HxD beenden

Spoiler: 5. extrahieren NTFSHdr

Im HxD sind die physical hard disk Nummern um 1 höher als in der Datenträgerverwaltung angezeigte Datenträgernummern

HxD Aufruf unter User mit Administratorrechten (oder rechtklick/ausführen als... Administrator)

- Menü: Extras/open disk/physical disk/hard disk 1 (Häkchen bei "open as readonly" NICHT entfernen)

========= extrahieren NTFSHdr
- in der Menüzeile Als Sektoradresse 63 eingeben, Enter um hinzupositionieren
- Menü: Edit/select block/start-offset: (Inhalt belassen) , length: 200, hex, OK
- Menü: Edit/copy as.../ editor view (überträgt den markierten Inhalt in die Zwischenablage)
- Menü: File/New (es erscheint in der Anzeige ein zweiter Reiter "untitled1")
- in das kleine punktierte Rechteck rechts unter ... 0E 0F klicken
- Strg+V (überträgt den Inhalt aus der Zwischenablage) im popup "file size change": OK

- Menü: File/Save as... einen Ordner auswählen und als Dateinamen "NTFSHdr.txt" /speichern
- HxD beenden
.txt gezippt in den Anhang

Danach kannst Du die Platte wieder in den Server verfrachten - ohne der Icy-Box
die Platte 9QM0JZVL solltest Du durch die im Schrank liegende Reserveplatte ersetzen.
In der Eile habe ich vergessen, dass Du die einstweilen auf Fehler checken könntest, wird aber hoffentlich gutgehen.

Platten anschließen, Power ON, mit CTL-I sofort ins RAID-BIOS. Dort muss die untenstehende Reihenfolge angezeigt sein, falls nicht, umkabeln. Sobald das stimmt

9QM0JZ65
9QM0J2LB
Ersatzplatte

den Array neu definieren:

type: RAID5
volume name: raid5
stripesize=64KB
size: max

nach Exit aus dem BIOS-Raidmanager wird das BIOS-POST erneut durchlaufen; sofort wieder mit CTL-I in den RAID-Manager und nachsehen - der definierte Array muss Status NORMAL haben. Auf keinen Fall booten!
POWER OFF
die Reserveplatte abklemmen
Power ON, mit CTL-I sofort ins RAID-BIOS. Dort muss der Array Status degraded aufweisen, die Reserveplatte muss fehlen - sonst hast Du eine falsche abgeklemmt...

Wenn das passt, Exit und (nach Kontrolle der richtigen Bootplatte im BIOS) das System booten+ hochfahren.