Einfaches mdadm RAID 1, das Ersatz nicht aktiviert

Ich hatte erstellt zwei 2TB HDD Partitionen ( /dev/sdb1und /dev/sdc1in einem) RAID 1 - Array namens /dev/md0mit mdadmauf Ubuntu 12.04 LTS Precise Pangolin.

Der Befehl, der sudo mdadm --detail /dev/md0verwendet wird, um beide Laufwerke als aktive Synchronisierung anzuzeigen .

Zum Testen habe ich /dev/sdb1dann einen Fehler gemacht, ihn entfernt und mit dem Befehl erneut hinzugefügtsudo mdadm /dev/md0 --add /dev/sdb1

watch cat /proc/mdstat zeigte einen Fortschrittsbalken für die Wiederherstellung des Arrays, aber ich würde nicht stundenlang damit verbringen, es zu sehen, also nahm ich an, dass die Software wusste, was es tat.

Nachdem der Fortschrittsbalken nicht mehr cat /proc/mdstatangezeigt wurde , wird Folgendes angezeigt:

md0 : active raid1 sdb1[2](S) sdc1[1]
      1953511288 blocks super 1.2 [2/1] [U_]

Und sudo mdadm --detail /dev/md0zeigt:

/dev/md0:
        Version : 1.2
  Creation Time : Sun May 27 11:26:05 2012
     Raid Level : raid1
     Array Size : 1953511288 (1863.01 GiB 2000.40 GB)
  Used Dev Size : 1953511288 (1863.01 GiB 2000.40 GB)
   Raid Devices : 2
  Total Devices : 2
    Persistence : Superblock is persistent

    Update Time : Mon May 28 11:16:49 2012
          State : clean, degraded 
 Active Devices : 1
Working Devices : 2
 Failed Devices : 0
  Spare Devices : 1

           Name : Deltique:0  (local to host Deltique)
           UUID : 49733c26:dd5f67b5:13741fb7:c568bd04
         Events : 32365

    Number   Major   Minor   RaidDevice State
       1       8       33        0      active sync   /dev/sdc1
       1       0        0        1      removed

       2       8       17        -      spare   /dev/sdb1

Mir wurde mitgeteilt, dass mdadm entfernte Laufwerke automatisch durch Ersatzlaufwerke ersetzt, aber /dev/sdb1nicht in die erwartete Position RaidDevice verschoben wird 1.

UPDATE (30. Mai 2012): Ein badblockszerstörerischer Lese- / Schreibtest des gesamten /dev/sdbSystems ergab erwartungsgemäß keine Fehler. Beide Festplatten sind neu.

Seit der letzten Bearbeitung habe ich das Array mit folgendem Befehl zusammengestellt:

sudo mdadm --assemble --force --no-degraded /dev/md0 /dev/sdb1 /dev/sdc1

Die Ausgabe war:

mdadm: /dev/md0 has been started with 1 drive (out of 2) and 1 rebuilding.

Der Wiederaufbau sieht so aus, als würde er normal ablaufen:

md0 : active raid1 sdc1[1] sdb1[2]
      1953511288 blocks super 1.2 [2/1] [U_]
      [>....................]  recovery =  0.6% (13261504/1953511288) finish=2299.7min speed=14060K/sec

unused devices: <none>

Ich warte jetzt auf diesen Umbau, aber ich erwarte /dev/sdb1, ein Ersatzteil zu werden, genau wie die fünf oder sechs Male, die ich zuvor versucht habe, umzubauen.

UPDATE (31. Mai 2012): Ja, es ist immer noch eine Reserve. Pfui!

UPDATE (1. Juni 2012): Ich versuche Adrian Kellys vorgeschlagenen Befehl:

sudo mdadm --assemble --update=resync /dev/md0 /dev/sdb1 /dev/sdc1

Warten auf den Wiederaufbau jetzt ...

UPDATE (02. Juni 2012): Nein, noch ein ...

UPDATE (4. Juni 2012): PB hat ein Problem angesprochen, das ich übersehen habe: Möglicherweise /dev/sdc1sind E / A-Fehler aufgetreten . Ich hatte mich nicht darum gekümmert, es zu überprüfen, /dev/sdc1weil es anscheinend einwandfrei funktionierte und brandneu war, aber E / A-Fehler gegen Ende des Laufwerks sind eine vernünftige Möglichkeit.

Ich habe diese Festplatten zum Verkauf gekauft, daher ist es nicht verwunderlich, dass eine davon bereits ausfällt. Außerdem unterstützt keiner von ihnen SMART . Kein Wunder, dass sie so günstig sind ...

Hier ist die Datenwiederherstellungsprozedur, die ich gerade erfunden habe und die ich befolge:

1. sudo mdadm /dev/md0 --fail /dev/sdb1damit ich raus kann /dev/sdb1.
2. sudo mdadm /dev/md0 --remove /dev/sdb1/dev/sdb1aus dem Array entfernen .
3. /dev/sdc1 ist montiert bei /media/DtkBk
4. Format /dev/sdb1als ext4.
5. Mount /dev/sdb1to /media/DtkBkTemp.
6. cd /media in diesem Bereich zu arbeiten.
7. sudo chown deltik DtkBkTempum mir (Benutzernamen deltik) Rechte für die Partition zu geben.
8. Kopieren Sie alle Dateien und Verzeichnisse: sudo rsync -avzHXShP DtkBk/* DtkBkTemp

UPDATE (06. Juni 2012): Ich habe einen badblocksdestruktiven Schreibmodus-Test durchgeführt /dev/sdc, bei dem folgende Schritte ausgeführt wurden:

1. sudo umount /media/DtkBk Abreißen des Arrays zu ermöglichen.
2. sudo mdadm --stop /dev/md0 um das Array zu stoppen.
3. sudo badblocks -w -p 1 /dev/sdc -s -vUm die verdächtige Festplatte zu löschen und dabei nach E / A-Fehlern zu suchen. Wenn es E / A-Fehler gibt, ist das kein gutes Zeichen. Hoffentlich kann ich eine Rückerstattung bekommen ...

Ich habe jetzt bestätigt, dass es auf beiden Festplatten keine Ein- / Ausgabeprobleme gibt .

Nach all diesen Untersuchungen sind meine beiden ursprünglichen Fragen noch offen.

Meine Fragen sind:

1. Warum wird das Ersatzlaufwerk nicht aktiv synchronisiert?
2. Wie kann ich das Ersatzlaufwerk aktivieren?

Wenn Sie dies tun, wird das Laufwerk einfach in das Array eingespeist, ohne dass tatsächlich etwas damit getan wird. Das heißt, es ist Mitglied des Arrays, aber in diesem nicht aktiv. Standardmäßig wird daraus ein Ersatzlaufwerk:

sudo mdadm /dev/md0 --add /dev/sdb1

Wenn Sie ein Ersatzlaufwerk haben, können Sie es vergrößern, indem Sie die Anzahl der aktiven Laufwerke für das Array erhöhen. Wenn 3 Laufwerke und 2 voraussichtlich aktiv sind, müssen Sie die Anzahl der aktiven Laufwerke auf 3 erhöhen.

mdadm --grow /dev/md0 --raid-devices=3

Der RAID-Array-Treiber stellt fest, dass Sie ein Laufwerk "kurz" haben, und sucht dann nach einem Ersatzlaufwerk. Wenn das Ersatzlaufwerk gefunden wird, wird es als aktives Laufwerk in das Array integriert. Öffnen Sie ein Ersatzterminal und lassen Sie diese ziemlich grobe Befehlszeile darin laufen, um den Fortschritt der Neusynchronisierung im Auge zu behalten. Stellen Sie sicher, dass Sie es als eine Zeile eingeben, oder verwenden Sie das Zeilenumbruchzeichen (\). Wenn die Neuerstellung abgeschlossen ist, geben Sie einfach Strg-C im Terminal ein.

while true; do sleep 60; clear; sudo mdadm --detail /dev/md0; echo; cat /proc/mdstat; done

Ihr Array verfügt nun über zwei aktive Laufwerke, die synchronisiert sind. Da jedoch keine drei Laufwerke vorhanden sind, ist das Array nicht zu 100% sauber. Entfernen Sie das ausgefallene Laufwerk und ändern Sie die Größe des Arrays. Beachten Sie, dass die --growFlagge ist ein wenig irreführend - es kann bedeuten , entweder wachsen oder schrumpfen:

sudo mdadm /dev/md0 --fail /dev/{failed drive}
sudo mdadm /dev/md0 --remove /dev/{failed drive}
sudo mdadm --grow /dev/md0 --raid-devices=2

In Bezug auf Fehler reicht ein Verbindungsproblem mit dem Laufwerk (dh dem PATA / SATA-Anschluss, dem Kabel oder dem Laufwerksanschluss) nicht aus, um ein Failover eines Ersatzlaufwerks auszulösen, da der Kernel normalerweise auf die Verwendung des anderen "guten" Laufwerks umschaltet. Laufwerk, während die Verknüpfung zum "fehlerhaften" Laufwerk zurückgesetzt wird. Ich weiß das, weil ich ein Array mit drei Laufwerken, zwei Hotspots, ein Spare-Laufwerk und eines der Laufwerke verwende, die erst kürzlich beschlossen haben, ein wenig in den Protokollen zu verstecken. Als ich alle Laufwerke im Array getestet habe, haben alle 3 die "lange" Version des SMART-Tests bestanden, sodass es kein Problem mit den Platten, den mechanischen Komponenten oder dem Onboard-Controller gibt - was ein schuppiges Verbindungskabel oder ein Kabel hinterlässt Schlechter SATA-Port. Vielleicht ist es das, was du siehst. Versuchen Sie, das Laufwerk auf einen anderen Motherboard-Port oder ein anderes Kabel umzuschalten, und prüfen Sie, ob es sich verbessert.

Ein Follow-up: Ich habe meine Erweiterung des Spiegels auf 3 Laufwerke abgeschlossen, den Fehler behoben und das flockige Laufwerk aus dem MD-Array entfernt, das Kabel im laufenden Betrieb gegen ein neues ausgetauscht (das Motherboard unterstützt dies) und das Laufwerk neu hinzugefügt. Beim erneuten Hinzufügen wurde sofort eine erneute Synchronisierung des Laufwerks gestartet. Bisher ist kein einziger Fehler im Protokoll aufgetreten, obwohl das Laufwerk stark ausgelastet ist. Also, ja, Laufwerkkabel können schuppig werden.

Ich hatte genau das gleiche Problem und in meinem Fall habe ich festgestellt, dass die aktive RAID-Festplatte während der Synchronisierung Lesefehler hatte. Daher wurde der neue Datenträger erfolgreich synchronisiert und als Ersatzlaufwerk markiert.

Möglicherweise möchten Sie Ihre / var / log / Nachrichten und andere Systemprotokolle auf Fehler überprüfen. Darüber hinaus ist es möglicherweise auch eine gute Idee, den SMART-Status Ihrer Festplatte zu überprüfen:
1) Führen Sie den Kurztest durch:

"smartctl -t short / dev / sda"

2) Zeigen Sie die Testergebnisse an:

"smartctl -l Selbsttest / dev / sda"

In meinem Fall ergab dies ungefähr Folgendes:

=== START OF READ SMART DATA SECTION ===
SMART Self-Test-Protokollstruktur Revisionsnummer 1
Num Test_Description Status Remaining LifeTime (Stunden) LBA_of_first_error
1 Extended Offline Abgeschlossen: Lesefehler 90% 7564 27134728
2 Short Offline Abgeschlossen: Lesefehler 90% 7467 1408449701

Ich musste eine Live-Distribution booten und die Daten manuell von der defekten Festplatte auf die neue (derzeit "Ersatz-") kopieren.

Ich hatte genau das gleiche Problem und dachte immer, dass meine zweite Festplatte, die ich erneut zum Array hinzufügen wollte, Fehler hatte. Aber es war meine ursprüngliche Festplatte hatte Lesefehler.

Sie können dies mit überprüfen smartctl -t short /dev/sdXund die Ergebnisse einige Minuten später mit anzeigen smartctl -l selftest /dev/sdX. Für mich sah es so aus:

=== START OF READ SMART DATA SECTION ===
SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Short offline       Completed: read failure       20%     25151         734566647

Ich habe versucht, sie mit diesem Handbuch zu beheben . Das hat Spaß gemacht :-). Ich weiß, dass Sie beide Datenträger auf Fehler überprüft haben, aber ich denke, Ihr Problem ist, dass der Datenträger, der sich noch im MD-Array befindet, Lesefehler aufweist, sodass das Hinzufügen eines zweiten Datenträgers fehlschlägt.

Aktualisieren

Sie sollten zusätzlich ein smartctl -a /dev/sdX Wenn Sie Current_Pending_Sector> 0 sehen, ist etwas falsch

197 Current_Pending_Sector 0x0012 098 098 000 Old_age Always - 69

Für mich war es definitiv das Problem, dass ich eine Festplatte aus dem RAID entfernt habe, nur um sie zu testen und erneut zu synchronisieren. Die Synchronisierung wurde zur Hälfte abgebrochen. Als ich meine Festplatte überprüfte, die sich noch im RAID-Array befand, meldete smartctl Probleme.

Ich konnte sie mit dem obigen Handbuch beheben und die Anzahl der ausstehenden Sektoren reduzieren. Aber es gab zu viele und es ist eine lange und langweilige Prozedur, also habe ich mein Backup verwendet und die Daten auf einem anderen Server wiederhergestellt.

Da Sie nicht die Möglichkeit hatten, SMART zu verwenden, hat Ihr Selbsttest diese defekten Sektoren vermutlich nicht angezeigt.

Für mich ist es eine Lektion gelernt: Überprüfen Sie Ihre Festplatten, bevor Sie eine aus Ihrem Array entfernen.

Ich hatte ein ähnliches Problem und habe es behoben, indem ich die Anzahl der RAID-Arrays von 1 auf 2 erhöht habe.

mdadm --grow --raid-devices=2 /dev/md1

UPDATE (24. Mai 2015): Nach drei Jahren untersuchte ich die wahre Ursache für die Beeinträchtigung des RAID 1-Arrays.

tl; dr: Eine der Festplatten war defekt, und ich habe das nicht bemerkt, weil ich nur einen vollständigen Oberflächentest mit der guten Festplatte durchgeführt habe.

Vor drei Jahren habe ich nicht daran gedacht, Protokolle zu E / A-Problemen zu überprüfen. Wenn ich nachgesehen hätte /var/log/syslog, hätte ich so etwas gesehen, als ich aufgehört hätte mdadm, das Array neu aufzubauen:

May 24 14:08:32 node51 kernel: [51887.853786] sd 8:0:0:0: [sdi] Unhandled sense code
May 24 14:08:32 node51 kernel: [51887.853794] sd 8:0:0:0: [sdi]
May 24 14:08:32 node51 kernel: [51887.853798] Result: hostbyte=DID_OK driverbyte=DRIVER_SENSE
May 24 14:08:32 node51 kernel: [51887.853802] sd 8:0:0:0: [sdi]
May 24 14:08:32 node51 kernel: [51887.853805] Sense Key : Medium Error [current]
May 24 14:08:32 node51 kernel: [51887.853812] sd 8:0:0:0: [sdi]
May 24 14:08:32 node51 kernel: [51887.853815] Add. Sense: Unrecovered read error
May 24 14:08:32 node51 kernel: [51887.853819] sd 8:0:0:0: [sdi] CDB:
May 24 14:08:32 node51 kernel: [51887.853822] Read(10): 28 00 00 1b 6e 00 00 00 01 00
May 24 14:08:32 node51 kernel: [51887.853836] end_request: critical medium error, dev sdi, sector 14381056
May 24 14:08:32 node51 kernel: [51887.853849] Buffer I/O error on device sdi, logical block 1797632

Um diese Ausgabe in das Protokoll aufzunehmen, suchte ich mit dem folgenden Befehl nach dem ersten problematischen LBA (in meinem Fall 14381058):

root@node51 [~]# dd if=/dev/sdi of=/dev/zero bs=512 count=1 skip=14381058
dd: error reading ‘/dev/sdi’: Input/output error
0+0 records in
0+0 records out
0 bytes (0 B) copied, 7.49287 s, 0.0 kB/s

Kein Wunder, mdgab auf! Ein Array kann nicht von einem fehlerhaften Laufwerk wiederhergestellt werden.

Dank der neuen Technologie (bessere smartmontoolsHardwarekompatibilität?) Konnte ich SMART- Informationen aus dem Laufwerk herausholen, einschließlich der letzten fünf Fehler (von bisher 1393 Fehlern):

root@node51 [~]# smartctl -a /dev/sdi
smartctl 6.2 2013-07-26 r3841 [x86_64-linux-3.13.0-43-generic] (local build)
Copyright (C) 2002-13, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Model Family:     Hitachi Deskstar 5K3000
Device Model:     Hitachi HDS5C3020ALA632
Serial Number:    ML2220FA040K9E
LU WWN Device Id: 5 000cca 36ac1d394
Firmware Version: ML6OA800
User Capacity:    2,000,398,934,016 bytes [2.00 TB]
Sector Size:      512 bytes logical/physical
Rotation Rate:    5940 rpm
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ATA8-ACS T13/1699-D revision 4
SATA Version is:  SATA 2.6, 6.0 Gb/s (current: 3.0 Gb/s)
Local Time is:    Sun May 24 14:13:35 2015 CDT
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART STATUS RETURN: incomplete response, ATA output registers missing
SMART overall-health self-assessment test result: PASSED
Warning: This result is based on an Attribute check.

General SMART Values:
Offline data collection status:  (0x84) Offline data collection activity
                                        was suspended by an interrupting command from host.
                                        Auto Offline Data Collection: Enabled.
Self-test execution status:      (   0) The previous self-test routine completed
                                        without error or no self-test has ever
                                        been run.
Total time to complete Offline
data collection:                (21438) seconds.
Offline data collection
capabilities:                    (0x5b) SMART execute Offline immediate.
                                        Auto Offline data collection on/off support.
                                        Suspend Offline collection upon new
                                        command.
                                        Offline surface scan supported.
                                        Self-test supported.
                                        No Conveyance Self-test supported.
                                        Selective Self-test supported.
SMART capabilities:            (0x0003) Saves SMART data before entering
                                        power-saving mode.
                                        Supports SMART auto save timer.
Error logging capability:        (0x01) Error logging supported.
                                        General Purpose Logging supported.
Short self-test routine
recommended polling time:        (   1) minutes.
Extended self-test routine
recommended polling time:        ( 358) minutes.
SCT capabilities:              (0x003d) SCT Status supported.
                                        SCT Error Recovery Control supported.
                                        SCT Feature Control supported.
                                        SCT Data Table supported.

SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x000b   100   100   016    Pre-fail  Always       -       0
  2 Throughput_Performance  0x0005   136   136   054    Pre-fail  Offline      -       93
  3 Spin_Up_Time            0x0007   172   172   024    Pre-fail  Always       -       277 (Average 362)
  4 Start_Stop_Count        0x0012   100   100   000    Old_age   Always       -       174
  5 Reallocated_Sector_Ct   0x0033   100   100   005    Pre-fail  Always       -       8
  7 Seek_Error_Rate         0x000b   100   100   067    Pre-fail  Always       -       0
  8 Seek_Time_Performance   0x0005   146   146   020    Pre-fail  Offline      -       29
  9 Power_On_Hours          0x0012   097   097   000    Old_age   Always       -       22419
 10 Spin_Retry_Count        0x0013   100   100   060    Pre-fail  Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       161
192 Power-Off_Retract_Count 0x0032   100   100   000    Old_age   Always       -       900
193 Load_Cycle_Count        0x0012   100   100   000    Old_age   Always       -       900
194 Temperature_Celsius     0x0002   127   127   000    Old_age   Always       -       47 (Min/Max 19/60)
196 Reallocated_Event_Count 0x0032   100   100   000    Old_age   Always       -       8
197 Current_Pending_Sector  0x0022   100   100   000    Old_age   Always       -       30
198 Offline_Uncorrectable   0x0008   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x000a   200   200   000    Old_age   Always       -       2

SMART Error Log Version: 1
ATA Error Count: 1393 (device log contains only the most recent five errors)
        CR = Command Register [HEX]
        FR = Features Register [HEX]
        SC = Sector Count Register [HEX]
        SN = Sector Number Register [HEX]
        CL = Cylinder Low Register [HEX]
        CH = Cylinder High Register [HEX]
        DH = Device/Head Register [HEX]
        DC = Device Command Register [HEX]
        ER = Error register [HEX]
        ST = Status register [HEX]
Powered_Up_Time is measured from power on, and printed as
DDd+hh:mm:SS.sss where DD=days, hh=hours, mm=minutes,
SS=sec, and sss=millisec. It "wraps" after 49.710 days.

Error 1393 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  40 51 06 02 70 db 00  Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  25 00 08 00 70 db 40 00   1d+03:59:34.096  READ DMA EXT
  25 00 08 00 70 db 40 00   1d+03:59:30.334  READ DMA EXT
  b0 d5 01 09 4f c2 00 00   1d+03:57:59.057  SMART READ LOG
  b0 d5 01 06 4f c2 00 00   1d+03:57:58.766  SMART READ LOG
  b0 d5 01 01 4f c2 00 00   1d+03:57:58.476  SMART READ LOG

Error 1392 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  40 51 06 02 70 db 00  Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  25 00 08 00 70 db 40 00   1d+03:59:30.334  READ DMA EXT
  b0 d5 01 09 4f c2 00 00   1d+03:57:59.057  SMART READ LOG
  b0 d5 01 06 4f c2 00 00   1d+03:57:58.766  SMART READ LOG
  b0 d5 01 01 4f c2 00 00   1d+03:57:58.476  SMART READ LOG
  b0 d5 01 00 4f c2 00 00   1d+03:57:58.475  SMART READ LOG

Error 1391 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  40 51 06 02 70 db 00  Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  25 00 08 00 70 db 40 00   1d+03:56:28.228  READ DMA EXT
  25 00 08 00 70 db 40 00   1d+03:56:24.549  READ DMA EXT
  25 00 08 00 70 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 10 f0 71 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 f0 00 71 db 40 00   1d+03:56:06.710  READ DMA EXT

Error 1390 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  40 51 06 02 70 db 00  Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  25 00 08 00 70 db 40 00   1d+03:56:24.549  READ DMA EXT
  25 00 08 00 70 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 10 f0 71 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 f0 00 71 db 40 00   1d+03:56:06.710  READ DMA EXT
  25 00 10 f0 70 db 40 00   1d+03:56:06.687  READ DMA EXT

Error 1389 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  40 51 06 02 70 db 00  Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  25 00 08 00 70 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 10 f0 71 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 f0 00 71 db 40 00   1d+03:56:06.710  READ DMA EXT
  25 00 10 f0 70 db 40 00   1d+03:56:06.687  READ DMA EXT
  25 00 f0 00 70 db 40 00   1d+03:56:03.026  READ DMA EXT

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Extended offline    Completed: read failure       90%     21249         14381058

SMART Selective self-test log data structure revision number 1
 SPAN  MIN_LBA  MAX_LBA  CURRENT_TEST_STATUS
    1        0        0  Not_testing
    2        0        0  Not_testing
    3        0        0  Not_testing
    4        0        0  Not_testing
    5        0        0  Not_testing
Selective self-test flags (0x0):
  After scanning selected spans, do NOT read-scan remainder of disk.
If Selective self-test is pending on power-up, resume after 0 minute delay.

Ahh ... das würde es tun.

Jetzt habe ich diese Frage in drei einfachen Schritten gelöst:

1. Werden Sie in drei Jahren Systemadministrator.
2. Überprüfen Sie die Protokolle.
3. Kommen Sie zurück zu Super User und lachen Sie über meinen Ansatz vor drei Jahren .

UPDATE (19. Juli 2015): Für alle, die neugierig sind, sind endlich keine Sektoren mehr verfügbar:

root@node51 [~]# smartctl -a /dev/sdg
smartctl 6.2 2013-07-26 r3841 [x86_64-linux-3.13.0-43-generic] (local build)
Copyright (C) 2002-13, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Model Family:     Hitachi Deskstar 5K3000
Device Model:     Hitachi HDS5C3020ALA632
Serial Number:    ML2220FA040K9E
LU WWN Device Id: 5 000cca 36ac1d394
Firmware Version: ML6OA800
User Capacity:    2,000,398,934,016 bytes [2.00 TB]
Sector Size:      512 bytes logical/physical
Rotation Rate:    5940 rpm
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ATA8-ACS T13/1699-D revision 4
SATA Version is:  SATA 2.6, 6.0 Gb/s (current: 3.0 Gb/s)
Local Time is:    Sun Jul 19 14:00:33 2015 CDT
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART STATUS RETURN: incomplete response, ATA output registers missing
SMART overall-health self-assessment test result: FAILED!
Drive failure expected in less than 24 hours. SAVE ALL DATA.
See vendor-specific Attribute list for failed Attributes.

General SMART Values:
Offline data collection status:  (0x85) Offline data collection activity
                                        was aborted by an interrupting command from host.
                                        Auto Offline Data Collection: Enabled.
Self-test execution status:      ( 117) The previous self-test completed having
                                        the read element of the test failed.
Total time to complete Offline
data collection:                (21438) seconds.
Offline data collection
capabilities:                    (0x5b) SMART execute Offline immediate.
                                        Auto Offline data collection on/off support.
                                        Suspend Offline collection upon new
                                        command.
                                        Offline surface scan supported.
                                        Self-test supported.
                                        No Conveyance Self-test supported.
                                        Selective Self-test supported.
SMART capabilities:            (0x0003) Saves SMART data before entering
                                        power-saving mode.
                                        Supports SMART auto save timer.
Error logging capability:        (0x01) Error logging supported.
                                        General Purpose Logging supported.
Short self-test routine
recommended polling time:        (   1) minutes.
Extended self-test routine
recommended polling time:        ( 358) minutes.
SCT capabilities:              (0x003d) SCT Status supported.
                                        SCT Error Recovery Control supported.
                                        SCT Feature Control supported.
                                        SCT Data Table supported.

SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x000b   099   099   016    Pre-fail  Always       -       2
  2 Throughput_Performance  0x0005   136   136   054    Pre-fail  Offline      -       93
  3 Spin_Up_Time            0x0007   163   163   024    Pre-fail  Always       -       318 (Average 355)
  4 Start_Stop_Count        0x0012   100   100   000    Old_age   Always       -       181
  5 Reallocated_Sector_Ct   0x0033   001   001   005    Pre-fail  Always   FAILING_NOW 1978
  7 Seek_Error_Rate         0x000b   086   086   067    Pre-fail  Always       -       1245192
  8 Seek_Time_Performance   0x0005   146   146   020    Pre-fail  Offline      -       29
  9 Power_On_Hours          0x0012   097   097   000    Old_age   Always       -       23763
 10 Spin_Retry_Count        0x0013   100   100   060    Pre-fail  Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       167
192 Power-Off_Retract_Count 0x0032   092   092   000    Old_age   Always       -       10251
193 Load_Cycle_Count        0x0012   092   092   000    Old_age   Always       -       10251
194 Temperature_Celsius     0x0002   111   111   000    Old_age   Always       -       54 (Min/Max 19/63)
196 Reallocated_Event_Count 0x0032   001   001   000    Old_age   Always       -       2927
197 Current_Pending_Sector  0x0022   100   100   000    Old_age   Always       -       33
198 Offline_Uncorrectable   0x0008   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x000a   200   200   000    Old_age   Always       -       2

SMART Error Log Version: 1
ATA Error Count: 2240 (device log contains only the most recent five errors)
        CR = Command Register [HEX]
        FR = Features Register [HEX]
        SC = Sector Count Register [HEX]
        SN = Sector Number Register [HEX]
        CL = Cylinder Low Register [HEX]
        CH = Cylinder High Register [HEX]
        DH = Device/Head Register [HEX]
        DC = Device Command Register [HEX]
        ER = Error register [HEX]
        ST = Status register [HEX]
Powered_Up_Time is measured from power on, and printed as
DDd+hh:mm:SS.sss where DD=days, hh=hours, mm=minutes,
SS=sec, and sss=millisec. It "wraps" after 49.710 days.

Error 2240 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  10 51 f0 18 0f 2f 00  Error: IDNF 240 sectors at LBA = 0x002f0f18 = 3084056

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  35 00 f0 18 0f 2f 40 00      00:25:01.942  WRITE DMA EXT
  35 00 f0 28 0e 2f 40 00      00:25:01.168  WRITE DMA EXT
  35 00 f0 38 0d 2f 40 00      00:25:01.157  WRITE DMA EXT
  35 00 f0 48 0c 2f 40 00      00:25:01.147  WRITE DMA EXT
  35 00 f0 58 0b 2f 40 00      00:25:01.136  WRITE DMA EXT

Error 2239 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  10 51 5a 4e f7 2e 00  Error: IDNF 90 sectors at LBA = 0x002ef74e = 3077966

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  35 00 f0 b8 f6 2e 40 00      00:24:57.967  WRITE DMA EXT
  35 00 f0 c8 f5 2e 40 00      00:24:57.956  WRITE DMA EXT
  35 00 f0 d8 f4 2e 40 00      00:24:57.945  WRITE DMA EXT
  35 00 f0 e8 f3 2e 40 00      00:24:57.934  WRITE DMA EXT
  35 00 f0 f8 f2 2e 40 00      00:24:57.924  WRITE DMA EXT

Error 2238 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  10 51 40 a8 c6 2e 00  Error: IDNF 64 sectors at LBA = 0x002ec6a8 = 3065512

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  35 00 f0 f8 c5 2e 40 00      00:24:49.444  WRITE DMA EXT
  35 00 f0 08 c5 2e 40 00      00:24:49.433  WRITE DMA EXT
  35 00 f0 18 c4 2e 40 00      00:24:49.422  WRITE DMA EXT
  35 00 f0 28 c3 2e 40 00      00:24:49.412  WRITE DMA EXT
  35 00 f0 38 c2 2e 40 00      00:24:49.401  WRITE DMA EXT

Error 2237 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  10 51 ea be ba 2e 00  Error: IDNF 234 sectors at LBA = 0x002ebabe = 3062462

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  35 00 f0 b8 ba 2e 40 00      00:24:39.263  WRITE DMA EXT
  35 00 f0 c8 b9 2e 40 00      00:24:38.885  WRITE DMA EXT
  35 00 f0 d8 b8 2e 40 00      00:24:38.874  WRITE DMA EXT
  35 00 f0 e8 b7 2e 40 00      00:24:38.862  WRITE DMA EXT
  35 00 f0 f8 b6 2e 40 00      00:24:38.852  WRITE DMA EXT

Error 2236 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  10 51 86 c2 2a 2e 00  Error: IDNF 134 sectors at LBA = 0x002e2ac2 = 3025602

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  35 00 f0 58 2a 2e 40 00      00:24:25.605  WRITE DMA EXT
  35 00 f0 68 29 2e 40 00      00:24:25.594  WRITE DMA EXT
  35 00 f0 78 28 2e 40 00      00:24:25.583  WRITE DMA EXT
  35 00 f0 88 27 2e 40 00      00:24:25.572  WRITE DMA EXT
  35 00 f0 98 26 2e 40 00      00:24:25.561  WRITE DMA EXT

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Short captive       Completed: read failure       50%     23763         869280
# 2  Extended offline    Completed without error       00%     22451         -
# 3  Short offline       Completed without error       00%     22439         -
# 4  Extended offline    Completed: read failure       90%     21249         14381058
1 of 2 failed self-tests are outdated by newer successful extended offline self-test # 2

SMART Selective self-test log data structure revision number 1
 SPAN  MIN_LBA  MAX_LBA  CURRENT_TEST_STATUS
    1        0        0  Not_testing
    2        0        0  Not_testing
    3        0        0  Not_testing
    4        0        0  Not_testing
    5        0        0  Not_testing
Selective self-test flags (0x0):
  After scanning selected spans, do NOT read-scan remainder of disk.
If Selective self-test is pending on power-up, resume after 0 minute delay.

In meinem Fall war es auch eine fehlerhafte Quelldiskette. Obwohl es zu der Zeit so aussah, als ob es nicht so wäre (das / proc / mdstat stieg normalerweise über 99,9% - aber es schlug tatsächlich bei 99,97% fehl, was damit einherging, wann die reguläre Synchronisierung beendet werden würde). Sie müssen also die dmesg(1)Ausgabe überprüfen - es wird Ihnen mitgeteilt, ob Lesefehler vorliegen.

Details zu meinem Fall können Sie dem Debian-Fehler # 767243 entnehmen . Ich habe es endlich geschafft, die Synchronisierung zu beenden, indem ich ein paar fehlerhafte Sektoren auf der Quellfestplatte erzwungen habe (die in meinem Fall zum Glück nicht verwendet wurden, da es sonst zu Datenverlusten gekommen wäre).

Du könntest es versuchen

sudo mdadm --assemble --update=resync /dev/md0 /dev/sdb1 /dev/sdc1

um die Laufwerke zu aktualisieren und neu zu synchronisieren.

Ich bin mir nicht sicher, ob es funktionieren wird, da Sie --adddie Festplatte bereits bearbeitet haben --re-add, es jedoch die Option zu sein scheint, die Sie benötigen.

Oder brauchst du vielleicht auf --growdem Gerät 2 aktive Festplatten mdadm --grow -n 2? Nicht getestet, also sei vorsichtig.

Ich würde empfehlen, sdc1 zu entfernen, den Superblock auf sdc1 auf Null zu setzen und ihn dann erneut hinzuzufügen.

mdadm /dev/md0 -r /dev/sdc1
mdadm --zero-superblock /dev/sdc1
mdadm /dev/md0 -a /dev/sdc1