Αποτυχία ελεγκτή RAID υλικού: Εισαγωγή ξένων ρυθμίσεων χωρίς διαγραφή των μονάδων δίσκου σας¶

Όταν η κάρτα ελεγκτή RAID υλικού ενός εταιρικού διακομιστή, όπως μια Dell PowerEdge PERC (H730P, H740P, H755, H840), HPE ProLiant Smart Array (P408i-a, P440ar, E208i, MR416i) ή Broadcom / LSI / Avago MegaRAID (SAS 9361-8i, 9460-16i, 9560-16i"Foreign configuration(s) found on adapter. Press any key to continue or 'C' to load the configuration utility"**, ένα μόνο λάθος πάτημα πλήκτρων μπορεί να καταστρέψει terabyte βάσεων δεδομένων παραγωγής και εικονικών μηχανών σε λιγότερο από δύο δευτερόλεπτα. Στις αρχιτεκτονικές RAID υλικού, η γεωμετρία λωρίδων του πίνακα (επίπεδο RAID, σειρά μονάδας δίσκου, 64 KB / 256 KB μέγεθος λωρίδας και όρια λογικού όγκου LBA) αποθηκεύονται και στο ενσωματωμένο τσιπ NVRAM της κάρτας ελεγκτή και σε έναν κρυφό δεσμευμένο τομέα σε κάθε φυσικό δίσκο SAS/SATA/NVMe που ονομάζεται Μορφή δεδομένων δίσκου (DDF / COD, Configuration on Disk) περιοχή μεταδεδομένων. Όταν μια ολοκαίνουργια κάρτα αντικατάστασης RAID (ή μια υπάρχουσα κάρτα μετά από μια προσωρινή δυσλειτουργία τροφοδοσίας backplane) εκκινείται και βλέπει μονάδες των οποίων ο δίσκος DDF Ο σειριακός αριθμός μεταδεδομένων δεν ταιριάζει με το κενό NVRAM της κάρτας, επισημαίνει αυτές τις μονάδες ως "Foreign". Εάν ένας πανικόβλητος διαχειριστής κάνει κλικ στο "Δημιουργία νέου εικονικού δίσκου" ή "Αρχικοποίηση" νομίζοντας ότι "προσαρτά" τις μονάδες δίσκου ή κάνει κλικ στο "Εκκαθάριση διαμόρφωσης ξένων παραμέτρων" όταν ήθελε να το εισαγάγει, ο ελεγκτής αντικαθιστά τα μεταδεδομένα στο δίσκο και μηδενίζει τις κεφαλές του εικονικού δίσκου. Γνωρίζοντας την ακριβή διαφορά μεταξύ Import Foreign Configuration και Clear Foreign Configuration, πώς να επισημάνετε αριθμούς φυσικής θέσης μονάδας δίσκου πριν αγγίξετε ένα μεμονωμένο κουτί και πώς να χειριστείτε την Καρφιτσωμένη / βρώμικη κρυφή μνήμη πίσω εγγραφής (BBU / CacheVault) και "Punctured Stripe" multi-drive dropoffs θα επαναφέρουν τη συστοιχία σας online με μηδενική απώλεια δεδομένων. Εάν η αποτυχία διακομιστή προκλήθηκε από πυρκαγιά στο δωμάτιο διακομιστή, θερμική διαφυγή ιόντων λιθίου UPS ή έκρηξη σωλήνα νερού, εκκενώστε το δωμάτιο και καλέστε τον τοπικό σας χώρο αριθμούς έκτακτης ανάγκης (911 στις Ηνωμένες Πολιτείες και τον Καναδά, 999 στο Ηνωμένο Βασίλειο, 112 σε όλη την Ευρωπαϊκή Ένωση) αμέσως. Για τη σχετική συστοιχία αποθήκευσης, την εικονική μηχανή και τις επείγουσες περιπτώσεις SSD, ανατρέξτε στους οδηγούς μας Υποβάθμιση της συστοιχίας RAID NAS, αποτυχία πολλαπλών μονάδων δίσκου και ανάκτηση ZFS/Btrfs, Καταστροφή της αλυσίδας στιγμιότυπων εικονικών μηχανών VMDk, VHDX και QCOW2, και SSD NVMe ξαφνική λειτουργία μόνο για ανάγνωση και διάσωσης εφεδρικών μπλοκ.

Κάντε αυτό τώρα¶

1. ΠΟΤΕ μην κάνετε κλικ στο "Initialize", "Fast Initialize" ή "Create New Virtual Disk" σε μονάδες που περιέχουν υπάρχοντα δεδομένα. Στην ορολογία Dell PERC, Broadcom MegaRAID και HPE Smart Array, Initialize ΔΕΝ σημαίνει "ενεργοποίηση και προσάρτηση του δίσκου" (όπως μερικές φορές σημαίνει στα παλαιού τύπου βοηθητικά προγράμματα δίσκου macOS/Windows). Σε υλικολογισμικό RAID υλικού, Initialize σημαίνει FORMAT AND ZERO OUT THE VIRTUAL DISK METADATA AND PARITY BLOCKS. Ακόμη και μια "Γρήγορη εκκίνηση" 3 δευτερολέπτων αντικαθιστά το πρώτο και το τελευταίο megabyte του λογικού τόμου, εξαλείφοντας τον πίνακα διαμερισμάτων GPT, VMware VMFS κεφαλίδα, Windows NTFS Τομέας εκκίνησης Master File Table ή Linux LVM2 / XFS superblock.
2. Βγάλτε έναν μόνιμο μαρκαδόρο τώρα και γράψτε τον ακριβή Αριθμό Φυσικής Υποδοχής / Κόλπου (Bay 0, Bay 1, Bay 2...) σε κάθε δίσκο δίσκου ΠΡΙΝ τραβήξετε έναν μόνο δίσκο. Ενώ το σύγχρονο SNIA DDF Τα μεταδεδομένα αποθηκεύουν ετικέτες ακολουθίας κίνησης σε κάθε δίσκο, παλιότερες αναθεωρήσεις υλικολογισμικού, διαχωρισμένα backplanes ή μη αυτόματες επαναδημιουργίες έκτακτης ανάγκης (No-Init Recovery) βασιστείτε 100 τοις εκατό σε κάθε δίσκο που επιστρέφει στο ακριβώς αρχικό του Enclosure:Slot αριθμός κόλπου. Ποτέ μην βγάζετε τέσσερις μονάδες δίσκου από έναν διακομιστή και μην τις στοιβάζετε χωρίς ετικέτα σε ένα τραπέζι.
3. Μην βγάζετε ποτέ μια υγιή μονάδα δίσκου ή "Rebuilding" και επανατοποθετείτε την ενώ ο διακομιστής είναι ενεργοποιημένος για να "δοκιμάσει εάν κάνει back up." Τη στιγμή που βγάζετε ένα ζωντανό δίσκο SAS/SATA από ένα backplane hot-swap για περισσότερα από 5 δευτερόλεπτα, ο ελεγκτής RAID επισημαίνει τη χρονική σήμανση αυτού του δίσκου ως Failed / Offline ή Foreign. Εάν μια μονάδα δίσκου ήταν ήδη νεκρή σε μια συστοιχία RAID 5 και τραβήξετε αδιάφορα μια δεύτερη μονάδα δίσκου για να δείτε τον αριθμό εξαρτήματος της ενώ ο διακομιστής βρίσκεται σε λειτουργία, απλώς σκοτώσατε τη δεύτερη μονάδα δίσκου στα μάτια του ελεγκτή και διαγράψατε ολόκληρο τον τόμο RAID 5.
4. Κατανοήστε τον κρίσιμο κανόνα του Import vs. Clear: Κατά την αντικατάσταση μιας νεκρής κάρτας RAID (ή αφού όλοι οι δίσκοι πέσουν για λίγο εκτός σύνδεσης μαζί), θέλετε IMPORT. Όταν εισάγετε μια χρησιμοποιημένη ρεζέρβα σε έναν υγιή διακομιστή που λειτουργεί, θέλετε CLEAR.
5. Σενάριο Α (Η κάρτα RAID πέθανε και εγκαταστήσατε μια κάρτα αντικατάστασης, Ή μια δυσλειτουργία τροφοδοσίας/πίσω επίπεδο προκάλεσε τη διαγραφή ολόκληρης της συστοιχίας σας Foreign): Η πραγματική διαμόρφωση ζει στους δίσκους (Configuration on Disk). Πρέπει να επιλέξετε Import Foreign Configuration έτσι η κάρτα αντικατάστασης διαβάζει τη διάταξη της διάταξης από τους δίσκους στη NVRAM της.
6. Σενάριο Β (Ο διακομιστής σας λειτουργεί κανονικά, 1 μονάδα δίσκου πέθανε και σύρατε μια χρησιμοποιημένη μονάδα αντικατάστασης που τραβήξατε από έναν παλιό αποσυρμένο διακομιστή στο Bay 4): Αυτή η χρησιμοποιημένη μονάδα αντικατάστασης έχει παλιά μεταδεδομένα RAID από τον αποσυρθέντα διακομιστή (Foreign). Εάν κάνετε κλικ Import, θα εισαγάγετε τη διάταξη φαντασμάτων του παλιού αποσυρθέντος διακομιστή. Στο σενάριο Β, επιλέγετε Clear Foreign Configuration σε αυτόν τον ενιαίο δίσκο αντικατάστασης έτσι γίνεται Unconfigured Good και ξεκινά την ανοικοδόμηση ως ζεστό εφεδρικό.
7. Εάν δύο ή περισσότερες μονάδες δίσκου έπεσαν εκτός σύνδεσης στο RAID 5 (ή τρεις στο RAID 6), ΜΗΝ εξαναγκάσετε τις μονάδες στο διαδίκτυο και εκτελέστε μια "Ανακατασκευή" πριν από την κλωνοποίηση κάθε μονάδας με ddrescue. Όταν πολλαπλοί δίσκοι αποχωρούν από έναν πίνακα λόγω κατεστραμμένων τομέων (UREs, Μη ανακτήσιμα σφάλματα ανάγνωσης), αναγκάζοντας την παλαιότερη μονάδα δίσκου που απορρίφθηκε να επιστρέψει στο διαδίκτυο δημιουργεί έναν "Απαλαιωμένο Αποσυγχρονισμό Δεδομένων" ή μια "Διατρημένη λωρίδα RAID" που καταστρέφει μόνιμα τις βάσεις δεδομένων. Απενεργοποιήστε τον διακομιστή, συνδέστε τις μονάδες δίσκου σε ένα μη RAID HBA (IT-Mode κάρτα SAS), κλωνοποιήστε κάθε μονάδα δίσκου bit-for-bit σε αρχεία εικόνας και ανακατασκευάστε πρώτα τη διάταξη εικονικά σε λογισμικό μόνο για ανάγνωση.

Δέντρο απόφασης: Αντικατάσταση ελεγκτή RAID υλικού και διαλογή διαμόρφωσης εξωτερικού¶

flowchart TD
    A["Έκτακτη κατάσταση RAID υλικού: Η κάρτα ελεγκτή πέθανε Ή το BIOS αναφέρει «Βρέθηκε διαμόρφωση ξένων παραμέτρων»"] --> B{"Γιατί εμφανίζεται η ειδοποίηση 'Διαμόρφωση εξωτερικού';"}
    B -->|"Περίπτωση 1: Αντικατάσταση νεκρής κάρτας RAID (ή μετακίνηση όλων των δίσκων σε ένα πλαίσιο αντικατάστασης διακομιστή)"| C["Όλες οι φυσικές μονάδες δίσκου είναι υγιείς και διατηρούν τα πραγματικά μεταδεδομένα συστοιχίας σας ('Διαμόρφωση στο δίσκο')"]
    B -->|"Περίπτωση 2: Σφάλμα Backplane / PSU προκάλεσε ταυτόχρονη πτώση πολλαπλών μονάδων δίσκου στον υπάρχοντα διακομιστή σε 'Ξένο'"| D["Power Down Server -> Επαναφορά SAS Backplane Cables & Drive Caddies (σε ακριβείς αριθμημένες θέσεις) -> Boot to Controller BIOS"]
    B -->|"Περίπτωση 3: Μόλις εισαγάγατε 1 μεταχειρισμένο δίσκο αντικατάστασης σε έναν πίνακα που τρέχει και αυτός ο 1 δίσκος λέει 'Ξένο'"| E["ΜΗ ΕΙΣΑΓΩΓΗ: Αυτός ο 1 χρησιμοποιημένος δίσκος περιέχει παλιά μεταδεδομένα από άλλο διακομιστή. επιλέξτε 'CLEAR Foreign Config' ώστε να γίνει Hot Spare"]
    B -->|"Περίπτωση 4: Πολλαπλές μονάδες δίσκου με φυσικό κλικ / απέτυχαν με σφάλματα πολυμέσων (RAID 5 με 2+ κακούς δίσκους)"| F["ΔΙΑΚΟΠΗ: ΜΗΝ επιβάλλετε σε απευθείας σύνδεση ή ανακατασκευάζετε. Συνδέστε μονάδες σε λειτουργία IT HBA, κλωνοποίηση όλων των δίσκων μέσω ddrescue και εικονική ανακατασκευή"]
    C --> G["Εισαγάγετε το BIOS του ελεγκτή (iDRAC / Ctrl+R / F2 System Setup) -> Ανοίξτε την 'Προβολή διαμόρφωσης ξένων παραμέτρων / προεπισκόπηση'"]
    D --> G
    G --> H{"Επιθεωρήστε την οθόνη προεπισκόπησης εξωτερικού: Υπάρχουν ΟΛΕΣ οι μονάδες μελών του Εικονικού Δίσκου και είναι 'Σε σύνδεση';"}
    H -->|"Ναι: Υπάρχουν όλες οι μονάδες δίσκου (ή N-1 στο RAID 5 / N-2 στο RAID 6)"| I["Εκτελέστε «ΕΙΣΑΓΩΓΗ ΔΙΑΜΟΡΦΩΣΗΣ ΞΕΝΟΥ» (ΠΟΤΕ μην κάνετε κλικ στο Clear ή στο Initialize). Ο εικονικός δίσκος τοποθετείται αμέσως άθικτος"]
    H -->|"Όχι: Πάρα πολλοί δίσκοι εξακολουθούν να εμφανίζουν 'Λείπουν' στην Προεπισκόπηση"| J["ΚΑΤΑΡΓΗΣΗ ΕΙΣΑΓΩΓΗΣ: Μην εισάγετε ένα ημιτελές σύνολο λωρίδων. τερματίστε τη λειτουργία και διαγνώστε ποια φυσική μονάδα δίσκου/καλώδιο απέτυχε να περιστραφεί"]

Αναφορά προμηθευτή ανά προμηθευτή: Πώς χειρίζονται τα ξένα μεταδεδομένα η Dell PERC, η Broadcom/LSI MegaRAID και η HPE Smart Array¶

Κάθε μεγάλος προμηθευτής εταιρικών διακομιστών χρησιμοποιεί ελαφρώς διαφορετική ορολογία στη ρύθμιση UEFI HII, Διαχείριση εκτός ζώνης (iDRAC / iLO / XClarity), και το εργαλείο CLI (perccli / storcli / ssacli). Ελέγξτε αυτόν τον ακριβή πίνακα σύγκρισης προμηθευτών προτού πατήσετε ένα μόνο πλήκτρο:

Playbook 1: Ασφαλές βήμα προς βήμα "Εισαγωγή διαμόρφωσης εξωτερικού" σε Dell PERC & LSI MegaRAID¶

Όταν ο διακομιστής Dell PowerEdge ή Supermicro/Lenovo MegaRAID σταματά κατά την εκκίνηση με "Foreign configuration(s) found on adapter", ακολουθήστε αυτήν ακριβώς τη λίστα ελέγχου χειρουργικών 3 βημάτων:

Βήμα 1: Ελέγξτε πρώτα τις λυχνίες LED της φυσικής μονάδας δίσκου και την κατάσταση Spin-Up¶

Πριν εισέλθετε στο μενού του BIOS, περπατήστε στο μπροστινό μέρος του πλαισίου του διακομιστή (ή ανοίξτε Dell iDRAC -> Storage -> Physical Disks) και μετρήστε τα LED της θέσης μονάδας δίσκου: - Γιατί έγινε ο πίνακας Foreign στην πρώτη θέση; - Εάν μόλις αντικαταστήσατε μια νεκρή κάρτα PERC/MegaRAID (ή μετακινήσατε όλες τις μονάδες δίσκου σε ένα πλαίσιο εφεδρικού διακομιστή), βλ. Foreign σε όλες τις μονάδες δίσκου είναι 100 τοις εκατό φυσιολογικό και αναμενόμενο. - Ωστόσο, εάν δεν αλλάξατε την κάρτα RAID και ο διακομιστής επανεκκινήθηκε ξαφνικά σε "Foreign configuration found", σημαίνει πολλές μονάδες δίσκου έπεσαν εκτός σύνδεσης ταυτόχρονα, συνήθως λόγω χαλαρού SAS Mini-SAS HD (SFF-8643 / SFF-8654) καλώδιο backplane, μια αποτυχημένη ράγα τροφοδοσίας backplane ή δύο παλιές μονάδες δίσκου που χτυπούν τους κατεστραμμένους τομείς ταυτόχρονα. - Εάν μια λυχνία LED της θήκης μονάδας είναι εντελώς σκοτεινή (δεν περιστρέφεται): Απενεργοποιήστε τον διακομιστή, απασφαλίστε τη μονάδα δίσκου, περιμένετε 30 δευτερόλεπτα, επανατοποθετήστε σταθερά τη μονάδα δίσκου και ελέγξτε τα καλώδια τροφοδοσίας/δεδομένων του backplane SAS και ενεργοποιήστε ξανά, ώστε να ανιχνεύονται όλοι οι φυσικοί δίσκοι πριν κάνετε προεπισκόπηση της εισαγωγής.

Βήμα 2: Ανοίξτε την οθόνη "Προεπισκόπηση διαμόρφωσης εξωτερικού" (Ποτέ μην εισάγετε τυφλά)¶

1. Εκκινήστε τον διακομιστή και πατήστε F2 (Ρύθμιση συστήματος) στο Dell PowerEdge 13G / 14G / 15G / 16G διακομιστές (ή Ctrl+R σε παλαιότερο 11G / 12G διακομιστές BIOS).
2. Πλοηγηθείτε στο Device Settings -> [Your Dell PERC / MegaRAID Controller] -> Main Menu -> Configuration Management -> Manage Foreign Configuration -> Preview Foreign Configuration.
3. Εναλλακτικά, εάν μπορείτε να εκκινήσετε ένα live Linux Rescue USB ή να συνδεθείτε μέσω SSH/OS, επιθεωρήστε την προεπισκόπηση με ασφάλεια από τη γραμμή εντολών χρησιμοποιώντας perccli ή storcli:

   # Show all detected Foreign Configurations and whether Virtual Disks are complete:
   perccli /c0/fall show all
   # Or on standard Broadcom MegaRAID:
   storcli /c0/fall show preview
   

4. Διαβάστε προσεκτικά την οθόνη προεπισκόπησης:
5. Κοιτάξτε τον Εικονικό δίσκο (VD 0) κατάσταση μέσα στην προεπισκόπηση ξένων: Λέει Optimal (υπάρχουν όλοι οι δίσκοι) ή Degraded (π.χ., 5 από τις 6 μονάδες που υπάρχουν στο RAID 5 ή 6 από τις 8 μονάδες που υπάρχουν στο RAID 6);
6. Κανόνας: Εάν η προεπισκόπηση εξωτερικού δείχνει ότι ο εικονικός δίσκος θα εισαχθεί ως Optimal ή Degraded (Με δυνατότητα τοποθέτησης), είναι ασφαλές να προχωρήσετε στο Βήμα 3.
7. Κατάσταση διακοπής: Εάν η προεπισκόπηση εξωτερικού λέει Offline / Incomplete επειδή εξακολουθούν να λείπουν δύο μονάδες δίσκου από ένα RAID 5 (ή τρεις από ένα RAID 6), STOP: ΜΗΝ κάνετε κλικ ακόμα στην Εισαγωγή. Η εισαγωγή ενώ λείπουν πάρα πολλές μονάδες θα εισαγάγει έναν σπασμένο πίνακα που δεν μπορεί να προσαρτηθεί ή θα αφήσει τις μονάδες που λείπουν εκτός συγχρονισμού. Απενεργοποιήστε τον διακομιστή και μάθετε γιατί οι φυσικοί δίσκοι που λείπουν δεν περιστρέφονται πρώτα στο backplane.

Βήμα 3: Εκτέλεση Import Foreign Configuration¶

1. Μόλις η οθόνη προεπισκόπησης επιβεβαιώσει ότι ο Εικονικός δίσκος έχει ολοκληρωθεί (ή υποβαθμιστεί με δυνατότητα τοποθέτησης), κάντε κλικ στο Import Foreign Configuration και επιβεβαιώστε την προτροπή (ή εκτελέστε perccli /c0/fall import / storcli /c0/fall import).
2. Μέσα σε 3 έως 5 δευτερόλεπτα, ο ελεγκτής διαβάζει το DDF μεταδεδομένα από τους φυσικούς δίσκους, εγγράφει τον χάρτη λωρίδας στη NVRAM του ελεγκτή, μεταφέρει τις μονάδες δίσκου από Foreign πίσω στο Online, και φέρνει τον εικονικό δίσκο Optimal (ή Degraded, έτοιμο για άμεσο αντίγραφο ασφαλείας).
3. Κάντε επανεκκίνηση του διακομιστή. το λειτουργικό σας σύστημα (VMware ESXi, Windows Server, Proxmox / Linux) θα εκκινήσει απευθείας από τον άθικτο τόμο χωρίς να χαθεί ούτε ένα byte.

Playbook 2: Τι θα συμβεί αν κάποιος έκανε ΗΔΗ κλικ στο "Clear Foreign Configuration" (ή τα μεταδεδομένα NVRAM + DDF διαγραφούν και τα δύο);¶

Τι κι αν ένας κατώτερος τεχνικός πανικοβλήθηκε στις 2:00 π.μ., είδε "Foreign configuration found", έκανε κλικ Clear Foreign Configuration (σκουπίζοντας το DDF Τα μεταδεδομένα RAID από τους δίσκους, έτσι κάθε μονάδα δίσκου λέει τώρα Unconfigured Good), και ολόκληρος ο εικονικός δίσκος σας έχει εξαφανιστεί;

ΜΗΝ τα παρατάτε. Τα δεδομένα σας είναι ακόμα 100 τοις εκατό άθικτα στις πιατέλες. Κάνοντας κλικ Clear Foreign Configuration σβήνει μόνο το μικροσκοπικό DDF τομέας διαμόρφωσης στο τέλος των δίσκων. δεν αγγίζει τις λωρίδες δεδομένων χρήστη (LBA 0 μέχρι το τέλος του διαμερίσματός σας).

Ωστόσο, μία λάθος κίνηση κατά την ανάκτηση θα καταστρέψει τα πάντα. Εδώ είναι το ακριβές επαγγελματικό πρωτόκολλο ανάκτησης δεδομένων όταν έχει διαγραφεί μια διαμόρφωση RAID υλικού:

Μέθοδος 1 (Ασφαλέστερη - 100% μηδενικός κίνδυνος για τους αρχικούς δίσκους): Ανακατασκευή εικονικά μέσω HBA + μόνο για ανάγνωση R-Studio / UFS Explorer / mdadm¶

Επαγγελματίες μηχανικοί ανάκτησης δεδομένων ποτέ πειραματίζονται με την "Επαναδημιουργία της συστοιχίας" στους ζωντανούς δίσκους παραγωγής μέσα στο BIOS του ελεγκτή RAID, εάν δεν είναι 100 τοις εκατό σίγουροι για την ακριβή σειρά μονάδας δίσκου, μέγεθος λωρίδας (64 KB, 128 KB, 256 KB), και εναλλαγή ισοτιμίας (Left Asymmetric vs Left Symmetric). 1. Απενεργοποιήστε τον διακομιστή και αφαιρέστε τις αριθμημένες μονάδες δίσκου. 2. Συνδέστε τις μονάδες σε έναν σταθμό εργασίας εξοπλισμένο με προσαρμογέα κεντρικού διαύλου χωρίς RAID SAS (HBA, όπως ένα LSI 9207-8i / 9300-8i έλαμψε να IT-Mode Initiator-Target passthrough firmware) ώστε το λειτουργικό σύστημα να βλέπει κάθε ακατέργαστο μεμονωμένο δίσκο απευθείας χωρίς παρεμβολές RAID BIOS. 3. Ανοίξτε το UFS Explorer RAID Recovery ή το R-Studio Technician: - Και τα δύο εργαλεία διαθέτουν ενσωματωμένους Dell PERC, LSI MegaRAID και HPE Smart Array Heuristic Stripe-Order Detectors που σαρώνουν τους πρωτογενείς τομείς, εντοπίζουν αυτόματα την ακριβή σειρά μονάδας δίσκου, 64 KB / 256 KB μέγεθος μπλοκ λωρίδας, περιστροφή ισοτιμίας και DDF ξεκινήστε τη μετατόπιση στη μνήμη μόνο για ανάγνωση και θα σας επιτρέψετε να αντιγράψετε όλα σας .vhdx, .vmdk, βάσεις δεδομένων SQL και αρχεία απευθείας από τον εικονικοποιημένο πίνακα σε ένα εφεδρικό NAS χωρίς να εγγραφεί ούτε ένα byte στις αρχικές μονάδες SAS.

Μέθοδος 2 (Το τέχνασμα υλικού "Επαναδημιουργία εικονικού δίσκου χωρίς αρχικοποίηση" - μόνο όταν είναι γνωστό το 100% των παραμέτρων)¶

Εάν δεν έχετε ένα IT-Mode HBA και γνωρίζετε με 100 τοις εκατό βεβαιότητα την ακριβή προηγούμενη διαμόρφωση της συστοιχίας Dell PERC / LSI MegaRAID (από εξαγόμενο iDRAC TSR [Αναφορά Τεχνικής Υποστήριξης] αρχείο καταγραφής ή έκδοσης: ακριβής σειρά Physical Disk bay, επίπεδο RAID, ακριβές Stripe Element Size [π.χ. 64 KB στο PERC H730 ή 256 KB στο H740P] και Πολιτική ανάγνωσης/εγγραφής): 1. Στο βοηθητικό πρόγραμμα MegaRAID / PERC BIOS, ανοίξτε Create New Virtual Disk. 2. Επιλέξτε το ίδιο ακριβώς Επίπεδο RAID, τους ίδιους ακριβώς Φυσικούς Δίσκους με την ίδια ακριβώς ακολουθία και το ίδιο ακριβώς Μέγεθος Λωρίδας (64 KB / 256 KB). 3. ΤΟ ΡΥΘΜΙΣΗ ΖΩΗΣ Ή ΘΑΝΑΤΟΥ: Κάτω από το Initialization αναπτυσσόμενο πλαίσιο, βεβαιωθείτε ότι έχει οριστεί σε NO INITIALIZATION (Αφήστε ως No / None; **ΠΟΤΕ ** επιλέξτε Fast Initialize ή Full Initialize). 4. Όταν δημιουργείτε έναν εικονικό δίσκο σε έναν ελεγκτή LSI/PERC με Initialization = No, ο ελεγκτής γράφει ένα ολοκαίνουργιο DDF κεφαλίδα μεταδεδομένων στους δεσμευμένους τομείς στο τέλος των δίσκων, ενώ αφήνει ανέγγιχτο το 100% των υποκείμενων μπλοκ δεδομένων χρήστη. 5. Εκκίνηση σε Live USB Linux μόνο για ανάγνωση (SystemRescue) πρώτα και τρέξε lsblk -f ή fdisk -l: αν σας NTFS, VMFS, ή XFS Τα διαμερίσματα εμφανίζονται αμέσως με τις ετικέτες του συστήματος αρχείων τους άθικτες, η γεωμετρία της λωρίδας ταιριάζει. (Σημείωση: Μην ξεκινήσετε έναν Έλεγχο συνοχής ισοτιμίας στο παρασκήνιο μέχρι να δημιουργήσετε αντίγραφα ασφαλείας όλων των κρίσιμων δεδομένων, γιατί αν μαντέψατε λάθος μέγεθος λωρίδας ή λάθος σειρά μονάδας δίσκου, ένας Έλεγχος συνέπειας θα αντικαταστήσει καλά μπλοκ δεδομένων με κακή ισοτιμία.)

Οδηγός 3: Χειρισμός "Αποτυχίες πολλαπλών μονάδων δίσκου" στο RAID 5 / RAID 6 και την παγίδα "Punctured Stripe"¶

Τι γίνεται αν η συστοιχία RAID 5 των 6 μονάδων σας είναι εντελώς Offline / Dead επειδή το Drive 2 απέτυχε πριν από τρεις μήνες (και κανείς δεν το παρατήρησε επειδή οι ειδοποιήσεις μέσω email δεν είχαν ρυθμιστεί) και το Drive 4 άρχισε να παρουσιάζει σφάλματα πολυμέσων (Bad Blocks / Sense Code 03/11/00) σήμερα το πρωί;

Η ασφαλής διάσωση 4 βημάτων για μια συστοιχία RAID με πτώση πολλαπλών μονάδων δίσκου:¶

1. Εξαγωγή του TTY / Αρχείο καταγραφής συμβάντων του ελεγκτή (perccli /c0 show termlog ή iDRAC TSR) ΠΡΩΤΟΣ:
2. Πριν αγγίξετε οποιαδήποτε κατάσταση μονάδας δίσκου, διαβάστε το εσωτερικό αρχείο καταγραφής τερματικού υλικολογισμικού του ελεγκτή (termlog). Κοιτάξτε τις ακριβείς χρονικές σημάνσεις κατά την οποία έγινε η μετάβαση από κάθε μονάδα δίσκου Online να Failed ή Foreign.
3. Βασικός κανόνας: Η μονάδα δίσκου που τέθηκε εκτός σύνδεσης ΤΕΛΕΥΤΑΙΑ (πιο πρόσφατα, π.χ. πριν από 10 λεπτά σήμερα) έχει 99,999% ενημερωμένα δεδομένα και είναι η μόνη μονάδα δίσκου που μπορεί να αναγκαστεί να επανασυνδεθεί με ασφάλεια (ή να κλωνοποιηθεί) για να προσαρτήσει τον τόμο. Η κίνηση που πέθανε πριν από εβδομάδες ή μήνες (Stale Drive) πρέπει να παραμείνει εκτός του πίνακα.
4. Κλωνοποιήστε την αποτυχημένη μονάδα δίσκου "Most Recently Dropped" σε έναν υγιή κενό δίσκο χρησιμοποιώντας ddrescue (Μέσω IT-Mode HBA):
5. Επειδή η μονάδα δίσκου που έπεσε πριν από 10 λεπτά συνήθως έπεφτε λόγω μιας χούφτας δυσανάγνωστων κακών τομέων (UREs), εξαναγκάζοντας αυτή τη σωματική βλάβη στο διαδίκτυο μέσα στην κάρτα RAID και προσπαθώντας να εκτελέσετε μια ανακατασκευή RAID 14 ωρών, θα αναγκάσει τις κεφαλές ανάγνωσης να σβήσουν και να πεθάνουν εντελώς μετά από 20 λεπτά.
6. Αντίθετα, συνδέστε αυτήν τη μονάδα δίσκου που αποτυγχάνει (και όλες τις άλλες σωζόμενες μονάδες μελών) σε ένα μη RAID IT-Mode SAS HBA και χρήση GNU ddrescue (ddrescue -d -r1 /dev/sdX drive4_clone.img drive4.map) για να απεικονίσει το 99,9999% των αναγνώσιμων τομέων του σε μια υγιή μονάδα δίσκου ή αρχείο εικόνας, παρακάμπτοντας ομαλά τους 3 ή 4 κατεστραμμένους τομείς χωρίς να καταρρεύσει το συγκρότημα κεφαλής.
7. Τοποθετήστε την κλωνοποιημένη συστοιχία σε λειτουργία μόνο για ανάγνωση και αντιγράψτε τα κρίσιμα δεδομένα πριν την ανακατασκευή:
8. Μόλις κλωνοποιηθεί η μονάδα που αποτυγχάνει (ή εάν αναγκαστείτε τη μονάδα δίσκου που αποτέθηκε πιο πρόσφατα στο διαδίκτυο στο BIOS του ελεγκτή), προσαρτήστε τον τόμο του λειτουργικού συστήματος σε λειτουργία Μόνο για ανάγνωση (mount -o ro,norecovery) και εκκενώστε τις πιο κρίσιμες βάσεις δεδομένων σας, .vhdx/.vmdk αρχεία και λογιστικές κοινοποιήσεις σε εξωτερικό NAS αμέσως.
9. Πώς να διαγράψετε μια "τρυπημένη διάταξη" μετά τη δημιουργία αντιγράφων ασφαλείας των δεδομένων σας:
10. Μόλις ένας εικονικός δίσκος Dell PERC ή LSI MegaRAID παρουσιάσει διάτρητη λωρίδα (υποδεικνύεται στο αρχείο καταγραφής ελεγκτή από Patrol Read can't fix bad block ή Strip is punctured), καμία ποσότητα εναλλαγής μονάδων δίσκου ή εκτέλεσης ελέγχων συνέπειας δεν θα αφαιρέσει τη σημαία διάτρησης από τον Εικονικό Δίσκο.
11. Αφού δημιουργήσετε αντίγραφα ασφαλείας για το 100 τοις εκατό των αρχείων/VM από τη διάτρητη συστοιχία: πρέπει να Διαγράψετε τον Εικονικό Δίσκο, Ενεργοποιήσετε πλήρως έναν ολοκαίνουργιο Εικονικό Δίσκο σε υγιείς μονάδες δίσκου, να δημιουργήσετε ξανά το χώρο αποθήκευσης δεδομένων/διαμέρισμα και να επαναφέρετε τα δεδομένα σας από το αντίγραφο ασφαλείας.

Περιφερειακοί αριθμοί έκτακτης ανάγκης και πρωτόκολλα πρακτορείων¶

Συχνές ερωτήσεις¶

Ποια είναι η ακριβής διαφορά μεταξύ του "Εισαγωγή διαμόρφωσης ξένων παραμέτρων" και του "Εκκαθάριση διαμόρφωσης ξένων" στο Dell PERC / MegaRAID;¶

Σκεφτείτε το `Foreign` επισημάνετε ως τον ελεγκτή RAID που ρωτά: "Η διαμόρφωση RAID που είναι γραμμένη σε αυτούς τους σκληρούς δίσκους δεν ταιριάζει με την εσωτερική μνήμη της κάρτας μου. Ποια είναι η αλήθεια;" `Import Foreign Configuration` λέει στον ελεγκτή: "Οι σκληροί δίσκοι έχουν την αλήθεια. Αντιγράψτε τη διαμόρφωση RAID ΑΠΟ τους σκληρούς δίσκους ΣΤΗΝ κάρτα του ελεγκτή και προσαρτήστε τον τόμο μου χωρίς να σβήσετε τίποτα." Χρήση `Import` κάθε φορά που αντικαθιστούσατε μια νεκρή κάρτα RAID, μετακινούσατε όλες τις μονάδες δίσκου σας σε έναν νέο διακομιστή ή είχατε μια δυσλειτουργία τροφοδοσίας/πίσω επιπέδου που έσκαγε την υπάρχουσα συστοιχία σας εκτός σύνδεσης. `Clear Foreign Configuration` λέει στον ελεγκτή: "Διαγράψτε τα μεταδεδομένα RAID από αυτές τις ξένες μονάδες δίσκου και μετατρέψτε τις σε κενές `Unconfigured Good` δίσκους." Χρήση `Clear` ΜΟΝΟ όταν σύρετε μια χρησιμοποιημένη εφεδρική μονάδα δίσκου (που προέρχεται από έναν παλιό αποσυρμένο διακομιστή) σε έναν υγιή διακομιστή που λειτουργεί και θέλετε να σκουπίσετε τα παλιά μεταδεδομένα αυτής της εφεδρικής μονάδας, ώστε να μπορεί να ξαναδημιουργηθεί ως καυτό εφεδρικό.

Μπορώ να βγάλω όλες τις μονάδες SAS/SATA από μια νεκρή Dell PowerEdge R740 (με νεκρή μητρική πλακέτα) και να τις συνδέσω σε μια εφεδρική Dell PowerEdge R730 ή R750 για να εκκινήσω αμέσως τον διακομιστή μου;¶

Ναί. Αυτό ονομάζεται Περιαγωγή Δίσκου ή Μετανάστευση Συστοιχιών και SNIA `DDF` Τα μεταδεδομένα (Disk Data Format) τα καθιστούν αξιόπιστα σε όλη την Dell PERC (`H330`, `H730`, `H740P`, `H755`) και ελεγκτές Broadcom MegaRAID, με την προϋπόθεση ότι ακολουθείτε τρεις κανόνες: (1) Επισημάνετε κάθε δίσκο μονάδας με τον ακριβή αριθμό της θέσης (`Bay 0` μέσω `Bay N`) και τοποθετήστε τα στον διακομιστή αντικατάστασης με την ίδια ακριβώς σειρά. (2) Βεβαιωθείτε ότι το υλικολογισμικό του ελεγκτή RAID του διακομιστή αντικατάστασης είναι στην ίδια ή νεότερη κύρια έκδοση και ότι υποστηρίζει το επίπεδο RAID που χρησιμοποιείται. και (3) Κατά την εκκίνηση στον διακομιστή αντικατάστασης, εισαγάγετε το PERC BIOS, κάντε προεπισκόπηση της Διαμόρφωσης εξωτερικού και επιλέξτε `Import Foreign Configuration`.

Γιατί το HPE Smart Array έδειξε το "1785 - Slot 0 Drive Array Not Configured" στο POST και γιατί πατάει F2 μοιραίο;¶

Στην Hewlett Packard Enterprise (`HPE`) Διακομιστές ProLiant που χρησιμοποιούν ελεγκτές Smart Array, εάν το καλώδιο τροφοδοσίας του SAS backplane είναι χαλαρό ή το ράφι της μονάδας χρειάζεται πολύ χρόνο για να περιστραφεί κατά την εκκίνηση, ο ελεγκτής εμφανίζει ένα μήνυμα POST όπως π.χ. `1785 - Drive Array Not Configured` ή `1789 - Disk Drive(s) Respond` ακολουθούμενη από επιλογές όπως `Press F1 to continue` ή `Press F2 to accept data loss and re-enable logical drive`. Ποτέ μην πιέζετε `F2` χωρίς να διαβάσετε προσεκτικά την ακριβή προτροπή: σε πολλές γενιές υλικολογισμικού Smart Array, πατώντας `F2` όταν λείπουν προσωρινά οι μονάδες δίσκου, λέει στον ελεγκτή να αποδεχτεί τη μόνιμη απώλεια του τόμου που λείπει ή να αρχικοποιήσει εκ νέου τα μεταδεδομένα της λογικής μονάδας δίσκου. Αντίθετα, απενεργοποιήστε αμέσως, στερεώστε το χαλαρό καλώδιο SAS ή την εξωτερική τροφοδοσία ραφιού, ώστε όλες οι μονάδες να περιστρέφονται μαζί και επανεκκινήστε.

Μπορώ να βγάλω μια μονάδα δίσκου από μια συστοιχία Hardware RAID 5 ή RAID 10, να τη συνδέσω σε μια βάση USB-to-SATA στον υπολογιστή μου με Windows και να αντιγράψω τα αρχεία μου;¶

Για RAID 5, RAID 6, RAID 0 ή RAID 10 (με 4+ μονάδες): Όχι. Σε ριγέ συστοιχίες, κάθε μεμονωμένο αρχείο μεγαλύτερο από το μέγεθος λωρίδας (`64 KB` να `256 KB`) τεμαχίζεται σε μικροσκοπικές κορδέλες 64 kilobyte σε όλες τις μονάδες δίσκου ταυτόχρονα, παρεμβαλλόμενες με μπλοκ ισοτιμίας XOR. Η σύνδεση μιας μονάδας RAID 5 σε έναν υπολογιστή με Windows θα εμφανίσει ένα μη αναγνώσιμο διαμέρισμα και εάν κατά λάθος κάνετε κλικ στο "Initialize Disk (`MBR/GPT`)" αναδυόμενο σε αυτήν τη μονάδα δίσκου, θα αντικαταστήσετε τους πρώτους τομείς του Stripe 0. (Η μόνη εξαίρεση είναι ένας καθρέφτης RAID 1 2 μονάδων: σε έναν απλό καθρέφτη RAID 1 2 μονάδων δίσκου, κάθε δίσκος περιέχει ένα πλήρες γραμμικό αντίγραφο του τόμου και μπορεί να τοποθετηθεί μόνο για ανάγνωση σε μια μη RAID SATA/SAS θύρα που δεν μπορεί ποτέ να επαναφέρετε τη θύρα εκκίνησης. την κάρτα RAID.)

Η ανακατασκευή του RAID 5 μου έχει κολλήσει στο 47% και ο διακομιστής μόλις και μετά βίας αποκρίνεται. Πρέπει να κάνω επανεκκίνηση του διακομιστή ή να ακυρώσω την ανακατασκευή;¶

Πρώτον, μην απενεργοποιείτε τον διακομιστή, εάν οι λυχνίες LED δραστηριότητας μονάδας αναβοσβήνουν ακόμα. Όταν μια ανακατασκευή υλικού RAID 5 ή RAID 6 επιβραδύνεται σε ανίχνευση (για παράδειγμα, πέφτει από 150 MB/sec σε 0,5 MB/sec στο 47 τοις εκατό), σχεδόν πάντα σημαίνει ότι μία από τις σωζόμενες μονάδες πηγής έχει χτυπήσει μια ενημερωμένη έκδοση κώδικα αδύναμων/εξευτελιστικών μαγνητικών τομέων και ξοδεύει 8 δευτερόλεπτα (ανά τομέα που εκτελεί εσωτερικά ERC`Error Recovery Control`) επαναλήψεις ανάγνωσης. Ενώ εξακολουθείτε να έχετε πρόσβαση στον μονταρισμένο τόμο μέσω του δικτύου (ακόμα και αν είναι αργός), αντιγράψτε αμέσως τα πιο κρίσιμα αντίγραφα ασφαλείας της βάσης δεδομένων, τα οικονομικά αρχεία και τις ρυθμίσεις παραμέτρων VM από τον διακομιστή σε ξεχωριστή μονάδα NAS ή USB, γιατί εάν αυτή η προβληματική μονάδα πηγής εγκαταλείψει εντελώς πριν φτάσει στο 100%, η αναδόμηση θα ματαιωθεί και ο τόμος μπορεί να γίνει εκτός σύνδεσης.

Σχετικοί οδηγοί¶

• Υποβάθμιση της συστοιχίας RAID NAS, αποτυχία πολλαπλών μονάδων δίσκου και ανάκτηση ZFS/Btrfs
• Καταστροφή αλυσίδας στιγμιότυπων εικονικών μηχανών VMDK, VHDX και QCOW2
• Αποτυχία σκληρού δίσκου και ανάκτηση δεδομένων
• SSD NVMe ξαφνική λειτουργία μόνο για ανάγνωση, 0% εφεδρικά μπλοκ και TRIM απενεργοποίηση διάσωσης

Πηγές και επίσημες οδηγίες¶

• Storage Networking Industry Association (SNIA): Κοινή μορφή δεδομένων δίσκου RAID (DDF) Τεχνική προδιαγραφή (Έκδοση 2.0), τυποποίηση μεταδεδομένων διαμόρφωσης στο δίσκο (COD) και εισαγωγή ξένων παραμέτρων σε εταιρικούς ελεγκτές RAID.
• Μηχανική τεκμηρίωση της Dell Technologies Enterprise: Ελεγκτής RAID Dell PowerEdge (PERC 9 / 10 / 11 / 12) Οδηγός χρήστη: Διαχείριση ξένων διαμορφώσεων, διατηρημένη κρυφή μνήμη (Pinned Cache), και Επίλυση διάτρητων λωρίδων RAID (SLN156890 / 000139251).
• Broadcom Inc. (πρώην LSI / Avago): Οδηγός χρήσης λογισμικού MegaRAID SAS και StorCLI Εγχειρίδιο αναφοράς (/cX/fall show preview και /cX/fall import Ξένες εντολές διαμόρφωσης).
• Hewlett Packard Enterprise (HPE): Οδηγός χρήσης HPE Smart Array SR Gen10 / Gen11 και Οδηγός αντιμετώπισης προβλημάτων (Reserved Information Sector RIS Μεταδεδομένα και Κωδικοί σφαλμάτων POST 1785 να 1799).
• Εθνικό Ινστιτούτο Προτύπων και Τεχνολογίας (NIST): Special Publication 800-209 (Security Guidelines for Storage Infrastructure) και SP 800-88 Rev. 1 (Guidelines for Media Sanitization).