Boot problemer med RAID1 (not ready yet or not present)

[DICKHILL]

Jeg må sgu beklage, men er lidt i tvivl om hvad fejlen er? (Se vedhæftede billede)
/dev/sda2 nævnes, men nedenunder står der /home.
/home kører som /dev/md0 - Må det vel være, når det er RAID ?

Billedet er taget i dag, men serveren blev genstartet i (vidst nok) søndags, da den skrev at det var nødvendigt grundet nogle opdateringer..
I søndags skrev den præcis det samme, men der var tallene anderledes:
134120/2207520 files, 826062/8815872 blocks


Når den skriver "Continue to wait", går jeg ud fra at jeg bare skal lade den køre?
Men HDD-lampen lyser/blinker ikke og der er heller ingen aktivitet på skærmen...
Så er der noget ragende galt, er det en baggrunds process eller hvordan hænger det samme?


OPSUMERING AF HELE EMNET!
(Samtidig samles alle links, osv. her...)

"BOOT_DEGRADED=false"
- /etc/mdadm/mdadm.conf: http://paste.ubuntu.com/6185292
- mdadm -E /dev/sdb1: http://paste.ubuntu.com/6185209
- mdadm -E /dev/sdc1: http://paste.ubuntu.com/6185207
- /etc/fstab: http://paste.ubuntu.com/6185489
- blkid: http://paste.ubuntu.com/6194555
- /var/log/apt/history.log : http://paste.ubuntu.com/6194474
- mdadm --detail /dev/md0: http://paste.ubuntu.com/6194504


Serveren blev opdateret og genstaret, da jeg blev bedt om det grundet sikkerhedsopdateringer...
Derefter ville den ikke boote op, hvor jeg fik meddelelsen på det vedhæftede billede...
Senere finder jeg ud af at efter 'mdadm --auto-detect', så finder den selv '/dev/md0' med følgende meddelelse:

Kode: Vælg alt

mdadm --auto-detect:
[ 2416.183350] md: invalid raid superblock magic on sdb1
[ 2416.186394] md: invalid raid superblock magic on sdc1

Med 'mdadm --assemble /dev/md0' melder den '/dev/md0 has been started with 2 drives.'
- Ved ikke hvordan jeg tester om det virker, da jeg ikke tør at gøre for meget!

Jeg har forsøgte at ændre UUID i '/etc/fstab' uden held og genstarter jeg, får jeg skærmbilledet som vist på vedhæftet fil, frem igen og kan så starte forfra med nævnte kommandoer...

Hvordan ved jeg ikke, men det fungerer nu! (:
Jeg ændrede mdadm.conf og fstab tilbage som de var før, kørte 'update-initramfs -u', genstartede og så fungerede det igen.. (:

[AJenbo]

Udmeld bart virker det som om scanningen af /dev/sda2 er forskellig fra fejlen om /home.

Nogle harddiske skal have lidt tid til at starte op så det er det du kan vente på, men der er ikke rigtig nogle moderne diske der tager længere tid end bios starten, så der er nok noget galt.

Spring over og se hvad der står i din fstab

[DICKHILL]

Så det er de data sda (system-disken) har om /home der ikke stemmer overens med (home partitionen?

Jeg prøver lige at starte serveren op og skippe..
Vender tilbage inden længe! (o:

[AJenbo]

Ja, eller måske er disken døde

[DICKHILL]

Jeg håber fandeme ikke at de to nye 3TB WD Red er døde allerede, efter 26 dages oppetid!!! :P

Det er jo klart.... Er jo gået over til RSA nøgler, så kan ikke engang logge ind via PuTTY! (o:
Og jeg har tilsyneladende et mongol spejlreflekskamera (og mobil)...
Første billede er med mobilen og dette er med mit DSLR og med lidt hård redigering i Photoshop..

Men jeg ved sgu ikke helt hvad jeg skal kigge efter?
Den skriver jo bare at der er noget remount error på / (/dev/sda2) ?

Og nu booter den jo altså fint op..

[AJenbo]

Det er en konfigurations fil og ikke en log. error= er indstillingen for hvad der skal ske hvis der opstår en fejl, og der skal den altså remounte i følge din fil.

En anden gang kan du bruge programmet pastebinit til at uploade terminal output til internettet:

Kode: Vælg alt

cat /etc/fstab | pastebinit

Så får du et link du bare kan give videre.

Husk at installere pastebinit først:

Kode: Vælg alt

sudo apt-get install pastebinit

Det eneste jeg lige kan se er at scanningen var på / og ikke /home. Det kan være at den ikke kunne sætte RAID op mens den scannede / da konfigurationen for RAID ligger på /. Det er udmeldbart mit bedste bud.

[DICKHILL]

Ohh.. Ja, det er selvfølgelig rigtigt... Det tænkte jeg ikke lige over..
Du skrev bare at jeg skulle kigge på den og da jeg ikke anede hvad jeg skulle kigge efter, så var det nemmere at smide den her..
Jeg takker rigtig mange gange for tippet med pastebinit !! (:
Den skrives lige på huskelisten.. Hehe..



Men hvad er så næste skridt, for det må vel kunne rettes?

- /etc/mdadm/mdadm.conf: http://paste.ubuntu.com/6185292/
- mdadm -E /dev/sdb1: http://paste.ubuntu.com/6185209
- mdadm -E /dev/sdc1: http://paste.ubuntu.com/6185207

'cat /proc/mdstat' skriver kun at der ikke er nogen ubrugte enheder...

"BOOT_DEGRADED=false"
Jeg følte det mest sikkert ikke at lade den boote, hvis der var en fejl..

Kode: Vælg alt

mdadm --auto-detect:
[ 2416.183350] md: invalid raid superblock magic on sdb1
[ 2416.186394] md: invalid raid superblock magic on sdc1

Derefter, så kommer '/dev/md0' frem...

mdadm -D /dev/md0:
mdadm: md decive /dev/md0 does not appear to be active.

Efter lidt søgning, fandt jeg dette: http://www.faqs.org/docs/Linux-HOWTO/Software-RAID-HOWTO.html#ss4.4
Jeg har så ikke den fil de nævner "/etc/raidtab"
Men det virker heller ikke til at mit RAID-setup faktisk eksisterer..

[DICKHILL]

Hah!
Efter 'mdadm --auto-detect' kommer md0 jo frem...
Kører jeg 'mdadm --assemble /dev/md0', så starter det og alt ser umiddelbart fint ud...

Men efter reboot, starter det forfra...
Så det er altså noget med at det ikke bliver "læst" korrekt ved boot.......?

[AJenbo]

Jeg er bange for jeg ikke er godt nok inde i raid til at hjælpe særlig meget her. Jeg har valgt den lidt mere simple løsning blot at have et raid hvor hele filsystemet ligger på. Der er så 3 diske hvor den 3 fungere som hot spare så raid selv kan gendanne sig hvis en af de 2 andre diske fejler.

[DICKHILL]

Jeg syntes bare at det er "spooky" det her...
For det virker jo tilsyneladende... Men der er bare sket et eller andet, siden den pludselig ikke vil boote op..
Og jeg forstår slet ikke nok til at vide hvordan boot-sekvensen overhovedet kører...
(Derfor var det jeg forsøgte at ændre UUID i fstab)

Men du skal hvert fald have tak for hjælpe med at få mig igang med at kigge! (:
(Og også for pastebinit)

[DICKHILL]

Første indlæg er opdateret med kort og direkte beskrivelse af hvad der er sket, tilføjet links, osv...


Skrives der på HDD'erne, som kan "skade", når jeg tilføjer/fjerne diskene fra array'et?
Og hvad med at genskrive GRUB på dem, hvis det er grundet en opdatering at det ikke fungerer længere?


Jeg ved stadig ikke helt hvordan det fungerer, men lærer det jo kun ved at prøve... (:


Jeg kom i tanke om at serveren blev opdateret inden reboot..
Se gerne : /var/log/apt/history.log : http://paste.ubuntu.com/6194474
Om der evt. kunne være noget der er skyld i det.. (: - Ved ikke hvad jeg skal holde øje med?


Jeg ser samtidig at UUID for '/dev/md0' i '/etc/fstab' ikke overens med UUID'et der står i 'blkid', efter jeg har kørt 'mdadm --auto-detect' og 'mdadm --assemble /dev/md0'


####################################

Jeg fik ændret UUID i 'fstab' og 'mdadm.conf' og den starter nu..
Men nu hedder det '/dev/md127' og den melder nogle broken pipe...... :S

- /etc/mdadm/mdadm.conf: http://paste.ubuntu.com/6194597
- mdadm -E /dev/sdb1: http://paste.ubuntu.com/6194601
- mdadm -E /dev/sdc1: http://paste.ubuntu.com/6194602
- /etc/fstab: http://paste.ubuntu.com/6194604
- blkid: http://paste.ubuntu.com/6194605
- /var/log/apt/history.log : http://paste.ubuntu.com/6194474
- mdadm --detail /dev/md127: http://paste.ubuntu.com/6194607
- /proc/mdstat: http://paste.ubuntu.com/6194608

[AJenbo]

Tæker du på slitage? Nej der sker ikke en total sletning af disken når du fjerner den. Mht. til at tilføje så tror jeg den er inteligent nok til kun at skrive forskellen (tager stadig lang tid da den skal læse først). Så det vil jeg ikke mene er et problem.

Du har jo ikke opstarts disken i raid så grub er ikke noget problem.

Følgende kommando burde fortælle hvornår systemet sidst blev genstartet:

Kode: Vælg alt

last reboot | less

Kan ikke lige gennemskue hvad du har fået lavet ved dit raid.

[DICKHILL]

Ja, nu har jeg fået skrevet en masse, så er slet ikke selv med længere.. Hehe..
(Derfor jeg blev alt tilføjet til første indlæg)
Måske emnet bare skulle slettes, så jeg kunne oprette et mere "rent" et?


Hvis der ikke ændres på HDD'ernes indhold ved at tilføje/fjerne dem fra array'et, så er det måske vejen frem, da den vel så samtidig vil opdatere de nødvendige filer med at et nyt array/nye diske er sat i..


sda er ikke på RAID, nej - hvilket nogen nok mener at det burde være..
Jeg har istedet et script til at tage backup af de vigtige filer..


Er der en der kan svare mig på hvorfor UUID i mdadm.conf skrives anderledes end i fstab?

[AJenbo]

Hvis du fjerner alle diske fra et array og tilføjer dem efter følgende ved jeg ikke lige om den glemmer alt data eller genskaber dit array med dataen indtakt. Det jeg tænkte var kun med en disk hvor der stadig var en tilbage i dit array som hade alt data.

[DICKHILL]

Ohh okaay.. Det var meget godt at du lige skriver det! (o:
Men så ved jeg sgu heller ikke hvad jeg skal prøve..
Tror bare at min server's dage er talte og diskene må ryge i min stationære.. /:

Har desværre ikke oplevet andet end problemer med den (og Desktop-versionerne), den sidste måneds tid..
Hvilket virkelig er en skam, da det jo ellers er mere end perfekt, når det endelig kører...