Volal mi kolega, že jeden zákazník sa sťažuje, že keď mu notebook zaspí, tak po prebudení musí heslo zadávať 2x. Že až druhý pokus o heslo zaberie. Vravím, že to je nejaké prapodivné a že nech sa pozrie do logu, že tam uvidí, či sa vôbec o nejaký prístup snaží, teda či je to problém na našej strane alebo niekde u neho.
Po chvíli sa zistilo, že v logu nič nie je. Podrobnejším skúmaním sa zistilo, že ono sa do logu nič nepíše. Tak poďho reštartovaľ syslog démona. Hmm... nejako sa to zmyslelo a nič. Tak čo už, reštartneme server a uvidíme. Brrr, 5 min a server stále nenabehol, to už začal maj v oblasti žalúdka teké nepríjemné chvenie. Tak som volal na dohľad, nech to reštartujú, že to nenabehlo. .... stále nič, že to píše nejakú nepeknú hlášku a shutdowne sa to. "Ach jo", pomyslel som si. Je na čase to LFS preinštalovať na Gentoo. Tak sa nedá nič robiť idem do serverovne (cez celú Prahu). Po chvíľke zápasenia je to jasné, musím nabootovať z nejakého live-cd (kľudne knoppix alebo gentoo) a urobiť fsck manuálne takto. No hej, ale server nemá CD mechaniku. Tak volám kolegu, aby to doniesol. cca za 30 min je tiež v serverovni. Pripájam CDROM a bootujem. Nahodím softwareový RAID 1 a píšem:
raidstart /dev/md1
mkfs /dev/md1
Hneď po odkliknutí som okamžite stlačil ctr+c. Bolo neskoro. 54 z 245 inodov bol v ľufte, superblock v ľufte. Prekliate fsck. Všade už používam xfs a keď sa napíše mkfs.xsf na živú partition, tak to nechce robiť nič, chce to ďalšie options! Prekilate písmenka, namiesto fsck som napísla mkfs.
Nič sa nedá robiť. Vyberám jeden disk z raidu, dávam ho kelegovi, druhý i so serverom si beriem domov. Kolega hľadá na nete nejaký software a skúša niečo z toho vytiahnúť. Po dvoch hodinách /okolo jednej po polnoci, je z toho dosť vyčerpaný), tak surfujem ja nachádzam softík Stellar Phoenix Linux za 70 €, kde je zdarma k dispozícii demo. Spúšťam demo a väčšina súborov asi pôjde obnoviť, tak to kupujem a teraz to tu už asi hoďku sype data na windowsovký disk.
Takže snáď niekedy dopoludnia budem mať opäť funkčný systém s DNS serverom a mail serverom.
Záverom:
- je tu problém s jedným zákazníkom, tak po reštarte majú problém všetci, bo nebeží server. Koho by už v tej chvíli zaujímal ten jeden zákazník.
- nebeží server, bo neprebhelo fsck, tak sa urobí mkfs, takže nie sú žiadne data. Koho by v tej chvíli zaujímalo, že kvôli fsck nebežal server
Takže ak máte malý problém, vygenerujte väčší, na malý si v tej chvíli už nikto (teda až na toho zákazníka) ani nespomenie....
Komentáre
Alebo o tom, ako...
Teda. Poviem ti, že moc sa v tom nevyznám, ale smrdí to riadnou "sračkou" (alebo ako by si povedal, prúserom). Takže držím palce aby všetko išlo tak, ako má.
mkfs & spol.
Na druhej strane jsem uz obnovoval FS na ostrem clusterovem billingovem systemu (samozrejme na poli) :-)
PS: Nepotrebujete Unix admina?
zalohy
nie uplne najcerstvejsie... prave na februar (unor) sme mali naplanovane, ze tie zalohy poriesime lepsie... takze sme to nestihli :(
Murphy
zalohovani....
vacsina serverov
o zalohovani viem svoje. neexistuje ziadne samospasne riesenie.
Zalezi na mnozstve a charaktere dat.
Grow Your Business with Accounting Software