Tanulságos eset esett meg velem este.
Na szóval, tegnap észrevettem, hogy a Nagios (monitorozó rendszer) "null()" értéket ad vissza az egyik HP GL380 G6 gép fizikai állapotára (meghajtók, ventik, táp...stb). Minezt természetesen zöld, vagyis minden fasza státusszal.
Nosza, megnézem mi a nyűgje, baja. Pár HP driver és utility hiányzott. Előtúrtam a CD, felraktam a szükséges toolokat, a Nagios megjavult, mindenki örül, ma sem hiába keltem fel... Persze újra kellett volna indítani a gépet, amit nem tehetek meg napközben, mivel használják (multi cég, kemény SLA-val). Kinéztem egy szabad időpontot, amikor nem fut semmilyen ütemezett feladat (0:00). Ezzel nincs baj, úgyis tolom a gamet legalább addig.
Otthonról csak VPN-en keresztül tudok bejutni, erre pedig az Aventail nevű programot használjuk. Katt az ikonra, 4. próbálkozásra kitalálom a jelszavam, látszólag bent vagyok. Távoli asztal -> nem található a host. WTF? Megnéztem a hálózati kapcsolatokat (ugye a VPN létrehoz egy virtuális adaptert), de az Aventail nincs kapcsolódva. Nosza csatlakozok onnan is. #VPN Kiírja, hogy gond van a service állapotával, restartoljam a gépet és jó lesz. Na azt már nem - gondoltam -, majd megerőszakolom, logout, login, úrja próba -> ugyanaz. Na akkor reboot.
Login után azt írja csatlakozáskor, hogy az Aventail service nem fut. Oké, elindítottam kézzel, csatlakozok, megy a távoli asztal is, hurrá!
Tolok egy restartot a szerverre, Nagios fél percen belül jelzi, hogy "Host is down" (ez megérne még egy misét, miszerint a Nagios által legkisebb lekezelhető időegység 1 perc). A szerver tetű lassan bootol, legalább 5 perc. 7 perc után semmi, kezdek izzadni, nyomogatom a Nagstamon-ban (a nagioshoz egy desktop kliens státuszt nézni) a recheck-et a hostra, semmi. A VPN ledobott, GOTO VPN.
Eltelt 10 perc, VPN megy, a gép viszont nem. Ekkor volt 0:40, kezdek izzadni. Na mi legyen? Elrobbantok még egy cigit (ez már vagy a 4. a folyamat során). Nincs más hátra, be kell menni. Az irodától nettó 9 percre lakok (gyalog), gyorsan bemegyek. A biztonsági őr (Béla bá') nyit ajtót, kérdi mi a látogatásom oka? Full leizzadva mondom, hogy leállt az egyik gép. Erre teljes átéléssel a következő mondja: "Ne bazd má'!". De bizony, nem látogatni jöttem 1 órakor .
Berongyolok a szerverszobába, a gép státusz ledjei zöldek. Irány a konzolszoba. Bekapcsolok egy monitort, KVM-et átcsattintom, erre mi fogad?
Bizony, benne maradt a CD és onnan bootolt be a gép. Kitépem a CD-t, reboot, elindul, belépek, elindítom a serviceket és minden faja.
Kifelé menet Béla bá' örömmel észlelte, hogy nincs nagy baj. lekezeltünk és elindultam haza. 1:30-ra ágyban voltam.
Tapasztalat: Szerverben nem hagyunk CD-t annál tovább, mint amennyit használjuk