[nadmuchane_jaja]

#unix #linux #informatyka #serwery

Co jest grane? W szoku jeszcze jestem. Dzisiaj PIERWSZY RAZ od 8 lat zawiesił mi się proces httpd na unixie. Sam z siebie, po prostu się zamroził, przestał odpowiadać, nie robił nic... leżał jak leń. Jeszcze nie mogę wyjść ze zdziwienia. Musiałem go ręcznie zrestartować. Kto mi teraz zrekompensuje mój uszczerbek psychiczny? Taki rozpieszczony 8 letnią karierą admina teraz nie będę mógł zasnąć, że może się to wydarzyć jeszcze raz. Jak w ogóle, kto to zrozumie?! O co chodzi?! #heheszki


Ostatni restart systemu 245 dni temu z powodu awarii zasilania awaryjnego :D Wcześniej NIGDY, ale to NIGDY nie restartowałem usługi. Żadnej! Ehhh...

#konieczaludosiebie

[villager]

@nadmuchane_jaja: znam ten ból ;) profesjonaliści mają zasadę że w takiej sytuacji nigdy nie ubijają procesu tylko robią dump do późniejszej analizy, inaczej faktycznie - o spokój psychiczny będzie trudno

[pkh]

@villager: hmmm jak bys zrobil taki dump? zawartosc folder proc dla danego pida?

[villager]

@pkh: myślę że memory dump + backtrace wszystkich wątków z gdb. wiem że podobnie robią sysadmini ovh w podobnych sytuacjach.

[napcok]

@nadmuchane_jaja: 8 lat nie restartowane usługi.... hmm, ciekawe. A co z aktualizacjami?

[m.....l]

@nadmuchane_jaja: apacz aktualny ? Logi czyste ? Wstał bez błędów ?

[bob_kelso]

@nadmuchane_jaja: od 245 dni nie aktualizowales kernela? (o innych pakietach nie wspominając)

[kolejneusunietekonto]

@nadmuchane_jaja: ustawic dumpa jak chce sie bawic (ale to na dump'a trzeba czekac... jak juz wystapil to raczej nie zrzucisz tego co jest... pozatym ulimit na coredump'a musi byc ustawiony), ale imo najlepiej co 3msc robic kontrolny reboot ;) nigdy nie wiesz czy np. sektory na dysku nie siadly etc.

[kolejneusunietekonto]

@bob_kelso: root@XXX [~]# w
22:08:02 up 390 days, 11:17, 1 user, load average: 8.02, 8.59, 8.47

root@XXX [~]# uname -a
Linux XXX 2.6.18-308.11.1.el5 #1 SMP Tue Jul 10 08:48:43 EDT 2012 x8664 x86

[bob_kelso]

@kolejneusunietekonto: zdajesz sobie sprawę, że przez 390 dni (nie mówiąc o 2000) wyszło 'kilka' poprawek bezbieczeństwa?

[kolejneusunietekonto]

@bob_kelso: nie kazda wymaga rebootu maszyny ;) zreszta nie kazda maszyna jest tez wystawiona na swiat. Ja osobiscie nie lubie takiej praktyki zeby miec jak najwiekszy uptime, ale nie zawsze ma sie decydujace slowo :)

[nadmuchane_jaja]

@murgal: tak, wystarczyło dać restart i wszystko się kręci jak przed tą 'awarią' :) po prostu nigdy wcześniej na unixie nie zdarzyło mi się tak, żeby jakaś usługa bez kombinacji/grzebalstwa się powiesiła od tak :)
@kolejneusunietekonto: kiedyś był taki projekt uptime gdzie instalowało się programik, a potem chwaliło na forach ile czasu maszyna zyje - wtedy moim rekordem były 2,5 roku - ale to nie były czasy 'bezpieczeństwa'

[m.....l]

@nadmuchane_jaja: dziwne, a hardware sprawny? Obstawiam problem z dyskiem albo ramem, apacz od tak się nie wiesza..

[nadmuchane_jaja]

@murgal: nic nie zgłasza problemu :) sam się zdziwiłem tym bardziej, że dosłownie 'widziałem' jak umiera... patrzyłem na htop i nagle zrobiło się kilkadziesiąt childprocesów i stanęło... spróbowałem odpytać bramę SOAP i nic, zero... pingi do maszyny szły, SSH mnie wpuszczało, wszystko cacy tylko httpd nie odpowiadał... sprawdzałem z localhosta, próbowałem telnetem, z różnych sieci, etc. nic... restartnąłem usługę i wszystko pracuje :) dziwoląg - jakby to był host wystawiony