Libertonia fuera de combate unas horas
|
|
Por iarenaza
departamento oomk-haciendo-de-las-suyas , Sección Meta Puesto a las Sun Jul 6th, 2003 at 12:51:42 PM CET
|
|
Me imagino que ya lo habréis notado, pero en todo caso ahí va la consabida nota oficial. Desde ayer sábado (2003.07.05) a las 18:25 mas o menos hasta hoy a las 11:19 CET DST, libertonia ha estado inaccesible. Bueno, en realidad no sólo libertonia, sino todas las webs alojadas en el mismo servidor. El servidor ha estado de pie todo el rato, sólo que nuestro amigo OOM-K (Out Of Memory Killer) ha estado jugando al quake con los procesos del sistema (especialmente con MySQL y Apache) y ha dejado el sistema con la mitad de los servicios muertos (incluyendo ssh).
|
Como el que escribe estas líneas no consulta Libertonia cada dos por tres (¡hereje!, ¡hereje!), no ha sido consciente del hecho hasta hoy a las 10:45 CET DST, momento en el cual me he acercado al bunker donde está alojado eriador para tratar de ver que rayos pasaba y poner en marcha el tinglado. Resultado: imposible entrar en sesión ni siquiera desde la consola (init estaba para tudela tambien, gracias a OOM-K. (tiramos los logs de syslog en una consola virtual adicional que estaba llena de mensajes de OOM-K diciendo que se cargaba esto, y aquello, y eso otro también, y no dejando títere con cabeza).
Menos mal que tenemos el kernel de esa máquina compilado con soporte para Magic SysRq y he podido hacer un reinicio ordenado de la máquina. Tras el reinicio he estado mirnado los logs con más detalle y no he visto ningún patrón especial que indique algún tipo de ataque, sólo que OOM-K ha empezado por cargarse procesos de MySQL (y detrás ha ido Apache, al no poder establecer conexiones a MySQL desde las webs con acceso a BBDD), así que igual ha sido algo fortuito.
Una pena, porque nuestro uptime de 135 días se ha ido al garete, pero tampoco es tan grave, porque le ibamos a poner un kernel nuevo al equipo en menos de 5 días.
Saludos. Iñaki. |
|
|