Detalles sobre el mantenimiento de los servidores

Categoría: Frozen-Layer Tags: gentoo, mantenimiento, servidores

Como os habréis dado cuenta estos últimos dos días los servidores de Frozen-Layer han estado caídos bastante tiempo. Os comento mas o menos lo que ha pasado.

El jueves se me ocurrió instalar en el servidor de la base de datos (que también tiene el tracker y las dns) MoBlock en lugar de peerguardian que es lo que teniamos puesto y no estaba funcionando muy bien. Resulta que MoBlock necesitaba una función del kernel que no estaba en la versión que teníamos instalada así que decidí actualizar todo el sistema y el kernel de los dos servidores. Hay que tener en cuenta que desde el 2006 no habíamos hecho una actualización completa del sistema operativo. Si que habíamos actualizado los servicios que se utilizan públicamente como el servidor web ( lighttpd ), la base de datos ( mysql5 ) o los servidores de correo pero nunca habíamos actualizado el resto de paquetes ni el kernel.

La distribución que tenemos instalada es gentoo que por suerte está diseñada para poder actualizar sin problemas a pesar de tener una versión con años de antigüedad. Al contrario de otras distribuciones como fedora o ubuntu en gentoo no existen las reselases que salen cada X tiempo y que suele ser un coñazo actualizar (a veces con una maquina tan vieja es mejor reinstalar). La actualización de mas de 200 paquetes en cada uno de los servidores se hizo sin problemas durante unas 12 horas del viernes (gentoo compila todos los paquetes) y los servicios funcionaban correctamente con las versiones nuevas. El problema vino el día siguiente cuando me puse a recompilar el kernel y cuando por error me cargué el archivo de configuración del servidor web perdiendo toda la estructura de urls y subdominios que teníamos montada (que no es precisamente simple). Al recompilar el kernel en uno de los servidores descubrí que tal y como me temia no arrancaba así que cogí el coche y me fui hasta el CPD donde tenemos los servidores que está a 20 minutos de mi casa. Allí estuve con Salax y mas tarde Paclo durante unas cuantas horas actualizando y dejando las dos maquinas funcionando (si alguien quiere detalles que pregunte pero básicamente pasamos de genkernel a uno propio y la actualización de udev nos jodió los interfaces de red).


Como servidor web llevábamos años utilizando lighttpd porque nos gustaba bastante más que apache pero dentro de un par de semanas tenía planeado volver a apache ya que Modrails ( www.modrails.com ) actualmente es mucho mejor que lighttpd+fastcgi+rails o que nginx+mongrel para servir aplicaciones web programadas en Ruby utilizando Ruby on Rails (como Frozen-Layer).
Al haberme cargado la configuración del lighttpd no tenia mucho sentido rehacerla solo para una o dos semanas así que directamente monté todo en apache. El tracker lo terminé de compilar ayer a las 3 de la mañana y desde esa hora está levantado sin problemas.


Esta mañana al levantarme el servidor web estaba caído. Unos crons que se ejecutaban por la noche no le han gustado al nuevo sistema y han tirado la maquina a eso de las 8:15. He llamado al operador de red que estaba de guardia y me ha reiniciado la maquina a las 12:30. Después de todo el día currando creo que todo ha quedado montado ya de forma bastante estable y las pruebas que estoy haciendo me están dando bastante mejor rendimiento que antes.

No sé si lo notareis mucho pero las paginas y el foro os deberían cargar mas rápido. Si veis que alguna sección no funciona o encontráis fallos me avisáis, todavía me falta arreglar alguna cosa (como la pagina del fansub) pero las secciones principales no deberían volver a fallar.

PD: hay un fallo con los logins en la pagina de los usuarios nuevos, en cuanto pueda lo revisaré.

Escrito por Deadsunrise hace 3 meses