El panel dejó de reflejar actividad nueva de distribuidores

Resumen

Entre el 10 y el 13 de julio, la vista de desempeño por distribuidor del panel dejó de incorporar actividad nueva. La información mostrada seguía siendo correcta, pero se había quedado detenida en el tiempo: el proceso que actualiza esa vista en segundo plano quedó congelado tras un cambio de configuración de infraestructura.

Ninguna operación se perdió. Los datos siguieron registrándose íntegros y la vista se puso al día al restablecer la configuración.

Impacto

• La vista de desempeño por distribuidor mostró información desactualizada durante aproximadamente 58 horas.
• Sin pérdida de datos: las operaciones se registraron con normalidad; solo su proyección al panel quedó detenida.
• El bot, las recargas y las validaciones no se vieron afectados.

Causa raíz

Un ajuste de asignación de recursos aplicado al servicio dejó sin tiempo de cómputo al proceso que consume eventos en segundo plano. El servicio seguía respondiendo, por lo que el problema no era visible desde afuera: la vista simplemente dejó de avanzar en silencio.

Acciones tomadas

• Reversión del ajuste de configuración en el servicio afectado; la proyección se puso al día.
• Detección automática de proyecciones detenidas: se instrumentó una sonda que vigila el avance de cada proyección y alerta cuando una deja de progresar.
• Vigilancia de procesos que dejan de ejecutarse: alerta por ausencia de señal, para descubrir un proceso detenido antes de que el rezago sea visible al usuario.

Seguimiento

Este incidente motivó una línea de trabajo dedicada a la detección temprana de procesos de fondo congelados — la clase de falla que no se manifiesta como un error, sino como información que deja de actualizarse.