- De
- Tomás Pereiradirector de ingeniería
- Para
- Equipo de plataforma
- Asunto
- Los desbloqueos que fallaron el viernes
La versión 2.14.0 de rides-api salió a las 16:02 del viernes. Durante los 45 minutos siguientes, más o menos un desbloqueo de cada tres falló con un 502, hasta que Sofia volvió a la 2.13.2. Nos enteramos por los usuarios, no por una alarma.
Antes de volver a lanzar las tarifas de fin de semana: encuentra el commit que rompió los pagos y deshazlo sin reescribir main, despliega la versión corregida de forma que una compilación rota nunca pueda recibir tráfico y configura la alarma que nos habría avisado. Después escribe el informe del incidente para todo el equipo.
Tienes las peticiones y los 5xx del balanceador de carga cada cinco minutos de la tarde del viernes, y la cronología que preparó Sofia.
El trabajo está terminado cuando haya: v2.14.1 etiquetada en main, ejecutándose en 3 pods listos detrás de una readiness probe, una alarma sobre los 5xx que avise a la guardia y un informe breve del incidente, sin culpables.