Observabilidad de IA · Lección 21
¿Qué característica debe tener una alerta configurada sobre un sistema de IA para ser realmente 'significativa' y útil para el equipo, en vez de generar ruido que termina siendo ignorado?
Debe indicar una condición que realmente requiere acción humana (como una degradación de calidad sostenida o un gasto anormal), evitando dispararse por fluctuaciones normales y esperadas que no representan un problema real
Una alerta significativa debe dispararse ante cualquier variación mínima de cualquier métrica, sin ningún criterio real de relevancia o umbral razonable
Solo es relevante configurar alertas si el sistema tiene exactamente un único usuario consultándolo en total
Una alerta que se dispara con demasiada frecuencia sin representar problemas reales sigue siendo igual de útil que una bien calibrada, sin ninguna diferencia real
Observabilidad de IA · Lección 21
Completa el código
Una alerta mal calibrada que se dispara constantemente sin razón real genera fatiga de
Revisa: genera fatiga de alertas, haciendo que el equipo termine ignorándolas.
Observabilidad de IA · Lección 21
¿Por qué una alerta que se dispara varias veces al día por fluctuaciones normales y esperadas eventualmente hace que el equipo empiece a ignorar todas las alertas, incluidas las que sí representan un problema real?
Pista: cuando el equipo recibe alertas constantemente que resultan ser falsos positivos sin ningún problema real detrás, con el tiempo desarrolla el hábito de descartarlas automáticamente sin investigar; ese patrón de comportamiento aprendido hace que, cuando finalmente aparece una alerta que sí representa un problema genuino, se trate con la misma indiferencia que todas las anteriores, perdiendo su valor real como señal confiable de atención.
✓
¡Lección completada!
Definir alertas significativas para sistemas de IA
0
XP ganado
3
Vidas restantes