RAG en Producción · Lección 23
¿Por qué es importante evaluar por separado la calidad de la etapa de 'recuperación' y la etapa de 'generación' dentro de un pipeline RAG, en vez de solo evaluar la calidad de la respuesta final combinada?
Permite identificar específicamente en cuál de las dos etapas está el problema si la respuesta final es de mala calidad, dirigiendo el esfuerzo de mejora hacia la parte del sistema que realmente lo necesita
Evaluar ambas etapas por separado elimina por completo la necesidad de evaluar la calidad de la respuesta final combinada en algún momento
Solo es relevante si el sistema RAG tiene exactamente un único componente de recuperación configurado
La etapa de generación nunca puede ser la causa real de una mala respuesta final, solo la recuperación puede fallar
RAG en Producción · Lección 23
Completa el código
Si la recuperación falla, ningún contexto relevante estará disponible para la
Revisa: si la recuperación falla, ningún contexto relevante estará disponible para la generación.
RAG en Producción · Lección 23
¿Por qué sería un desperdicio de esfuerzo intentar mejorar el prompt de generación si el problema real de una respuesta de mala calidad está en que la etapa de recuperación nunca encontró el documento relevante correcto?
Pista: si el documento verdaderamente relevante nunca llegó a formar parte del contexto proporcionado al modelo (porque la recuperación falló en encontrarlo), ningún ajuste al prompt de generación podría compensar esa ausencia fundamental de información correcta; el esfuerzo de mejora debería dirigirse específicamente hacia la etapa de recuperación, que es donde realmente está el problema raíz.
✓
¡Lección completada!
Evaluación de la etapa de recuperación vs generación
0
XP ganado
3
Vidas restantes