Evaluación

Probar un prompt con un conjunto fijo de inputs y puntuar las salidas contra criterios de aceptación, para medir las mejoras en vez de adivinarlas.

Última actualización: · Versión en markdown

Cómo aplicarlo en prompts

Usá este concepto para reducir ambigüedad y mejorar consistencia. Si tu output necesita formato estricto, combiná esto con una guía de JSON y un template por modelo.

Qué significa
Ejemplo copy-paste
Armá un set de evaluación para esta tarea: [descripción de la tarea]
Devolvé:
1) Una rúbrica con 5 criterios, cada uno de 0 a 2, con el significado de cada puntaje.
2) 8 inputs de prueba: 3 típicos, 3 casos límite, 2 adversariales.
3) Para cada input, qué debe contener una salida perfecta.
Se abre en el analizador con el prompt precargado.
Abrir en Promptea
Preguntas frecuentes
¿Cuántos casos de prueba necesito?
Entre cinco y veinte alcanzan para empezar. Importa más la calidad que la cantidad: incluí los casos que ya fallaron antes.
¿El puntaje de un prompt es lo mismo que una evaluación?
No. El puntaje de 0 a 100 de Promptea mide qué tan bien especificado está el prompt, con reglas fijas. Una evaluación juzga las salidas que produce un prompt con tus propios inputs de prueba. Se complementan.