Saltar al contenido

HE-0077 minCurso · Inteligencia artificial

Calidad de agentes

En un agente no basta con mirar la respuesta final. Hay que comprobar el estado en que dejó el mundo, el camino que siguió y si lo consigue siempre o solo a veces.

Qué aprenderás

  1. Evaluar el resultado de un agente comprobando el estado final del entorno
  2. Medir la trayectoria sin exigir un único camino correcto
  3. Distinguir capacidad de fiabilidad con las métricas pass@k y pass^k
  4. Calcular el coste por tarea resuelta y no solo el coste por ejecución

Suscríbete para seguir

Esta lección es para suscriptores.

Crea tu cuenta y suscríbete para leer «Harness y evaluación» entero, con los recursos y tu progreso guardado.

Suscripción mensual o anual