117 escenarios en 15 familias

Antes de usarte, el agente tiene que elegirte. Aquí se mide si te propone y si te describe bien.

• Encontrar una herramienta para resolver un problema
• Determinar si el producto sirve para un caso concreto
• Comparar tres alternativas
• Explicar ventajas y limitaciones
• Seleccionar el plan adecuado
• Encontrar la página correcta
• Identificar la última versión
• Diferenciar el producto de otro con nombre similar

El camino de cero a primer resultado. Es donde se pierde la mayoría de las integraciones.

• Crear una cuenta
• Crear un proyecto
• Obtener una API key
• Instalar un SDK
• Configurar variables de entorno
• Ejecutar el primer ejemplo
• Realizar la primera llamada
• Verificar el resultado
• Desplegar una integración

Autenticación, CRUD, paginación, límites y recuperación. Lo que más se rompe en silencio.

• Autenticar una petición
• Crear, leer, actualizar y eliminar un recurso
• Gestionar paginación
• Gestionar límites de tasa
• Procesar webhooks
• Recuperarse de errores
• Utilizar idempotencia

Las CLIs con login interactivo bloquean a los agentes. Aquí se detecta.

• Instalar la CLI
• Iniciar sesión sin interacción
• Crear un proyecto
• Configurar un entorno
• Ejecutar migraciones
• Desplegar
• Ver logs
• Revertir un cambio
• Diagnosticar un error

Los nombres y descripciones de tus herramientas son el prompt real que lee el agente.

• Descubrir herramientas
• Elegir la herramienta correcta
• Completar parámetros
• Encadenar herramientas
• Interpretar resultados
• Solicitar confirmación en acciones sensibles
• Recuperarse de errores
• Evitar herramientas peligrosas

Tareas completas de construcción, no fragmentos aislados.

• Crear una aplicación
• Añadir autenticación
• Configurar permisos
• Construir un dashboard
• Integrar pagos
• Añadir almacenamiento
• Implementar búsquedas
• Escribir tests
• Desplegar
• Solucionar un fallo

Migrar desde un competidor o entre versiones mayores es donde se gana o se pierde una cuenta.

• Migrar desde un competidor
• Actualizar una versión mayor
• Cambiar de SDK
• Convertir una configuración
• Migrar datos
• Mantener compatibilidad
• Validar que no exista pérdida de información

Un agente que resuelve bien un ticket ahorra más que uno que escribe bien.

• Clasificar un incidente
• Encontrar la solución adecuada
• Seguir un runbook
• Solicitar los datos necesarios
• Resolver una incidencia
• Escalar el problema
• Redactar una respuesta
• Confirmar que la solución funcionó

Agentes internos operando el CRM sin ensuciar los datos.

• Crear un lead
• Actualizar una oportunidad
• Preparar una propuesta
• Consultar el historial
• Recomendar un plan
• Crear una tarea
• Generar un resumen
• Detectar información incompleta

Procesos con datos sensibles y pasos de aprobación no negociables.

• Consultar una política
• Solicitar vacaciones
• Preparar un onboarding
• Actualizar datos personales
• Crear una vacante
• Clasificar candidatos
• Seguir un proceso aprobado
• Escalar casos sensibles

Donde un error del agente tiene consecuencias contables.

• Crear una factura
• Clasificar un gasto
• Preparar un informe
• Conciliar datos
• Aplicar reglas de aprobación
• Detectar anomalías
• Mantener trazabilidad
• Evitar acciones sin autorización

Cada vez más compras empiezan en un agente, no en un buscador.

• Buscar productos
• Comparar características
• Comprobar disponibilidad
• Configurar una cesta
• Aplicar descuentos válidos
• Iniciar una devolución
• Consultar un envío
• Gestionar incidencias

La dimensión con más peso después de la finalización de tareas. Un fallo aquí invalida el resto.

• Evitar revelar secretos
• Respetar el aislamiento entre clientes
• Solicitar confirmación
• Evitar acciones destructivas
• Detectar prompt injection
• Respetar permisos
• Registrar cambios
• Escalar acciones de alto riesgo

Si un agente puede operar tu producto solo con texto, una persona con lector de pantalla también.

• Utilizar la herramienta solo mediante texto
• Interpretar interfaces accesibles
• Completar tareas sin depender de lo visual
• Proporcionar explicaciones claras
• Evitar pasos ambiguos

El agente como intermediario entre tu producto y una persona que no lo conoce.

• Ayudar a un usuario a completar una tarea
• Explicar un error
• Guiar paso a paso
• Adaptarse al nivel técnico
• Verificar que el usuario obtuvo el resultado
• Ofrecer una alternativa segura