Mi trayectoria profesional comenzó en fabricación y diseño industrial, donde desarrollé un enfoque basado en observar cómo funcionan los sistemas en condiciones reales y documentar sus resultados con precisión.

Tras especializarme en Inteligencia Artificial, trasladé ese enfoque al análisis de sistemas conversacionales: observar cómo responden durante interacciones reales y no limitar el análisis a su funcionamiento teórico o declarado.

Actualmente evalúo Agentes y Asistentes IA desde la capa de usuario externo. Documento cómo responden ante interacciones no previstas, presión conversacional, reformulación, supuestos de autoridad, premisas no verificadas y utilización fuera del flujo previsto.

Mi trabajo aporta evidencia técnica trazable y metodológicamente reproducible, utilizable como insumo por DPO, abogados, compliance, responsables técnicos y equipos de revisión interna.

Evaluación de Comportamiento Observable en Agentes y Asistentes IA

Formación en Inteligencia Artificial y evaluación de Agentes IA

Máster en Inteligencia Artificial por BIG School y formación universitaria de Experto en Inteligencia Artificial por la Universidad Isabel I. Mantengo formación continua en diseño de prompts, automatización, sistemas RAG, agentes con herramientas y evaluación del comportamiento conversacional.

Mi método: observación, trazabilidad y límites claros

Trabajo mediante interacción externa con el sistema, sin acceso a código, infraestructura, configuraciones internas, prompts de sistema, logs ni permisos.

Distingo entre lo que el sistema hace de forma observable y lo que declara sobre sí mismo, porque una afirmación sobre su configuración o sus capacidades no equivale a una verificación interna.

Cada prueba registra el prompt exacto, la respuesta del sistema, la clasificación de evidencia y el nivel de exposición observable. Las conclusiones se limitan al comportamiento documentado y al estado del sistema durante la evaluación.

Consultor técnico especializado en la evaluación externa, en modalidad caja negra, del comportamiento conversacional de Agentes y Asistentes IA.

¿Necesitas documentar el comportamiento de un Agente o Asistente IA?

Si ya utilizas o desarrollas un sistema concreto, indícame el Agente o Asistente IA, el canal de interacción y la necesidad que quieres analizar. Revisaré si encaja en una evaluación externa de comportamiento observable en modalidad caja negra.

Foto de la Giralda de Sevilla y representando tecnología e Inteligencia Artificial.
Foto de la Giralda de Sevilla y representando tecnología e Inteligencia Artificial.
Contacto para evaluar Agentes y Asistentes IA

Evaluación de Comportamiento Observable en Agentes y Asistentes IA · Modalidad caja negra.

DATOS DE CONTACTO

info@joseluiszapataia.com

+34 658 10 36 95

© 2026 José Luis Zapata IA. Todos los derechos reservados.