Agentes, RAG y evaluación
Sistemas que delegan, buscan en tu conocimiento, leen documentos y se miden con números de verdad.
Construirás cinco laboratorios en verde (harness, agentes acotados, búsqueda con permisos, gate de evals y extracción de documentos) y el documento de arquitectura que los junta en un sistema tuyo, con su gate.
Con Toni Soriano 10 módulos 104 lecciones 5 proyectos con tests
Las piezas que convierten una integración en un sistema, cada una en su laboratorio y medida con tu Claude, una base de datos y modelos de verdad: un harness que impide en vez de pedir, agentes que delegan solo cuando compensa, búsqueda sobre el conocimiento de tu empresa sin saltarte permisos, extracción de documentos con revisión humana y una evaluación que impide desplegar una versión peor. Al final las juntas en el documento de arquitectura de un sistema tuyo, con el gate que lo comprueba.
Lo que aprenderás.
- Decidir cuándo usar un agente y cuándo un flujo determinista
- Orquestar subagentes sin multiplicar coste ni errores
- Montar RAG híbrido sobre PostgreSQL y pgvector sin saltarte permisos
- Extraer datos de PDFs, tablas, imágenes y audio con revisión humana
- Construir una suite de evaluación que bloquee regresiones
Índice
10 módulos · 104 lecciones · 26,3 h
-
01 El harness: controles, contexto y skills con contrato 10 lecc · 163 min
- Qué vas a construir Gratis 8 min
- El incidente: el informe perfecto que está mal Gratis 7 min
- Instrucciones que piden y controles que impiden 16 min
- Contexto persistente como presupuesto 8 min
- Una skill con contrato: cuándo se activa y cuándo para 9 min
- Del borrador a la publicación 16 min
- Quita una capa y mide antes de conservarla 14 min
- Laboratorio guiado: tu contrato y tu hook 60 min
- Repaso y ejercicios 15 min
- Para consultar: el camino real y el glosario 10 min
-
02 Delegar en subagentes sin multiplicar coste ni errores 12 lecc · 133 min
- Qué vas a construir 5 min
- El incidente: tres analistas, un mismo error 5 min
- El modelo mental: primero el grafo de tareas, después los prompts 7 min
- El subagente como filtro de contexto 14 min
- Demostrar que hubo paralelismo de verdad 8 min
- La síntesis valida antes de juntar 6 min
- Un revisor que no comparte el error 8 min
- Fallar cerrando: borrador, revisión y publicación 7 min
- Comparar variantes sobre el mismo caso 12 min
- Cuándo delegar y cuándo volver a un solo agente 6 min
- Laboratorio guiado: tu grafo de tareas y el contrato del analista 40 min
- Repaso y ejercicios 15 min
-
03 Agente, workflow o híbrido: decidir con datos 8 lecc · 107 min
- Qué vas a construir 7 min
- El incidente: dos P1 que el promedio esconde 10 min
- El modelo mental: quién elige la próxima acción 9 min
- Diseñar una frontera híbrida 12 min
- Cuándo el agente aporta algo distinto 9 min
- Encadenar, enrutar y paralelizar no son lo mismo 10 min
- Laboratorio guiado: decide tú la arquitectura 35 min
- Repaso y ejercicios 15 min
-
04 Orquestar varios agentes y comprobar el resultado 9 lecc · 127 min
- Qué vas a construir 6 min
- El incidente: el agente termina, la operación no 10 min
- El modelo mental: un loop con cinco presupuestos 11 min
- Orquestar workers sin ceder el control 12 min
- El orden de los guardrails 8 min
- Verificar el resultado sin creerte la explicación 11 min
- Decidir la arquitectura con cuatro preguntas 9 min
- Laboratorio guiado: escribe tú las fronteras del agente 45 min
- Repaso y ejercicios 15 min
-
05 Indexar tus documentos sin reabrir permisos 9 lecc · 166 min
- Qué vas a construir 8 min
- El incidente: una foto antigua reabre un permiso revocado 6 min
- El modelo mental: cuatro identidades distintas 10 min
- Trocear con identidad estable y un límite que se cumple 9 min
- Del borrador a la publicación atómica 11 min
- Cada fallo pide una decisión distinta 10 min
- Medir 500.000 filas antes de elegir índice 12 min
- Laboratorio guiado: una foto antigua no borra nada 80 min
- Repaso y ejercicios 20 min
-
06 Búsqueda híbrida sin fugas ni métricas engañosas 10 lecc · 158 min
- Qué vas a construir 6 min
- El incidente: respuesta correcta, documento equivocado 8 min
- El modelo mental: ramas, posiciones y documentos 10 min
- Filtrar antes de puntuar 8 min
- Evaluación comparable y ciega 10 min
- Reranking y contexto bajo presupuesto 10 min
- Plazos y resultados que nadie puede retocar 7 min
- Qué demuestra el fixture y qué no 9 min
- Laboratorio guiado: filtro, recall y fusión escritos por ti 70 min
- Repaso y ejercicios 20 min
-
07 Una evaluación que puedes defender 11 lecc · 174 min
- Qué vas a construir 8 min
- El incidente: la respuesta parece correcta y la trayectoria es peligrosa 7 min
- El modelo mental: casos, intentos y quién los puntúa 12 min
- Tres procedencias que no se mezclan 6 min
- Construir un dataset ligado al riesgo 11 min
- Graders de código sobre hechos distintos 10 min
- La misma suite con tu Claude 14 min
- Un judge real: su prompt, su calibración y sus límites 16 min
- Laboratorio guiado: el protocolo, tus casos y su huella 55 min
- Repaso y ejercicios 20 min
- Para ir más lejos: blindar el harness 15 min
-
08 Un gate de regresión con números de verdad 12 lecc · 174 min
- Qué vas a construir 8 min
- El incidente: la candidata «más barata» sin una factura 5 min
- El modelo mental: identidad completa y política previa 9 min
- Repetir sin escoger la corrida bonita 10 min
- Repeticiones de verdad con tu Claude 14 min
- Bloquear críticos antes que promedios 10 min
- Plazo total, terminación y efectos externos 8 min
- Fiabilidad local y proveedor son alcances distintos 9 min
- Fijar los umbrales sin mirar a la candidata 9 min
- Del PASS local a una campaña con el modelo real 8 min
- Laboratorio guiado: escribe tu propio gate 60 min
- Repaso y ejercicios 24 min
-
09 Documentos: del fichero al dato publicable 10 lecc · 165 min
- Qué vas a construir 8 min
- El incidente: una factura que nunca existió 6 min
- El modelo mental: original, transformación y efecto 8 min
- Recibir sin confiar en el buffer del caller 12 min
- Del parser al artefacto ligado 20 min
- Elegir estrategia por forma documental 10 min
- Evaluación emparejada, sin escoger los casos que te convienen 12 min
- Documentos largos: seleccionar sin perder el centro 10 min
- Laboratorio guiado: decide tú qué documento se publica 60 min
- Repaso y ejercicios 19 min
-
10 Multimodalidad, calibración y revisión humana 13 lecc · 209 min
- Qué vas a construir 6 min
- El incidente: 0,95 de confianza y una cita inexistente 6 min
- El modelo mental: percepción, contrato y efecto 7 min
- Tablas y gráficos: cada número conserva su fila y su columna 15 min
- Audio: copia congelada, plazo total y estado desconocido 16 min
- La evidencia se lee desde el label del campo 8 min
- Reglas cruzadas y calibración 10 min
- Aceptar, revisar y rechazar son tres estados distintos 7 min
- Revisión humana que se puede repetir y vuelve a validar 11 min
- Comparar estrategias sobre los mismos 24 documentos 8 min
- Laboratorio guiado: decide tú qué campo se publica 50 min
- Repaso y ejercicios 15 min
- Cierre: junta las piezas en tu propio sistema 50 min
Antes de empezar
- Nivel 2 o experiencia equivalente con la API de un modelo y herramientas
- Node.js 22.12 o posterior
- Docker a nivel práctico, para PostgreSQL con pgvector en los módulos 5 y 6, y SQL básico
- Claude Code con una cuenta de Claude de pago (Pro o superior), para lanzar las prácticas contra tu Claude. Si no la tienes, cada práctica trae su salida grabada
Para quién es
- Desarrolladores que ya han integrado modelos y quieren construir sistemas completos
Datos con fecha: los precios, versiones y fechas que usa el curso, con su fuente y comprobados el 15-11-2026.