Training agent-evaluatie & observability
Weten of je AI Agent goed werkt — ook na een wijziging.
Weten of je AI Agent goed werkt — ook na een wijziging. Werk aan een afgebakende eigen use case. We stemmen niveau, tooling en het programma vooraf af op jullie team; toegang tot producten en beschikbare functies bepalen de oefeningen.
Wat je leert
- Representatieve taken, grensgevallen en acceptatiecriteria opstellen.
- Toolgebruik, brongebruik en taakvoltooiing meten; modelbeoordeling kritisch inzetten.
- Model- en toolstappen inspecteren op fouten, latency en verbruik.
- Evaluaties opnemen in de ontwikkelcyclus en escalatie bij regressies ontwerpen.
Voor wie
- 01Agentic Engineers, QA-engineers, data scientists en technisch product owners
Programma
Testset ontwerpen
Representatieve taken, grensgevallen en acceptatiecriteria opstellen.
Evalueren
Toolgebruik, brongebruik en taakvoltooiing meten; modelbeoordeling kritisch inzetten.
Tracing
Model- en toolstappen inspecteren op fouten, latency en verbruik.
Regressie & beheer
Evaluaties opnemen in de ontwikkelcyclus en escalatie bij regressies ontwerpen.
Wat je meeneemt
Wat je meeneemt
- Een eerste evaluatieset en monitoringplan voor een eigen AI Agent.
- Een overzicht van risico’s, randvoorwaarden en vervolgstappen.
Vereisten
- Een agentprototype en basiservaring met Python of TypeScript.
Veelgestelde vragen
Wordt de training op ons team afgestemd?+
Ja. We bespreken jullie voorkennis, werkomgeving en leerdoelen tijdens een vrijblijvende intake. Daarna ontvang je een programma en schriftelijke offerte.
Hoe lang duurt deze training?+
De duur hangt af van het gewenste niveau en de oefeningen. Die leggen we vooraf vast in het programma; er is geen vaste trainingsduur voor dit onderwerp.
Waar vindt de training plaats?+
In-company, bij ons in Utrecht of op afstand, in overleg met jullie team.
Plan deze training
Bespreek jullie leerdoelen tijdens een vrijblijvende intake. Daarna ontvang je een programma op maat en een schriftelijke offerte.