Engineering the Agentic Stack
Dans l'ordre. Commencez par la boucle.
Systèmes d’AI en production · Berlin
Je conçois des systèmes d’IA en production à l’intersection de l’ingénierie logicielle, des agents, de l’évaluation, du retrieval, de la sécurité et de l’infrastructure — en transformant les traces et les échecs en expériences contrôlées, en mises en production fiables et en comportements plus sûrs.
Ma série Recursive Harness Engineering explore l’amélioration récursive : un harness d’agent en améliore un autre, tandis que des tests et une personne décident de ce qui est livré.
Automatisez l’expérience, pas l’autorité qui la déclare sûre.
Dans l'ordre. Commencez par la boucle.
Construire le harness, puis mesurer chaque changement.
Amélioration récursive contrôlée : un harness en améliore un autre.
Les plus lus
Les mêmes tâches de support réalisées par un agent, un agent avec approbation, un agent dans un workflow, un routeur et un workflow sans agent, comparés sur un même jeu de tests.
Comment les exigences d’une tâche façonnent un harness d’agent : choisir le flux de contrôle, les outils, l’exécution de code, l’état, les permissions et les preuves avant de choisir un framework.
Recursive harness engineering en une petite boucle : un LLM transforme la mauvaise réponse d’un outil de mémoire en correctif testé, et un simple script vérifie s’il fallait un LLM.
À propos
Je suis Slava Dubrov, Staff AI System Engineer, titulaire d’un doctorat en diagnostic par AI. Je travaille sur l’ingénierie logicielle, les systèmes d’agents, l’évaluation, le retrieval, la sécurité et l’infrastructure de production.