Writing on agents in production.
What we've learned from shipping. No takes on whether agents are real.
// article à la une
Pourquoi votre suite d'evals a sa place dans la CI.
Si vos evals ne tournent pas sur chaque PR, ce ne sont pas des evals — c'est une capture d'écran d'une réunion de mars.
Lu · Équipe ingénierie
A2A et MCP : prenez les deux.
Ils résolvent des problèmes adjacents. L'erreur est de les traiter comme une bifurcation.
Le runbook livré avec chaque agent.
Modes de défaillance, escalades, conditions de rollback. Ennuyeux exprès.
Les workflows durables ne sont pas des retries.
Un modèle mental raisonnable pour savoir quand vous avez vraiment besoin d'un orchestrateur durable plutôt que d'un meilleur backoff.
Pourquoi nous restons on-call 60 jours après le handoff.
Parce que les 60 premiers jours font remonter chaque hypothèse que la suite d'evals a manquée.
Comment construire un eval set de retrieval en une semaine.
Une recette pratique. 200 questions, votre vrai corpus, des baselines, et un ensemble « à ne pas optimiser ».
DÉMARRER
Mettez en ligne le premier système.
Discovery à prix fixe en 2 semaines. Vous repartez avec une architecture, un spike fonctionnel et un plan de build.