Writing on agents in production.
What we've learned from shipping. No takes on whether agents are real.
// hervorgehobener Beitrag
Warum Ihre Eval-Suite ins CI gehört.
Wenn Ihre Evals nicht bei jedem PR laufen, sind es keine Evals — sondern ein Screenshot aus einem Meeting im März.
Gelesen · Engineering-Team
Durable Workflows sind keine Retries.
Ein vernünftiges mentales Modell, wann Sie wirklich einen durable Orchestrator brauchen statt nur besseren Backoff.
A2A und MCP: nehmen Sie beide.
Sie lösen benachbarte Probleme. Der Fehler ist, sie als Weggabelung zu betrachten.
Wie man in einer Woche ein Retrieval-Eval-Set baut.
Ein praktisches Rezept. 200 Fragen, Ihr echter Korpus, Baselines und ein "nicht darauf optimieren"-Set.
Das Runbook, das mit jedem Agenten ausgeliefert wird.
Failure Modes, Eskalationen, Rollback-Bedingungen. Absichtlich langweilig.
Warum wir 60 Tage nach der Übergabe On-Call laufen.
Weil die ersten 60 Tage jede Annahme aufdecken, die die Eval-Suite verpasst hat.
LOS GEHT'S
Bringen Sie das erste System live.
Festpreis-Discovery in 2 Wochen. Sie gehen mit Architektur, Working Spike und Bauplan nach Hause.