Writing on agents in production.
What we've learned from shipping. No takes on whether agents are real.
// hervorgehobener Beitrag
Warum Ihre Eval-Suite in die CI gehört.
Wenn Ihre evals nicht bei jedem PR laufen, sind es keine evals — sondern ein Screenshot aus einem Meeting im März.
Gelesen · Engineering-Team
A2A und MCP: beides wählen.
Sie lösen benachbarte Probleme. Der Fehler ist, sie als Weggabelung zu behandeln.
Das runbook, das mit jedem Agenten ausgeliefert wird.
Failure-Modes, Eskalationen, rollback-Bedingungen. Mit Absicht langweilig.
Durable Workflows sind keine Retries.
Ein vernünftiges mentales Modell dafür, wann Sie wirklich einen durable Orchestrator brauchen — und wann nur besseres Backoff.
Warum wir 60 Tage nach der Übergabe on-call laufen.
Weil die ersten 60 Tage jede Annahme aufdecken, die die Eval-Suite verpasst hat.
Wie man in einer Woche ein Retrieval-Eval-Set baut.
Ein praktisches Rezept. 200 Fragen, Ihr echtes Corpus, Baselines und ein „dies nicht optimieren"-Set.
LOS GEHT'S
Bringen Sie das erste System live.
Festpreis-Discovery in 2 Wochen. Sie gehen mit Architektur, Working Spike und Bauplan nach Hause.