NES Studio

Betriebsnotizen

Was mich der Produktivbetrieb gelehrt hat

Reale, datierte Vorfälle mit ihrer Ursache und der Prüfung, die daraus entstand. Keine Tutorials: das, was eine Geschäftsleitung wissen sollte, bevor sie einem Agenten eine Aktion überträgt.

Elf Tage, 80 Fehlschläge pro Tag, kein Alarm: ein KI-Agent, der unbemerkt Kosten verursacht

Ein Agent fror sechsmal am Tag ein. Seine Werkzeuge waren nicht schuld: Er kam nie an den Punkt, sie aufzurufen. Und seit elf Tagen prüfte er einen Server, den es nicht mehr gab.

Das Skript, das eine Störung jeden Tag für konform erklärt hätte

Um meine Domains zu überwachen, las ein Skript das bestehende DNS aus und hielt es für die Wahrheit. An dem Tag, an dem dieses DNS gestört war, hätte es die Störung übernommen und täglich bestätigt.

Ein Vorfall muss eine Prüfung erzeugen, keine Notiz

Das Gedächtnis des Agenten enthielt eine einwandfreie Notiz über einen offen erreichbaren Dienst. Zwei Monate später waren zwei weitere Dienste auf genau dieselbe Weise offen.