Technische Analysen
Seit 2023 analysieren wir, was in KI-Systemen belastbar funktioniert — anhand von Zahlen, Quellen und klar benannten technischen Grenzen.
Der Geräteassistent wurde weit weniger genutzt als erwartet, weil eine Frage bedeutete, ein Werkzeug abzulegen. Sprache behebt das und bringt einen Fehler mit, den Text nie hatte: eine verhörte Teilenummer erzeugt eine selbstsichere Antwort über ein anderes Bauteil. Pahwa und Kollegen bewerten Sprachwerkzeugnutzung. Was wir vorher bestätigen und warum die Antwort gesprochen und gezeigt wird.
Das Gedächtnis verbesserte den Assistenten für Einzelne und verschlechterte still das gemeinsame Terminal, an dem die Vorliebe einer Schicht die Antworten der nächsten prägte. Al-Ratrout und Kollegen benennen Personenverwechslung im Mehrbenutzerdialog. Warum das Erkennen der sprechenden Person der falsche erste Schritt ist, was eine Sitzungsgrenze sein sollte, und welche Vorliebe für alle sicher ist.
Zwei Kunden, im Wesentlichen dasselbe System, einer verlängerte, einer stellte ein — bei laufendem Betrieb. Der Unterschied stand in den Auftaktnotizen: Einer hatte aufgeschrieben, was der Assistent nicht tun wird, der andere, was er tun wird. Vishwarupe und Kollegen behandeln Erwartungsmanagement als Entwurfsfrage. Die vier Sätze, auf denen wir vor jedem Bau bestehen.
Ein Jahr Zahlen zu dem Agenten, der fehlschlagende Tests repariert. Token sind die kleinere Hälfte; entscheidend ist die Prüfzeit — auch abgelehnte Vorschläge kosten eine Prüfung. Peng und Kollegen vergleichen die Inferenzökonomie von Cloud und Eigenbetrieb für Coding-Agenten. Was wir messen, was sich durch das Messen geändert hat, und ab wann wir ihn abschalten würden.
Beim Zurücklesen taucht derselbe Befund unter einem Dutzend Überschriften auf: Eine Einschränkung, die in einem Prompt oder einem Dokument wohnt, ist keine. Besanson argumentiert, Governance gehöre in die Architektur statt an Prompts und Dokumentation. Die acht Stellen, an denen wir es gelernt haben, die zwei ohne architektonische Fassung, und was der Satz nicht abdeckt.