KI, die mitdenkt - und dich entscheiden lässt
Stell dir vor, deine KI schickt einer Kundin die falsche Rechnung. Nicht irgendwann, hypothetisch — sondern nächsten Dienstag, während du im Kundentermin sitzt. Falscher Betrag, falsche Adressatin, und das Mail ist raus.
Wenn dich dieses Szenario davon abhält, künstliche Intelligenz in deine Administration zu lassen: gut so. Dein Misstrauen ist berechtigt. KI-Modelle machen Fehler. Sie verwechseln Beträge, greifen zum falschen Kontakt, interpretieren eine Anweisung zu grosszügig. Wer dir etwas anderes erzählt, verkauft dir etwas.
Die interessante Frage ist deshalb nicht, ob eine KI Fehler macht. Sondern: Was passiert dann? Und genau an dieser Frage trennt sich gute agentische Software von gefährlicher.
Versprechen sind keine Sicherheit. Architektur ist es.
«Unsere KI ist sehr sorgfältig» ist kein Sicherheitskonzept. Es ist ein Werbesatz. Ein Sicherheitskonzept sieht anders aus: Die Software ist so gebaut, dass die KI bestimmte Dinge gar nicht kann — egal, wie sie sich verhält, egal, was man ihr sagt, egal, wie überzeugend sie klingt.
Dieses Prinzip kennst du längst. Im Schweizer Geschäftsalltag heisst es Vier-Augen-Prinzip: Wichtige Vorgänge braucht mehr als eine Person. Kollektivunterschrift zu zweien. Zahlungsfreigabe durch eine zweite Person. Der Treuhänder, der den Abschluss gegenliest. Wir haben nie erwartet, dass ein einzelner Mensch fehlerfrei ist — wir haben Abläufe gebaut, die Fehler abfangen, bevor sie Folgen haben.
Gute KI schafft dieses Prinzip nicht ab. Sie wird zum ersten Augenpaar — schnell, unermüdlich, gründlich. Und du bleibst das zweite. Genau in dieser Reihenfolge: Die KI arbeitet vor, du entscheidest.
Woran erkennst du Software, die so gebaut ist? An vier Mechanismen.