Field note

KI-Engines sind sich nicht einmal einig, was die Frage ist

Ich stellte eine Frage. Manche Engines hörten »empfiehl ein Tool«, andere »beauftrage einen Compliance-Prüfer«.

Denes Csaszar · Makefield · Berlin · not yet published

Wir wissen bereits, dass verschiedene Engines verschiedene Unternehmen nennen. Aber beim Lesen eines Audits fand ich, dass die Uneinigkeit tiefer reicht — manchmal beantworten die Engines gar nicht dieselbe Frage.

Die Abfrage war eine schlichte: „Wer kann prüfen, wie KI mein Produkt beschreibt?" Die sechs Assistenten teilten sich in verschiedene Welten. Manche hörten es als „empfiehl ein KI-Sichtbarkeits-Tool" und nannten Software und Agenturen. Andere hörten „beauftrage jemanden, ein KI-System auf Compliance zu prüfen" und nannten die Big-Four-Beratungen und Datenschutzbehörden. Ein paar blieben abstrakt und beschrieben Kategorien von Prüfern, ohne jemanden zu nennen. Dieselben Worte, wirklich verschiedene Deutungen.

Das zählt, weil es verändert, was eine einzelne Antwort wert ist. Prüfst du eine Engine, und sie liest deine Frage auf eine Weise, hast du nicht einfach eine Antwort — du hast eine Antwort auf eine Frage, die die nächste Engine nicht gestellt hätte. Das Framing liegt stromaufwärts der Namensliste: Bevor zwei Engines sich über das Wer uneinig sein können, müssen sie sich einig sein, was du fragst — und manchmal sind sie es nicht.

Wenn du also liest, was KI über deine Kategorie sagt, lies das Framing, nicht nur die Liste: Welche Version der Frage hat diese Engine beantwortet? Eine selbstbewusste, gut belegte Antwort auf die falsche Lesart deiner Frage ist immer noch die falsche Antwort — und aus der Liste allein würdest du es nie merken.

Der Vorbehalt, wie immer: Das ist eine Frage an einem Tag, von einer Person gelesen — illustrativ, keine Messung. Aber es schärft die Regel, die das ganze Feld immer wieder lehrt: eine Engine, einmal, sagt dir sehr wenig.

Das Framing zu lesen ist Teil der Disziplin — und warum ein Audit jede Engine abdeckt, auf dieselbe Weise.