Kurze Antwort

Ein Screenshot zeigt, dass jemand an einem Tag etwas gesehen hat. Er sagt nicht, mit welcher genauen Frage, in welcher Sitzung, mit welchen Einstellungen und was unterhalb des Ausschnitts stand. Damit eine KI-Zahl vor der Geschäftsführung, einem Kunden oder einem Wettbewerber standhält, brauchst du eine vollständige Beobachtung: Plattform, Datum und Uhrzeit, die wörtliche Frage, die vollständige Antwort, die genannten Marken in ihrer Reihenfolge, die zitierten Quellen und einen Status. Und du musst sie wiederholen können.

Was ein Screenshot nicht beantworten kann

  • Wie lautete die genaue Frage? Ein Wort ändert die Liste.
  • War die Websuche aktiviert?
  • War es ein sauberer Chat oder eine Sitzung mit Erinnerungen und Verlauf?
  • Aus welchem Land und in welcher Sprache?
  • Was stand in der Antwort unterhalb des Ausschnitts?
  • Welche Quellen wurden angezeigt?
  • Ist es am nächsten Tag wieder passiert?

Ohne diese Antworten taugt der Screenshot für eine Folie. Nicht für eine Entscheidung.

Die Mindestfelder einer Beobachtung

FeldWarum es zählt
Plattform und sichtbare VersionJede Plattform ist ein anderes Produkt
Websuche an oder ausSie ändert den Mechanismus und die Quellen
Datum und UhrzeitDamit lässt sich wiederholen und vergleichen
Sprache und LandSie ändern den Index und die Antwort
Wörtliche Frage und ihre VersionJede Änderung am Text macht sie zu einer anderen Frage
Vollständige AntwortEine Zusammenfassung der Antwort ist nicht die Antwort
Genannte Marken und ihre ReihenfolgeErwähnung, Empfehlung und Position sind verschiedene Dinge
Zitierte Quellen (Domain und URL)An ihnen kannst du arbeiten
Status: gültig, Fehler, nicht verfügbarEin Fehler ist keine Null
Wer sie geprüft hatJemand steht für die Transkription ein

So hältst du das ohne Tools fest

Eine Tabelle mit diesen zehn Spalten, eine Zeile pro Beobachtung, und ein Ordner mit dem vollständigen Text jeder Antwort. Zwölf Fragen auf zwei Plattformen ergeben vierundzwanzig Zeilen. Der Screenshot kann als Anhang dabei sein, um Layout und Kontext zu prüfen, aber verglichen wird die Zeile.

Woran du erkennst, ob ein Bericht es richtig macht

Lass dir die Zeile hinter jeder Zahl zeigen. Steht im Bericht „Erwähnungsrate von 34 %“, frag nach Zähler und Nenner und danach, welche Antworten konkret zählen. Kann der Bericht sie dir nicht zeigen, ist die Zahl kein Messwert, sondern eine Meinung mit Nachkommastellen.