Empfiehlt ChatGPT mein Unternehmen? So prüfen Sie, ob KI-Assistenten Sie nennen
Ob ChatGPT Ihr Unternehmen empfiehlt, prüfen Sie so: Stellen Sie ChatGPT, Gemini, Copilot und Google AI Mode die 5 bis 10 Fragen, die Ihre Kundschaft stellen würde, möglichst ohne Anmeldung, in einem privaten Fenster und mit dem Ort in jeder Frage. Notieren Sie, ob Ihr Unternehmen genannt wird, an welcher Stelle und welche anderen Unternehmen genannt werden, und wiederholen Sie die Prüfung an einem anderen Tag, denn dieselbe Frage kann dann eine andere Liste von Namen ergeben.
Kurz gesagt
- Schreiben Sie die Fragen so, wie eine neue Kundin sie stellen würde, und lassen Sie Ihren Firmennamen weg.
- Nutzen Sie ein privates Fenster ohne Anmeldung, denn ein angemeldetes Konto kann die Antwort personalisieren.
- Schreiben Sie Ort oder Region in die Frage; sonst gehen Assistenten möglicherweise vom falschen Ort aus.
- Notieren Sie pro Antwort vier Dinge: ob Sie genannt werden, an welcher Stelle der Liste, welche anderen Unternehmen genannt werden und welche Websites zitiert werden.
- Eine Runde ist eine Momentaufnahme. Wiederholen Sie dieselben Fragen an einem anderen Tag, bevor Sie Schlüsse daraus ziehen.
Auf dieser Seite
Ob ChatGPT und andere KI-Assistenten Ihr Unternehmen nennen, prüfen Sie mit Fragen, wie sie Ihre Kundschaft stellen würde: in einem privaten Fenster, mit Ihrem Ort in der Frage und ohne Ihren Firmennamen. Notieren Sie dann, ob Sie genannt wurden, an welcher Stelle Sie in der Liste standen, welche anderen Unternehmen genannt wurden und welche Websites die Antwort als Quellen angab. Wiederholen Sie das an einem anderen Tag, denn die Antworten ändern sich.
Dieser Ratgeber zeigt die Methode von Hand Schritt für Schritt, mit einer Beispieltabelle, die Sie übernehmen können. Weiter unten steht, was die Prüfung von Hand aufwendig macht und wie CheckAI dieselbe Methode für Sie durchführt.
Die Kurzfassung
Eine brauchbare Prüfung hat drei Teile. Sie stellen mehrere realistische Fragen, nicht nur eine. Sie fragen mehrere Assistenten, weil diese oft unterschiedlich antworten. Und Sie wiederholen die Runde, weil eine einzelne Antwort eine Stichprobe ist und kein Urteil.
Es geht nicht darum, ob der Assistent Sie «kennt». Es geht darum, ob Ihr Unternehmen auftaucht, wenn jemand, der es noch nicht kennt, nach Ihrem Angebot fragt.
So prüfen Sie von Hand, Schritt für Schritt
- Schreiben Sie 5 bis 10 Kundenfragen. Formulieren Sie sie so, wie eine neue Kundin fragen würde, in ganzen Sätzen. Decken Sie verschiedene Anliegen ab: eine allgemeine Anfrage («Welche Bäckerei in Zürich empfehlen Sie für Sauerteigbrot?»), eine Preisfrage, eine Vertrauensfrage («Welche Bäckerei in Zürich hat gute Bewertungen?»), eine dringende Frage («Welche Bäckerei in Zürich hat morgen früh schon offen?») und einen konkreten Anlass («Wo kann ich in Zürich eine Geburtstagstorte für 20 Personen bestellen?»). Lassen Sie Ihren Firmennamen weg.
- Schreiben Sie den Ort in die Frage. Nennen Sie Stadt, Quartier oder Region in jeder Frage, bei der es auf den Ort ankommt. Ohne Ortsangabe geht ein Assistent womöglich vom falschen Standort aus. Eine Frage wie «Welche Bäckerei ist in meiner Nähe?» kann dann Ergebnisse für einen anderen Ort liefern.
- Nutzen Sie ein privates Fenster ohne Anmeldung. Wo der Assistent es erlaubt, fragen Sie, ohne angemeldet zu sein. Je nach Assistent und Einstellungen können frühere Chats oder andere Kontodaten die Antwort beeinflussen, etwa wenn Sie bereits oft nach Ihrem Unternehmen gefragt haben.
- Stellen Sie jedem Assistenten dieselben Fragen. Nutzen Sie ChatGPT, Google AI Mode, Gemini und Microsoft Copilot. Google AI Mode ist ein eigener Chat-Modus in der Google-Suche. Er ist nicht dasselbe wie die Google KI-Übersicht, die manchmal über den normalen Suchergebnissen erscheint; notieren Sie deshalb, welche der beiden Sie genutzt haben. Beginnen Sie für jede Frage einen neuen Chat, wo es Chats gibt, damit eine Antwort nicht die nächste beeinflusst. Wie sich die vier Assistenten unterscheiden, zeigt der Vergleich von ChatGPT, Gemini, Copilot und Google AI Mode.
- Notieren Sie pro Antwort vier Dinge. Wurden Sie genannt? Wenn ja, standen Sie in einer Liste, und an welcher Stelle der Liste? Wer wurde sonst genannt? Welche Websites hat die Antwort als Quellen verlinkt?
- Lesen Sie den Satz rund um Ihren Namen. Eine Nennung kann eine Empfehlung sein, ein neutraler Eintrag in einer Liste oder eine Bemerkung wie «sonntags geschlossen». Kopieren Sie den Satz in Ihre Notizen.
- Wiederholen Sie die Runde an einem anderen Tag. Stellen Sie einige Tage später genau dieselben Fragen noch einmal. Ändern Sie nichts am Wortlaut, damit Unterschiede in der Formulierung Ihren Vergleich nicht verfälschen.
- Halten Sie alles in einer Tabelle fest. Legen Sie eine Zeile pro Frage und Assistent an, mit einer Spalte für jede notierte Angabe und einer für das Datum. Nach einigen Runden zeigt die Tabelle ein Muster, das eine einzelne Antwort nicht zeigen kann.
Eine Beispieltabelle für eine Bäckerei in Zürich
| Frage | Assistent | Genannt? | Position | Ebenfalls genannt | Zitierte Quellen |
|---|---|---|---|---|---|
| Welche Bäckerei in Zürich empfehlen Sie für Sauerteigbrot? | ChatGPT | Ja | 3 | Bäckerei A, Bäckerei B | ein Stadtführer, ein Bewertungsportal |
| Welche Bäckerei in Zürich empfehlen Sie für Sauerteigbrot? | Gemini | Nein | Bäckerei A, Bäckerei C, Bäckerei D | keine angezeigt | |
| Wo kann ich in Zürich Kreis 4 für Samstag eine Geburtstagstorte bestellen? | Copilot | Nein | Bäckerei B, eine Supermarktkette | ein Verzeichniseintrag | |
| Welche Bäckereien in Zürich haben ein gutes glutenfreies Angebot? | Google AI Mode | Ja | 1 | Bäckerei E | ein Forumsbeitrag, Ihre eigene Website |
Wie eine solche Prüfung mit echten Antworten aussieht, zeigen der Test Welche Bäckereien ChatGPT in St. Gallen nennt und die Übersicht zu Zahnärzten in Schweizer, deutschen und österreichischen Städten. Zwei Spalten sind später meist am nützlichsten. «Ebenfalls genannt» zeigt, welche anderen Unternehmen neben Ihrem auftauchen, auch solche, mit denen Sie vielleicht nicht rechnen. «Zitierte Quellen» zeigt, welche Websites der Assistent angegeben hat; so können Sie prüfen, ob diese Seiten Ihr Unternehmen richtig aufführen.
Was es bedeutet, wenn ChatGPT Ihr Unternehmen nennt oder nicht nennt
Genannt heisst nicht empfohlen
«Genannt» bedeutet, dass die Antwort Ihr Unternehmen erwähnt. Diese Nennungen können Sie zählen. Ob eine Nennung eine Empfehlung ist, hängt vom Zusammenhang ab. Lesen Sie also den Satz, bevor Sie sich freuen oder Sorgen machen. Ein Unternehmen, das als «weitere Möglichkeit, allerdings mit gemischten Bewertungen» erscheint, gilt als genannt.
Die Position zählt, mit Einschränkungen
Assistenten zählen oft mehrere Unternehmen auf. Wer an erster Stelle steht, fällt eher auf als jemand an fünfter Stelle, aber die Reihenfolge kann sich von einer Antwort zur nächsten ändern. Verstehen Sie die Position als groben Hinweis, etwa «meist weit oben» oder «meist am Ende einer langen Liste», nicht als genauen Rang.
Unsere Daten In den bisherigen Prüfungen mit CheckAI lag das geprüfte Unternehmen, wenn es überhaupt genannt wurde, im Median auf Position 2,5. In 19 % der 36 Antworten, die es nannten, stand es an erster Stelle.
Momentaufnahme oder Trend
Eine einzelne Runde zeigt, was die Assistenten bei dieser Prüfung geantwortet haben, ist aber nur eine Momentaufnahme. Wer dieselbe Frage zweimal stellt, kann andere Namen erhalten. Ein Wechsel von «genannt» zu «nicht genannt» zwischen zwei Tagen kann also normale Schwankung sein. Um einen Trend zu erkennen, brauchen Sie mehrere Runden mit identischen Fragen.
Unsere Daten Ging dieselbe Frage für dasselbe Unternehmen in einer späteren Prüfung nochmals an denselben Assistenten, war die Liste der genannten Unternehmen in 0 von 42 Paaren identisch. Die Überschneidung der beiden Listen lag im Schnitt bei 0,24 (0 heisst keine gemeinsamen Namen, 1 heisst genau dieselben Namen). Das einfache Ja oder Nein für das geprüfte Unternehmen blieb in 38 von 42 Paaren gleich, meist weil es beide Male «nicht genannt» war.
- 5,1 %von 709 Antworten nannten das geprüfte Unternehmen
- 18 von 31Prüfungen ohne eine Antwort, die das Unternehmen nennt
- 17verschiedene Unternehmensnamen pro Frage über alle vier Assistenten (Median)
Wenn Ihre erste Runde wenige oder keine Nennungen zeigt, sind Sie in dieser Stichprobe keine Ausnahme. Der Ratgeber Warum KI-Assistenten Ihr Unternehmen nicht nennen zeigt, was Sie als Nächstes anschauen können.
Was die Prüfung von Hand aufwendig macht
Die Methode ist einfach. Sie sauber von Hand durchzuführen, dauert aber länger, als die meisten Inhaberinnen und Inhaber erwarten, und zwar aus vier Gründen.
Die Zahl der Antworten summiert sich
Sechs Fragen an vier Assistenten ergeben bis zu 24 Antworten pro Runde. Jede Frage braucht einen eigenen Chat oder eine eigene Suche, und jede Antwort braucht eine Zeile in Ihrer Tabelle. Wiederholen Sie das jede Woche oder alle zwei Wochen, wird daraus eine regelmässige Aufgabe und kein kurzer Blick.
Die Antworten sind lang
Unsere Daten Die Antwortlänge lag im Median je nach Assistent bei rund 350 Wörtern (ChatGPT und Gemini) bis 440 Wörtern (Copilot), und eine Antwort nannte je nach Assistent im Schnitt rund 4,5 bis 6 Unternehmen. In 24 solchen Antworten Ihren Firmennamen, dessen Position und alle weiteren Unternehmen zu finden, ist mühsam und fehleranfällig, wenn Namen unterschiedlich geschrieben sind oder nur als Webadresse vorkommen.
Die Antworten schwanken
Weil sich die Liste der Namen zwischen zwei Prüfungen ändern kann (mehr dazu unter warum ChatGPT jedes Mal anders antworten kann), brauchen Sie mehrere Runden, bevor Sie eine echte Veränderung vom Zufall unterscheiden können. Von Hand heisst das: über Wochen denselben Wortlaut verwenden und die Notizen einheitlich führen.
Beim Ort passieren leicht Fehler
Wenn Sie angemeldet sind oder Ihr Browser Ihren Standort weitergibt, sehen Sie womöglich andere Ergebnisse als eine neue Kundin an einem anderen Ort. Vergessen Sie den Ort in einer Frage, beschreibt die Antwort vielleicht Unternehmen in einem anderen Land.
So führt CheckAI dieselbe Prüfung bei allen vier Assistenten durch
CheckAI folgt der Methode oben und übernimmt die wiederkehrende Arbeit. Sie geben Ihre Website ein; CheckAI liest die Startseite und entwirft daraus 6 Kundenfragen, die Sie ändern können, bevor irgendetwas gefragt wird. Der angegebene Ort wird in jede Frage aufgenommen, damit alle Assistenten denselben Ortsbezug erhalten.
Jede Frage geht dann ohne Anmeldung an die Verbraucherversionen von ChatGPT, Google AI Mode, Gemini und Microsoft Copilot. Das ergibt 24 Anfragen, die meist in etwa 60 bis 80 Sekunden abgeschlossen sind. Fehlende Antworten werden angezeigt und nicht mitgezählt. Ein Sprachmodell liest jede Antwort und listet die genannten Unternehmen der Reihe nach auf. So erhalten Sie dieselben Spalten wie in der Tabelle von Hand: genannt oder nicht, Position, weitere genannte Unternehmen und zitierte Websites. Der vollständige Text jeder Antwort bleibt abrufbar, damit Sie den Satz rund um Ihren Namen lesen können.
Damit Sie eine Momentaufnahme von einem Trend unterscheiden können, zeigt der Bericht neben dem gemessenen Wert einen Bereich an. Das Tracking stellt dieselben Fragen jede Woche oder alle zwei Wochen, damit Sie die Ergebnisse über die Zeit vergleichen können. Die Einzelheiten stehen unter So messen wir. CheckAI ändert Ihre Website nicht und verspricht nicht, dass Sie genannt werden; es zeigt, was die Assistenten geantwortet haben.
Eine erste Prüfung bei ChatGPT und Google AI Mode ist kostenlos und braucht keine Registrierung; der Einzel-Check und die Abos fragen alle vier Assistenten. Wenn Sie lieber weiter von Hand prüfen, reichen die Schritte und die Tabelle oben.