ChatGPT, Gemini, Copilot und Google AI Mode im Vergleich: So antworten sie, wenn Kunden nach einem Unternehmen fragen
Im Vergleich von ChatGPT, Gemini, Copilot und Google AI Mode antworteten die vier Assistenten auf dieselben Kundenfragen deutlich unterschiedlich: In unseren Prüfungen schrieb Copilot die längsten Antworten, Gemini nannte die meisten Unternehmen, setzte aber nur bei rund 30 % seiner Antworten einen Quellenlink, ChatGPT und Copilot lieferten zu jeder Antwort mindestens einen Link oder eine beigezogene Seite, und Google AI Mode war am schnellsten. ChatGPT, AI Mode und Gemini nannten das geprüfte Unternehmen etwa gleich oft (in 5 bis 7 % der Antworten); Copilot nannte es am seltensten.
Kurz gesagt
- In unseren Prüfungen erhielten alle vier Assistenten dieselben 181 Fragen und nannten trotzdem weitgehend verschiedene Unternehmen: Die durchschnittliche Überschneidung zwischen zwei Assistenten lag bei etwa 11 %.
- Zu jeder Antwort von ChatGPT und Copilot gab es mindestens einen Link oder eine beigezogene Seite; bei Google AI Mode hatten 97 % der Antworten einen Quellenlink, bei Gemini rund 30 %.
- Google AI Mode verlinkte YouTube und Reddit deutlich häufiger als die anderen Assistenten.
- In unserem Aufbau liess sich nur bei Google AI Mode ein Land einstellen; für ChatGPT, Gemini und Copilot gab es keine Ländereinstellung.
- Google AI Mode und die Google KI-Übersicht sind zwei verschiedene Dinge: Das eine ist ein Modus der Google-Suche, das andere eine Zusammenfassung, die bei manchen Suchergebnissen erscheint.
Auf dieser Seite
- ChatGPT, Gemini, Copilot und AI Mode nebeneinander
- ChatGPT: weniger Namen, viele Links
- Google AI Mode: schnell, mit vielen Links zu YouTube und Reddit
- Gemini: viele Namen, wenige Links
- Copilot: längste Antworten, am seltensten das geprüfte Unternehmen
- Google AI Mode ist nicht die Google KI-Übersicht
- Nur Google AI Mode liess ein Land zu
- Warum ChatGPT, Gemini und Copilot verschiedene Unternehmen nennen
- Was Sie aus diesen Unterschieden mitnehmen können
Unsere Daten Als wir ChatGPT, Google AI Mode, Gemini und Microsoft Copilot dieselben Kundenfragen stellten, antworteten sie deutlich unterschiedlich. Copilot schrieb die längsten Antworten und brauchte am längsten. Gemini nannte pro Antwort die meisten Unternehmen, setzte aber nur bei rund 30 % seiner Antworten einen Quellenlink. Jede Antwort von ChatGPT und Copilot kam mit mindestens einem Link oder einer beigezogenen Seite zurück. Google AI Mode antwortete am schnellsten und verlinkte oft YouTube und Reddit.
Kleiner waren die Unterschiede dabei, wie oft sie das geprüfte Unternehmen nannten. ChatGPT, AI Mode und Gemini taten es in 5 bis 7 % ihrer Antworten, Copilot in unter 2 %. Dieser Ratgeber zeigt für jeden Assistenten, was wir beobachtet haben und was die Ergebnisse für Unternehmen wie eine Bäckerei in Zürich oder einen Anbieter von Dresscode-Tools bedeuten können.
ChatGPT, Gemini, Copilot und AI Mode nebeneinander
Unsere Daten Die Tabelle stellt die wichtigsten Messwerte nebeneinander. «Hat das geprüfte Unternehmen genannt» heisst: Die Antwort erwähnte das Unternehmen, das wir geprüft haben. Das ist nicht unbedingt eine Empfehlung.
| Gemessen | ChatGPT | Google AI Mode | Gemini | Copilot |
|---|---|---|---|---|
| Erhaltene Antworten (von 181 Fragen) | 181 | 181 | 168 | 179 |
| Länge der Antwort (Median, Wörter) | 347 | 390 | 347 | 440 |
| Genannte Unternehmen pro Antwort (Mittelwert) | 4,5 | 5,9 | 6,1 | 5,6 |
| Antworten mit mindestens einem Link oder einer beigezogenen Seite | 100 % | 97 % | 30 % | 100 % |
| Links oder beigezogene Seiten pro Antwort (Mittelwert) | 9,7 | 8,1 | 1,1 | 3,1 |
| Hat das geprüfte Unternehmen genannt | 13 von 181 (7,2 %) | 10 von 181 (5,5 %) | 10 von 168 (6,0 %) | 3 von 179 (1,7 %) |
| Antwortzeit (Median, Sekunden) | 15,0 | 9,9 | 15,7 | 26,8 |
Zwei dieser Zeilen sind mit Vorsicht zu lesen. Die Zahlen zu den Nennungen sind klein, deshalb überschneiden sich einige der geschätzten 90-%-Bereiche: etwa 4,6 % bis 11 % für ChatGPT, 3,3 % bis 9 % für AI Mode, 3,6 % bis 9,7 % für Gemini und 0,7 % bis 4,1 % für Copilot. Und die Antwortzeiten enthalten unseren eigenen technischen Zusatzaufwand und können von dem abweichen, was jemand auf dem eigenen Handy erlebt.
Unsere Daten Links oder beigezogene Seiten pro Antwort, im Durchschnitt:
Unsere Daten Länge der Antworten in Wörtern (Median):
ChatGPT: weniger Namen, viele Links
Unsere Daten ChatGPT beantwortete alle 181 Fragen. Seine Antworten hatten im Median 347 Wörter und nannten im Durchschnitt 4,5 Unternehmen, so wenige wie bei keinem anderen der vier. Zu jeder Antwort gab es mindestens einen Link oder eine beigezogene Seite, im Durchschnitt 9,7 pro Antwort. Das geprüfte Unternehmen nannte ChatGPT in 13 Antworten (7,2 %), der höchste Anteil in unserer Stichprobe, wobei sich die geschätzten 90-%-Bereiche mit denen von AI Mode und Gemini überschneiden.
Ein Detail zu den Links: Wenn eine ChatGPT-Antwort im Text selbst keine Links hatte, haben wir die Liste der Webseiten gezählt, die mit der Antwort zurückkam. Ein Teil der 100 % von ChatGPT sind also Seiten, die es beigezogen hat, und nicht Links direkt neben einem Satz.
Unsere Daten Am häufigsten verlinkte es in unserer Stichprobe Technik- und Modemedien (techradar.com, vogue.com, itechguides.com), den Schweizer Mieterinnen- und Mieterverband (mieterverband.ch), Projektseiten wie github.com sowie apple.com. Das spiegelt die Themen der geprüften Unternehmen. Bei Fragen zu einer Bäckerei oder Steuerberatung wären womöglich andere Seiten verlinkt.
Was es für Sie bedeuten kann (Ratschlag): Weniger Namen pro Antwort bedeuteten in dieser Stichprobe nicht weniger Nennungen des geprüften Unternehmens. Prüfen Sie die Links und beigezogenen Seiten zu Ihren ChatGPT-Antworten, und prüfen Sie, ob diese Seiten Sie überhaupt erwähnen und ob das, was dort über Sie steht, aktuell ist.
Google AI Mode: schnell, mit vielen Links zu YouTube und Reddit
Unsere Daten Google AI Mode beantwortete alle 181 Fragen, im Median mit 390 Wörtern und 5,9 Unternehmen pro Antwort. Es antwortete am schnellsten (Median 9,9 Sekunden). 97 % seiner Antworten enthielten einen Quellenlink, im Durchschnitt etwa 8,1. Das geprüfte Unternehmen nannte es in 10 Antworten (5,5 %).
Unsere Daten Die häufigsten Quellen waren youtube.com (in 80 Antworten) und reddit.com (46), danach Links auf Google-Suchen (38), apple.com, facebook.com und fits-app.com. Kein anderer Assistent verlinkte in unserer Stichprobe YouTube oder Reddit auch nur annähernd so oft.
Antworten von AI Mode können zudem Ortskarten für Unternehmen enthalten, ähnlich den Einträgen, die man von Google Maps kennt. Diese zählen wir als genannte Unternehmen, nicht als Quellenlinks. AI Mode war in unserem Aufbau auch der einzige Assistent, bei dem sich ein Land einstellen liess (mehr dazu weiter unten).
Was es für Sie bedeuten kann (Ratschlag): Wenn Sie ein lokales Geschäft führen, prüfen Sie, ob Ihr Google-Unternehmensprofil (Name, Adresse, Öffnungszeiten, Kategorie) vollständig und korrekt ist, denn AI Mode zeigte Ortskarten. Wenn es Videos oder Reddit-Diskussionen zu Ihrer Branche gibt, kann es sich lohnen zu lesen, was dort steht, denn AI Mode verlinkte solche Seiten in unseren Prüfungen oft.
Gemini: viele Namen, wenige Links
Unsere Daten Gemini lieferte auf 168 von 181 Fragen eine brauchbare Antwort; bei 13 erhielten wir eine Fehlermeldung oder gar nichts, auch nach erneutem Nachfragen. Seine Antworten hatten im Median 347 Wörter und nannten im Durchschnitt 6,1 Unternehmen, die meisten der vier. Das geprüfte Unternehmen nannte Gemini in 10 Antworten (6,0 %).
Unsere Daten Der deutlichste Unterschied sind die Links: Nur rund 30 % der Gemini-Antworten hatten überhaupt einen Quellenlink, über alle Antworten gerechnet im Durchschnitt etwa 1,1 pro Antwort. Wenn Gemini verlinkte, waren es in unserer Stichprobe am häufigsten Websites von Tools und Firmen (zum Beispiel stytrix.com, inflowinventory.com, discoverfashions.com) und weniger Medien oder Foren.
Was es für Sie bedeuten kann (Ratschlag): Weil die meisten Gemini-Antworten keinen Link enthielten, liest eine Kundin Ihren Namen womöglich, ohne direkt auf Ihre Website klicken zu können. Sorgen Sie dafür, dass Ihr Name leicht zu suchen ist und Ihre Startseite klar sagt, was Sie anbieten und wo, damit eine anschliessende Suche Sie findet.
Copilot: längste Antworten, am seltensten das geprüfte Unternehmen
Unsere Daten Microsoft Copilot beantwortete 179 von 181 Fragen. Seine Antworten waren die längsten (Median 440 Wörter) und kamen am langsamsten (Median 26,8 Sekunden). Copilot nannte im Schnitt 5,6 Unternehmen pro Antwort. Jede Antwort enthielt mindestens einen Quellenlink, im Durchschnitt 3,1, also weniger als bei ChatGPT oder AI Mode.
Unsere Daten Das geprüfte Unternehmen nannte Copilot nur in 3 Antworten (1,7 %). Bei nur 3 Nennungen ist der geschätzte Bereich breit (0,7 % bis 4,1 %); das ist also ein schwaches Signal und kein Urteil über Copilot. Am häufigsten verlinkte Copilot Fach- und Produktseiten, zum Beispiel discoverfashions.com, miningpoolstats.net, coloranalysistech.com und github.com.
Was es für Sie bedeuten kann (Ratschlag): Copilot ist der Assistent von Microsoft und kann bei Websuchen Bing-Ergebnisse nutzen. Wenn die anderen Assistenten Sie nennen, Copilot aber nicht, prüfen Sie, ob Ihre Website bei Bing überhaupt zu finden ist; der Bericht von CheckAI zeigt Ihre Bing-Position für einige Suchbegriffe.
Google AI Mode ist nicht die Google KI-Übersicht
Die beiden werden leicht verwechselt. Die Google KI-Übersicht (englisch AI Overview) ist eine KI-generierte Zusammenfassung, die Google bei manchen Suchen zeigt, zusammen mit Links zu Websites. Die Zusammenfassung und die Links erscheinen zusammen mit den übrigen Suchergebnissen.
Google AI Mode ist ein eigener Modus der Google-Suche. Man kann Fragen stellen, erhält KI-generierte Antworten und kann Folgefragen stellen. Deshalb verhält sich AI Mode eher wie ChatGPT oder Gemini, und deshalb stellen wir ihm dieselben Kundenfragen wie den anderen.
Der Bericht von CheckAI deckt beides an verschiedenen Stellen ab. AI Mode ist einer der vier Assistenten. Die KI-Übersicht erscheint im Teil zu Google und Bing: Für jeden Suchbegriff zeigt er, ob Google eine KI-Übersicht angezeigt hat und, falls ja, ob sie Sie nannte oder Ihre Website verlinkte. Bei manchen Suchen zeigt Google keine KI-Übersicht, und der Bericht vermerkt das.
Nur Google AI Mode liess ein Land zu
In unserem Aufbau war Google AI Mode der einzige Assistent, bei dem sich ein Land einstellen liess. Wir haben jeweils das Land des Unternehmens gewählt: Unsere Daten die USA in 21 Prüfungen, die Schweiz in 6, Deutschland in 3 und Grossbritannien in 1.
Für ChatGPT, Gemini und Copilot gab es in unserem Aufbau keine Ländereinstellung; bei Fragen ohne Ortsangabe konnten ihre Antworten Unternehmen an ganz verschiedenen Orten nennen. Eine Frage wie «Welches Velogeschäft in meiner Nähe repariert am Samstag?» kann dann amerikanische Geschäfte ergeben. Für lokale Suchen haben wir den Ort in die Frage geschrieben: «Welches Velogeschäft in Bern repariert am Samstag?»
Dieselben sechs Fragen mit wechselndem Ort stellten wir für Zahnarztpraxen in Schweizer, deutschen und österreichischen Städten.
Ratschlag: Wenn Sie selbst von Hand testen, schreiben Sie den Ort oder die Region bei jedem Assistenten in die Frage, auch dann, wenn sich ein Land einstellen lässt.
Warum ChatGPT, Gemini und Copilot verschiedene Unternehmen nennen
Unsere Daten Auf dieselbe Frage nannten die vier Assistenten weitgehend verschiedene Unternehmen. Beim Vergleich von jeweils zwei Assistenten überschnitten sich die genannten Unternehmen im Durchschnitt zu etwa 11 % (von etwa 8 % bei ChatGPT und Copilot bis 13 % bei ChatGPT und AI Mode). Zusammen ergaben die vier im Median 17 verschiedene Namen pro Frage, und nur bei 35 der 167 Fragen, die alle vier beantworteten, gab es mindestens einen Namen, den alle vier nannten.
Wer von einem Assistenten genannt wird, weiss deshalb wenig darüber, was die anderen sagen. In unserer Stichprobe wurde das geprüfte Unternehmen bei 13 von 31 Prüfungen mindestens einmal genannt, und nur in 1 Prüfung von allen vier Assistenten. Einzelne Branchen sind im Detail ausgewertet, etwa Velogeschäfte und Treuhänder.
Was Sie aus diesen Unterschieden mitnehmen können
- Alle vier prüfen, nicht nur einen. Weil die Assistenten auf dieselbe Frage verschiedene Unternehmen nannten, sagt ein Ergebnis von ChatGPT allein nichts darüber, was Copilot oder Gemini antworten.
- Die Quellen pro Assistent lesen. ChatGPT und AI Mode verlinkten viele Seiten, Gemini wenige. Die verlinkten Seiten können Hintergrund zu Ihrem Thema liefern, auch wenn ein Link nicht verrät, warum ein Unternehmen genannt wurde.
- Den Ort in die Frage schreiben. Ohne Ortsangabe schlägt ein Assistent womöglich Unternehmen am falschen Ort vor.
- Wiederholen, bevor Sie Schlüsse ziehen. Einzelne Antworten schwanken. Vergleichen Sie die Ergebnisse mehrerer Fragen an verschiedenen Tagen, etwa mit einer kostenlosen Prüfung in CheckAI, die Sie eine Woche später mit denselben Fragen wiederholen.
Den Gesamtüberblick über unsere Zahlen finden Sie unter was unsere Daten über KI-Empfehlungen zeigen, die hier verwendeten Begriffe im Glossar zur KI-Sichtbarkeit. Wie jede Zahl gezählt wird, steht unter so messen wir.