Wie prüft man, ob eine Marke in den Antworten von ChatGPT erscheint?

Möchten Sie wissen, ob Ihre Marke in den Antworten von ChatGPT erscheint? Statt direkt zu fragen: „Kennen Sie unser Unternehmen?“, sollten Sie realistische Fragen potenzieller Kunden simulieren und beobachten, ob Ihre Marke von sich aus empfohlen wird, ob die Beschreibung korrekt ist und auf welche Quellen sich die Antwort stützt. Für Personen, die prüfen möchten, wie eine Marke in ChatGPT sichtbar ist, ist eine wiederholbare Prüfmethode wertvoller als ein zufälliger Einzelfall.

Fragen vorbereiten: Nicht nur nach dem eigenen Markennamen suchen

Wenn Sie direkt den Markennamen eingeben, können Sie prüfen, ob das System das Unternehmen erkennt, und feststellen, ob die Website, die Produktkategorie oder der Geschäftsbereich falsch dargestellt werden. Diese Frage gibt ChatGPT den Markennamen jedoch bereits vor und kann daher nicht belegen, dass die Marke auch dann erwähnt wird, wenn ein unbekannter Käufer nach vergleichbaren Produkten fragt.

Teilen Sie Ihre Testfragen am besten in drei Gruppen ein: Fragen Sie in der ersten Gruppe direkt nach der Marke und ihrem Angebot; in der zweiten Gruppe fragen Sie ohne Markennamen nach Anbietern einer bestimmten Produktkategorie; in der dritten Gruppe ergänzen Sie Beschaffungskriterien wie Anwendung, Zielmarkt, Leistungsumfang oder Gerätetyp. Bei internationalen Geschäften sollten Sie die Sprache verwenden, die Ihre Zielkunden tatsächlich sprechen, sowie gängige Bezeichnungen für die jeweilige Produktkategorie. Übersetzen Sie nicht einfach chinesische Fragen Wort für Wort.

Ein Anbieter von Schwermaschinen könnte zum Beispiel fragen: „Welche Geräte bietet die Marke hauptsächlich an?“ und „Welche Anbieter liefern Ausrüstung für den Materialumschlag im Bergbau?“. Anschließend könnte er fragen: „Wie wählt man einen Ausrüstungsanbieter aus, der Installation und Kundendienst anbietet?“. Die dritte Frage verlangt nicht unbedingt die Nennung einer Marke, zeigt aber, ob die öffentlich zugänglichen Unternehmensinformationen die für Käufer wichtigen Angaben zu Lieferung und Service abdecken.

Bei der Prüfung sowohl die Bedingungen als auch die Antworten festhalten

Geben Sie die vorbereiteten Fragen nacheinander in ChatGPT ein. Beginnen Sie für jede Frage möglichst einen neuen Chat, damit eine zuvor erwähnte Marke die folgenden Antworten nicht beeinflusst. Wenn Sie Antworten mit Websuche beobachten möchten, prüfen Sie, ob die Suchfunktion in der aktuellen Sitzung verwendet wird, und notieren Sie die in der Oberfläche angezeigten Quellen. Antworten können je nach Konto, Modell, Region, Zeitpunkt und Suchstatus unterschiedlich ausfallen. Betrachten Sie daher einen einzelnen Screenshot nicht als langfristig gültiges Ergebnis.

Eine einfache Tabelle reicht aus. Notieren Sie mindestens das Testdatum, die vollständige Frage, das verwendete Modell und den Suchstatus, ob die Marke erwähnt wurde, den relevanten Wortlaut der Antwort sowie die Quellenlinks. Bei internationalen Märkten sollten Sie auch die Sprache der Frage und die Zielregion festhalten. Falls möglich, fügen Sie einen Screenshot oder einen Link zum Chat hinzu, damit sich die Ergebnisse später überprüfen lassen.

Bewerten Sie die Ergebnisse nicht nur danach, ob die Marke „genannt“ oder „nicht genannt“ wird. Sie kann in einer Anbieterliste erscheinen, ohne dass ein Link zur Unternehmenswebsite angegeben wird. Oder sie wird zwar erwähnt, aber das Hauptgeschäft, die bedienten Regionen oder die Produktspezifikationen werden falsch dargestellt. Öffnen Sie bei Antworten mit Quellen die zitierten Seiten einzeln und prüfen Sie, ob sie die jeweilige Aussage tatsächlich belegen. Ein Quellenlink bedeutet nicht, dass alle Angaben korrekt von der Seite übernommen wurden.

Testen Sie dieselbe Fragengruppe an verschiedenen Tagen erneut und bewahren Sie die Originalergebnisse auf. Wenn Sie die Erwähnungsquote berechnen möchten, verwenden Sie „Anzahl der Fragen, bei denen die Marke erwähnt wurde ÷ Gesamtzahl der Testfragen“ und geben Sie zugleich den Umfang und die Anzahl der Fragen an. Diese Zahl beschreibt nur die Stichprobe dieses Tests. Sie steht weder für die Antworten, die alle Nutzer sehen, noch für den Marktanteil oder die tatsächliche Sichtbarkeit.

Was tun, wenn die Marke nicht erscheint oder falsch dargestellt wird?

Wenn ChatGPT die Marke bei einer Frage mit Markennamen erkennt, sie bei einer Frage zur Produktkategorie ohne Markennamen aber nicht nennt, prüfen Sie zunächst, ob die Testfrage zu allgemein gefasst ist. „Empfehlen Sie Industrieausrüstungsunternehmen“ deckt beispielsweise ein sehr breites Feld ab. Fragen, die sich auf eine bestimmte Geräteklasse, Anwendung und Serviceanforderungen beziehen, entsprechen eher der Auswahlweise von Einkäufern. Selbst wenn die Frage konkret genug ist, bedeutet eine ausbleibende Erwähnung nicht zwingend, dass ein technisches Problem mit der Website vorliegt. Auch die Auswahl in der Antwort kann variieren.

Enthält eine Antwort sachliche Fehler, ermitteln Sie zunächst deren mögliche Ursache: Sind die Angaben auf der Unternehmenswebsite veraltet? Wurden in einem Drittanbieter-Verzeichnis frühere Namen vermischt? Sind die Beschreibungen in den verschiedenen Sprachversionen uneinheitlich? Aktualisieren Sie zunächst die Seiten, die Sie selbst kontrollieren können, und kontaktieren Sie die Betreiber externer Seiten, um eine Korrektur zu beantragen. Halten Sie nach der Änderung das Aktualisierungsdatum fest und testen Sie mit denselben Fragen erneut. Versprechen Sie nicht, dass eine Seitenaktualisierung die Antworten sofort verändert.

Achten Sie außerdem auf Verwechslungen mit Marken gleichen Namens. Ist der Markenname kurz oder ein gebräuchliches Wort, ergänzen Sie beim Test den vollständigen Unternehmensnamen, den Standort und die Hauptprodukte. Prüfen Sie, ob sich die Antwort tatsächlich auf das richtige Unternehmen bezieht. Geben Sie bei der Prüfung keine vertraulichen Informationen wie Kundenlisten oder Mindestpreise ein und laden Sie keine internen Daten als Testmaterial hoch.

Unternehmensinformationen verständlich aufbereiten und für Käufer leichter überprüfbar machen

Die Prüfung ist nur der erste Schritt. Die Website eines international tätigen Unternehmens sollte mindestens den Firmennamen, die Produktkategorien, die Anwendungsbereiche, den Leistungsumfang und die Kontaktmöglichkeiten klar angeben. Auf Produktseiten sollten Modell, geeignete Betriebsbedingungen, wichtige technische Daten und die Quellen der Angaben genannt werden. Sind technische Daten nicht sicher, sollte darauf hingewiesen werden, dass sie projektbezogen bestätigt werden müssen. Tragen Sie keine ungeprüften Werte ein, nur damit die Seite vollständig wirkt.

Zum Beispiel verwendet das Angebot an Schwermaschinen und Ausrüstung für die Schwerindustrie ein einspaltiges modulares Layout, das die Darstellung branchenspezifischer Anwendungen mit Produktnavigation, Serviceversprechen und einer Anfragefunktion verbindet. Bei einer solchen Website helfen große Bilder den Besuchern, das Angebot schnell zu erfassen. Verwendungszwecke, technische Daten und Servicebedingungen der Geräte sollten jedoch weiterhin klar und schriftlich erläutert werden. Kundenreferenzen und Projektdaten sollten erst nach Genehmigung und Überprüfung veröffentlicht werden.

Yingbaobao bietet Dienstleistungen in den Bereichen intelligente Website-Erstellung, mehrsprachige Websites, Suchmaschinenoptimierung und internationales Marketing an. In der Praxis können die für die Website-Erstellung zuständigen Mitarbeitenden die öffentlich zugänglichen Produktseiten strukturieren, das Marketingteam die Fragen von Käufern und die Testergebnisse zusammenstellen und das Vertriebsteam anschließend prüfen, ob die Antworten den tatsächlichen geschäftlichen Rahmenbedingungen entsprechen. Wenn Website-Erstellung und Marketing zusammenarbeiten, lassen sich Informationslücken leichter erkennen, als wenn lediglich eine Unternehmensbeschreibung geändert wird.

Korrigieren Sie nach Abschluss einer Prüfrunde zuerst Fehler, die Käufer irreführen könnten, und ergänzen Sie anschließend fehlende Produkt- und Serviceinformationen. Bewahren Sie die ursprünglichen Fragen und Testbedingungen auf und wiederholen Sie die Prüfung nach einiger Zeit mit derselben Methode. Ändern sich die Antworten, können Sie so besser unterscheiden, ob dies auf aktualisierte Informationen oder auf abweichende Testbedingungen zurückzuführen ist.