Lisa-Marie Unger, Feb. 06, 2024
Im März wurde von Searchengineland.com eine Studie über generative KI-Plattformen veröffentlicht, um herauszufinden, welche davon die besten sind. Nun, zehn Monate später, hat sich die Landschaft weiterentwickelt.
ChatGPT von OpenAI bietet nun die Möglichkeit, Plugins zu integrieren. Google hat Bard mit Gemini erweitert, und Anthropic hat mit Claude seine eigene Lösung entwickelt. Deshalb konnte die Studie wiederholt werden, diesmal mit zusätzlichen Testanfragen und einem überarbeiteten Ansatz zur Auswertung der Ergebnisse.
Hier ist die aktualisierte Analyse, die versucht zu bestimmen, welche generative KI-Plattform "die beste" ist. Die Bewertung wurde auf zahlreiche Aktivitätskategorien aufgeteilt.
Getestet wurden:
SGE wurde nicht einbezogen, da es nicht immer als Antwort auf viele von Google beabsichtigte Abfragen erscheint.
Ausserdem wurden für alle Tools die grafische Benutzeroberfläche verwendet, was bedeutet, dass GPT-4 Turbo nicht eingesetzt wurde. Dies ist eine Variante, die mehrere Verbesserungen von GPT-4 ermöglicht, einschliesslich Daten bis zum April 2023, aber nur über die GPT-4-API verfügbar ist.
Man hat jeder generativen KI die gleichen 44 Fragen aus verschiedenen Themenbereichen gestellt, bestehend aus einfachen Fragen und nicht hochgradig ausgefeilten Aufforderungen.
Bei den getesteten Tools erzielte Bard/Gemini über alle 44 Anfragen hinweg die besten Gesamtergebnisse. Drei Anfragen, bei denen Bard besonders gut abschnitt, waren lokale Suchanfragen, die es sehr gut bewältigte, was zu einer seltenen perfekten Gesamtpunktzahl von 4 bei zwei dieser Anfragen führte.
Die beiden getesteten Bing Chat-Lösungen erfüllten die Erwartungen bei lokalen Anfragen nicht, da sie dachten, der Tester wäre in Concord, Massachusetts, obwohl er in Falmouth, Massachusetts war (diese beiden Orte liegen 90 Meilen auseinander). Bing verlor auch Punkte aufgrund einiger Genauigkeitsprobleme, die es öfter als Bard hatte.
Ein Pluspunkt für Bing ist jedoch, dass es mit Abstand das beste Tool für die Bereitstellung von Quellenangaben und zusätzlichen Ressourcen für weiterführende Lektüren des Nutzers ist. ChatGPT und Claude versuchen dies in der Regel nicht (da sie kein aktuelles Bild des Webs haben), und Bard tut dies nur sehr selten. Diese Schwäche von Bard ist eine grosse Enttäuschung.
ChatGPTs Ergebnisse litten unter Anfragen, die Folgendes erforderten:
Die Installation des MixerBox WebSearchG-Plugins machte ChatGPT bei aktuellen Ereignissen und dem Lesen aktueller Webseiten wesentlich wettbewerbsfähiger. Die Haupttestergebnisse wurden ohne dieses Plugin durchgeführt, aber es konnten einige Nachtests damit durchgeführt werden.
Mit dem verwendeten Anfrageset hinkte Claude etwas hinter den anderen her. Jedoch sollte man diese Plattform nicht unterschätzen. Sie ist ein würdiger Konkurrent. Sie bewältigte viele Anfragen gut und war sehr stark im Erstellen von Artikelstrukturen.
Der Test hob einige Stärken dieser Plattform nicht hervor, wie das Hochladen von Dateien, das Akzeptieren von viel längeren Aufforderungen und das Bereitstellen von detaillierteren Antworten (bis zu 100.000 Token - 12-mal mehr als ChatGPT). Es gibt Aufgabenbereiche, in denen Claude für dich die beste Plattform sein könnte.
Es ist entscheidend, die Stärken jedes Tools für verschiedene Arten von Anfragen zu verstehen, um eine umfassende Bewertung vorzunehmen. Das hängt davon ab, wie du diese Tools nutzen möchtest.
Die Lösungen Bing Chat Balanced und Bing Chat Creative zeigten sich in vielen Bereichen wettbewerbsfähig.
ChatGPT war ebenfalls führend bei Anfragen, die keinen aktuellen Kontext oder Zugang zu Live-Webseiten benötigen, und erzielte in diesem Test in mehreren Kategorien die besten Ergebnisse.
Beachte, dass die Studie auf 44 Fragen beschränkt war, wodurch diese Ergebnisse auf einer kleinen Stichprobe basieren. Der Umfang des Abfragesatzes war begrenzt, da die Genauigkeit und Vollständigkeit jeder Antwort im Detail untersucht wurde - eine sehr zeitaufwändige Aufgabe.
Die Schlussfolgerungen lauten jedoch wie folgt:
Ohne Berücksichtigung der Ressourcennutzung schnitt Bard insgesamt am besten ab, da es die Absicht der Suchenden am besten zu verstehen schien. Wenn man jedoch die Art und Weise berücksichtigt, wie das Tool Zitate und weiterführende Links zu Ressourcen bereitstellt, gewinnt Bing Chat Creative mit Leichtigkeit, gefolgt von Bing Chat Balanced. Das Versäumnis von Bard, dies zu tun, ist ein grundlegender Mangel.
ChatGPT und Claude zeigen grundlegende Schwächen, da sie keinen Zugriff auf aktuelle Informationen oder Live-Webseiten haben. ChatGPT verbessert sich deutlich, wenn das MixerBox WebSearchG-Plugin installiert wird.
Diese Technologie befindet sich noch in den Anfängen, und die Entwicklung wird sich schnell und stetig fortsetzen.
Google und Bing haben auf lange Sicht natürliche Vorteile. Wenn sie lernen, das Wissen zu nutzen, das sie aus ihrer Geschichte als Suchmaschinen gewonnen haben, sollten sie in der Lage sein, Halluzinationen zu reduzieren und ihre Fähigkeit zu verbessern, die Suchabsicht besser zu erfüllen.
Wir werden sehen, wie gut jeder von ihnen diese Fähigkeiten nutzt und das verbessert, was sie derzeit haben.
Eines ist sicher: Es wird spannend sein, diese Entwicklungen zu beobachten!
Quelle: Searchengineland.com
Lisa-Marie Unger
Lisa-Marie hat ihr Studium in Publizistik- und Kommunikationswissenschaften 2018 an der Universität Zürich abgeschlossen. Seither arbeitet sie als Projektleiterin im Bereich Google Ads für die netpulse AG. 2022 hat sich ihr Schwerpunkt auf den Bereich Content Creation verlagert. Sie versorgt sowohl Kunden, als auch Mitarbeiter mit Neuigkeiten und Anleitungen aus den Bereichen SEO, Local SEO, Google Ads, Social Media, Google Analytics, GA4 uvm. Ausserdem widmet sie sich der internen und externen Schulung.
Hast du Fragen an Lisa-Marie? Dann schreib ihr gerne ein
E-Mail.
Die netpulse AG ist eine inhabergeführte Online-Marketing-Agentur mit Sitz in Winterthur.
Seit 2009 bieten wir günstige und wirkungsvolle Lösungen im Bereich Online-Marketing für Unternehmen aus allen Branchen an.
Neuwiesenstrasse 44
8400 Winterthur
netpulse AG
Mehr über uns erfahren.
Bleiben Sie immer auf dem neusten Stand, was die netpulse betrifft und erhalten Sie wertvolles Wissen rund um das Thema Online Marketing und Internetauftritt.
Herzlich willkommen in unserem Newsletter. Sie erhalten in Kürze ein E-Mail zur Bestätigung ihrer Anmeldung.
Ups, es ist ein Fehler bei Ihrer Anmeldung aufgetreten. Bitte versuchen Sie es später noch einmal.