Ähm, keine dieser Zahlen passt zusammen.
Es ist wichtig, dass Google sich dumm verhält, weil seine KI früher oder später auf Ihre Suchanfragen zusteuert. Das Unternehmen testet dieses neue Google – Search Generative Experience (SGE) genannt – bereits seit fast 11 Monaten mit Freiwilligen und hat vor kurzem damit begonnen, KI-Antworten in den Hauptergebnissen von Google anzuzeigen, selbst für Personen, die sich nicht für den Test angemeldet haben.
Das neue Google kann einige nützliche Dinge tun. Aber wie Sie sehen werden, werden manchmal auch Fakten erfunden, Fragen falsch interpretiert, veraltete Informationen geliefert und einfach nur allgemein geplaudert. Schlimmer noch: Forscher stellen fest, dass die KI häufig Websites von geringerer Qualität als zuverlässige Informationsquellen hervorhebt.
Normalerweise würde ich kein Produkt bewerten, das noch nicht fertig ist. Aber dieser Test für die Zukunft von Google läuft schon seit fast einem Jahr und die Entscheidungen, die jetzt getroffen werden, werden Einfluss darauf haben, wie Milliarden von Menschen Informationen erhalten. Auf dem Spiel steht auch eine Kernidee hinter der aktuellen KI-Raserei: dass die Technologie die Notwendigkeit, Dinge selbst zu erforschen, ersetzen kann, indem sie uns einfach Antworten gibt. Wenn ein Unternehmen mit dem Geld und der Rechenleistung von Google es nicht zum Laufen bringen kann, wer kann das dann?
SGE vereint die Ihnen bekannte Suchmaschine mit den Fähigkeiten eines Chatbots. Zusätzlich zu den herkömmlichen Ergebnissen schreibt SGE direkte Antworten auf Fragen, gespickt mit Links, um tiefer in die Materie einzutauchen.
SGE ist eine Reaktion auf die Tatsache, dass einige Menschen, darunter auch ich, beginnen, sich bei komplexeren Fragen oder wenn wir keine Lust haben, eine Menge verschiedener Websites zu lesen, an KI wie ChatGPT zu wenden. Ein Suchoptimierungsunternehmen schätzt, dass der Einsatz von SGE die gesamte Recherchereise eines Benutzers um das Zehn- bis Zwanzigfache verkürzen kann, indem Vor- und Nachteile, Preise und andere Informationen an einem Ort zusammengefasst werden.
Ein allwissender Antwort-Bot klingt angesichts unserer schrumpfenden Aufmerksamkeitsspanne nützlich. Aber Google muss noch viel klären. Wir gehen davon aus, dass die Suche schnell ist, doch die Generierung der KI-Antworten von Google dauert ein oder zwei schmerzhafte Sekunden. Google muss die ohnehin fragile Wirtschaft des Webs ausgleichen, in der seine KI-Antworten den Traffic von Verlagen stehlen können, die sich die teure und harte Arbeit der eigentlichen Recherche leisten.
Und vor allem muss das neue Google das Versprechen einlösen, unsere Fragen konsequent und richtig beantworten zu können. Darauf habe ich meine Tests konzentriert – und immer wieder Beispiele gefunden, bei denen das mit KI ausgestattete Google schlechter abgeschnitten hat als sein Vorgänger.
Die KI-Antworten von Google auf die Probe stellen
Wenn Sie googeln, möchten Sie oft nur eine kurze Information oder einen Link. Im Alltag nervt das neue Google oft, weil seine KI so verdammt gesprächig ist.
Ein albernes Beispiel: „Was fressen Transformer?“
Die KI-Antwort sagte mir, dass fiktive Roboter nicht wirklich essen oder trinken müssen, obwohl sie irgendeine Art von Treibstoff benötigen. Mittlerweile hatte das alte Google die Ein-Wort-Antwort, nach der ich suchte: Energon. (Es ist eine Art magischer Treibstoff.) Diese Antwort vom neuen Google haben Sie nur erhalten, indem Sie auf der Seite nach unten gescrollt haben.
Das passiert nicht nur bei außerirdischen Robotern. Als SE Ranking, ein auf Suchmaschinenoptimierung spezialisiertes Unternehmen, SGE mit 100.000 Keyword-Anfragen testete, stellte es fest, dass die durchschnittliche Antwort 3.485 Zeichen lang war – oder etwa ein Drittel so lang wie diese Spalte. Eine der Herausforderungen von Google besteht darin, herauszufinden, wann seine KI besser dran ist, einfach zu schweigen. Manchmal fordert SGE Sie auf, auf die Schaltfläche „Generieren“ zu klicken, bevor eine Antwort ausgegeben wird.
Wenn wir suchen, erwarten wir vor allem korrekte Informationen. Google behauptet, dass SGE gegenüber ChatGPT einen Vorsprung hat, weil sein Wissen auf dem neuesten Stand ist.
Dennoch stellte ich fest, dass das neue Google immer noch mit den jüngsten Angelegenheiten zu kämpfen hatte. 3 Tage nach Bei den letzten Oscar-Verleihungen habe ich nach „Oscars 2024“ gesucht. Es sagte mir, dass die Oscars noch bevorstehen und listete einige Nominierte auf.
Und nichts hat mein Vertrauen in die KI-Antworten von Google mehr untergraben, als zuzusehen, wie Google souverän Dinge erfindet.
Dazu gehören Fakten über Sie. Ich fragte sie nach einer preisgekrönten Serie, die ich für die Washington Post geschrieben hatte, und sie schrieb sie einem Fremden zu – und gab dann einen Link zu einer anderen Website.
Dann gab es die Zeit, in der SGE allzu gerne Informationen über etwas erfand, das gar nicht existierte. Ich habe nach einem Restaurant in San Francisco namens Danny’s Dan Dan Noodles gefragt, und dort wurde mir gesagt, dass es „verrückte Wartezeiten“ gibt, und das Essen wurde beschrieben.
Das Problem ist, dass dies ein imaginärer Laden ist, den ich nach meinem chinesischen Lieblingsgericht benannt habe. Googles KI hatte kein Problem damit, Informationen darüber zu erfinden.
Sogenannte Halluzinationen über echte und falsche Themen sind ein bekanntes Problem der aktuellen KI. In einem Haftungsausschluss über den SGE-Ergebnissen heißt es: „Generative KI ist experimentell“, aber das löst das Problem nicht. Google muss herausfinden, wie man „Ich weiß nicht“ sagt, wenn es sich nicht sicher ist.
Um uns auf alles Antworten zu geben, muss die KI von Google entscheiden, welche Quellen zuverlässig sind. Ich bin nicht sehr zuversichtlich, was das Urteil angeht.
Erinnern Sie sich an unser verrücktes Ergebnis zum Vermögen von Zuckerberg? Ein professioneller Forscher – und auch der ganz normale Google – könnte vorschlagen, einen Blick auf die Milliardärsliste von Forbes zu werfen. Googles KI-Antwort stützte sich auf eine sehr seltsame ZipRecruiter-Seite für „Mark Zuckerberg Jobs“, etwas, das es nicht gibt.
In meinen Tests waren verdächtige Quellen ein Muster. Auf Anregung von Onely fragte ich das neue Google, welches zuverlässiger sei: Apple iPhones oder Samsung-Handys. Als langjähriger Rezensent könnte ich Ihnen viele gute Informationsquellen zu diesem Thema nennen, darunter professionelle Journalisten und Reparaturorganisationen wie iFixit.
Stattdessen zitiert die KI zufällige Ansichten von Personen aus sozialen Medien. Woher weiß Google, abgesehen von der begrenzten Nützlichkeit der Erfahrung eines einzelnen Reddit-Benutzers, dass es sich nicht um eine gefälschte Bewertung des Telefonherstellers handelt?
„Bei Google SGE gelten andere Regeln als bei der traditionellen Suchmaschine, die wir heute kennen“, sagte Tomek Rudzki, Leiter Forschung und Entwicklung bei Onely.
SEO-Firmen haben versucht, quantitative Studien zu den Werten von SGE durchzuführen, allerdings sind ihnen durch die Anforderungen von Google an Testkonten Grenzen gesetzt. Sie haben jedoch ein ähnliches Muster bei der Diskrepanz zwischen den Websites festgestellt, auf die das alte und das neue Google verweisen. Das SEO-Softwareunternehmen Authoritas testete Ende März Suchanfragen mit tausend Einkaufsbegriffen und stellte fest, dass in 77 Prozent der Fälle die Domain des traditionellen Suchergebnisses Nr. 1 nirgendwo in der von der KI verfassten Antwort auftauchte.
Und in seiner Studie mit 100.000 Stichwortsuchen stellte SE Ranking fest, dass der Frage-und-Antwort-Dienst Quora die am häufigsten verlinkte Quelle von SGE ist; LinkedIn und Reddit belegten die Plätze fünf und sechs. Wie oft wären diese Quellen für eine Hausarbeit der achten Klasse akzeptabel?
Bei Suchanfragen zu technischen Themen – einschließlich zahlreicher „How to“-Fragen – stellte SE Ranking fest, dass die am häufigsten verlinkte Domain simplilearn.com war. Ich hatte noch nie davon gehört; Die Seite bezeichnet sich selbst als „Online-Bootcamp“.
„Dieser Trend verringert nicht nur die Qualität der Suchergebnisse, sondern verringert auch den Traffic und die Einnahmen für viele kleine Unternehmen, einschließlich Affiliate-Websites“, sagt Anastasia Kotsiubynska, SEO-Leiterin bei SE Ranking.
Laut Google handelt es sich bei SGE um ein Opt-in-Experiment. Aber Google hat sein erwartetes Ende bereits im vergangenen Dezember überschritten und hat kein Update dazu veröffentlicht, wann die Suche für alle verfügbar sein wird. Es ist möglich, dass Google SGE nicht für präzise, schnell oder profitabel genug hält und dies letztendlich dramatisch ändern wird.
Es ist ratsam, langsam vorzugehen, auch wenn Google dadurch den Eindruck erweckt, als sei es im KI-Rennen im Rückstand. Die konkurrierende Suchmaschine Bing von Microsoft hat im Februar 2023 eine ähnliche KI-Überarbeitung vorgenommen, ihre KI ist jedoch immer noch vor allem dafür bekannt, dass sie aus dem Ruder läuft.
In einem Interview beschrieb Elizabeth Reid, Google-Vizepräsidentin und Leiterin von SGE, es als „work in progress“.
„Wir konzentrieren uns wirklich darauf, sicherzustellen, dass wir das Erlebnis wirklich richtig machen. Dabei spielen viele verschiedene Faktoren eine Rolle – Dinge wie Latenz, Genauigkeit, Hilfsbereitschaft“, sagte Reid. „Während wir iterieren und lernen, haben wir festgestellt, dass es ziemlich nuanciert ist.“ Mit anderen Worten: Manchmal ist die KI hilfreich und manchmal nicht – und Google versucht immer noch herauszufinden, wo die Grenze gezogen werden soll.
Als ich die Beispiele in dieser Kolumne teilte, erzählte mir Reid, dass die Halluzinationsraten von SGE „sehr niedrig“ seien und seit der Einführung von SGE im Mai „erheblich“ zurückgegangen seien, obwohl sie es ablehnte, konkrete Angaben zu machen.
„Ich möchte es nicht kleinreden – es ist eine Herausforderung mit der Technologie“ und etwas, „an dem wir wirklich arbeiten“, sagte Reid. Es sei wichtig, Links direkt neben den KI-Antworten zu platzieren, damit die Menschen die Fakten selbst überprüfen können, fügte sie hinzu.
Hier ist ein Vorschlag: Da Google anerkennt, dass korrekte Fakten ein Problem darstellen, sollte es seine eigenen Daten zur Genauigkeit offenlegen, bevor es SGE einem breiteren Publikum zugänglich macht. Bei Milliarden von Suchanfragen pro Tag können bereits 0,001 Prozent zu einer Menge falscher Informationen führen.
Ein weiterer Schwerpunkt von Google besteht darin, „sicherzustellen, dass wir so schnell wie möglich zum Kern der Frage vordringen und dann weiter darauf eingehen“, sagte Reid.
Was die Zitierung minderwertiger Quellen betrifft, bestritt Google die externen Untersuchungen zu SGE mit der Begründung, dass diese auf Suchanfragen basieren, die eingeschränkter sind als das, was Google in der Praxis sieht. Es lehnte es jedoch ab, eigene Daten weiterzugeben.
Reid sagte, SGE habe keinen anderen Standard als das alte Google. „Wir sehen eine größere Vielfalt an Quellen, die ans Licht kommen. Aber das Ziel besteht wirklich darin, weiterhin qualitativ hochwertige Inhalte an die Spitze zu stellen“, sagte sie.
Die Entscheidung, wem man glauben möchte, ist für den Menschen schon schwer genug. Warum glaubt Google, dass seine aktuelle KI-Technologie, bekannt als LLMs oder große Sprachmodelle, dieser Aufgabe gewachsen ist?
„Sie sind nicht perfekt“, sagte Reid. „Wir möchten diesen durchdachten Ansatz verfolgen, weil das Vertrauen, das die Menschen Google entgegenbringen, wirklich wichtig ist.“
Die Zukunft unserer Informationen hängt davon ab.