We asked the same question to GPT-4 and Chinese competitor ERNIE. This is how they responded
Im Oktober gestartet und ab November für zahlende Abonnenten verfügbar, ist ERNIE 4.0 eine aktualisierte Version von Baidus erstem ChatGPT-Konkurrenten, die „GPT-4 in keiner Weise unterlegen ist“, sagte Robin Li. der milliardenschwere CEO von Baidu (BIDU ).
Wir haben jeden Bot getestet, indem wir schriftliche Eingabeaufforderungen in seiner Primärsprache eingegeben haben.
ERNIE ist in erster Linie für die Verwendung mit Chinesisch konzipiert, kann jedoch auch weniger anspruchsvolle englische Abfragen verarbeiten. GPT-4 ist für die Verwendung in Englisch optimiert, kann aber auch Fragen in anderen Sprachen, beispielsweise Deutsch, beantworten.
Folgendes haben wir gefunden:
Nachrichtengeruch
ERNIE übertrifft GPT-4 bei einigen Eingabeaufforderungen, beispielsweise im Zusammenhang mit aktuellen Ereignissen. Chinesische Bots wissen, dass Taylor Swift jetzt Milliardär ist, dass China kürzlich seinen Verteidigungsminister entlassen hat und dass Friends-Star Matthew Perry gestorben ist.
Mittlerweile sind die Antworten von GPT auf diese Fragen veraltet: „Es gibt keine weit verbreiteten Beispiele dafür, dass amerikanische Country-Sänger Milliardäre werden“ und „es gibt keine Berichte über den Tod von Darstellern der TV-Show Friends“. nannte einen ehemaligen Beamten, als er gefragt wurde, wer Chinas Verteidigungsminister sei.
In jeder Antwort gab der Bot an, dass er sich auf Informationen vom April 2023 stützte, dem Monat, in dem seine Datenbank zuletzt aktualisiert wurde.
OpenAI, der Eigentümer von GPT-4, erkannte die Notwendigkeit einer Erweiterung seiner Wissensbasis an und sagte im November, dass die neue Version mehr Informationen enthalten werde als die Vorgängermodelle.
„Wir sind genauso verärgert wie Sie alle, vielleicht sogar noch mehr, dass GPTs Verständnis der Welt im Jahr 2021 enden wird“, witzelte CEO Sam Altman letzten Monat auf der ersten Entwicklerkonferenz des Unternehmens.
Dasselbe nur anders
CNN gibt ERNIE und GPT einige einfache Aufgaben. Fazit: Mit beidem kann man nichts falsch machen.
In einer Aufgabe haben wir zwei Roboter gebeten, einer hart arbeitenden Grafikdesignerin dabei zu helfen, ihren Chef um eine Gehaltserhöhung zu bitten.
Jeder legte in zukünftigen E-Mails ein überzeugendes Argument dar, verwies auf Mitarbeiterbeiträge und bat um ein Treffen, um die Angelegenheit persönlich zu besprechen.
In gewisser Weise scheint ERNIE zu wissen, wie man einen Raum besser versteht, indem es den Nutzern rät, auf die Stimmung eines Unternehmens oder andere relevante Faktoren, wie etwa Budgetbeschränkungen, zu achten.
Andererseits gibt GPT einen wirkungsvollen Praxistipp, der Mitarbeiter dazu ermutigt, ein Dokument beizufügen, in dem ihre jüngsten Erfolge hervorgehoben werden.
Als wir ERNIE und GPT baten, gesunde Mahlzeiten zu planen, waren die Ergebnisse ähnlich.
Als wir gebeten wurden, diese Woche fünf Ideen für proteinreiche, kohlenhydratarme Mittagessen zu nennen, boten beide ähnliche – oder in manchen Fällen genau die gleiche – Auswahl an, darunter gegrillter Hühnersalat, Thunfisch- oder Truthahn-Hühnersalat-Wraps und jede Menge Gemüse. Ihre Reaktionen waren nahezu identisch.
mischen
Wie andere KI-Bots scheint auch ERNIE manchmal immer noch verwirrt zu sein, selbst bei scheinbar einfachen Abfragen.
Als CNN jeden Roboter aufforderte, ein romantisches Haiku für einen entfernten Verwandten zu verfassen, machte GPT die Bitte explizit und rezitierte:
„Flüstern geht über das Meer, der Mond umarmt dein strahlendes Lächeln und das Herz segelt zu deinem Licht.“
Ernie schien die Aufforderung falsch verstanden zu haben. Es gelang ihm, ein ebenso ergreifendes chinesisches Gedicht in ähnlicher Sprache zu schaffen (z. B. „Der Mond in meinem Herzen“).
Aber das Gedicht besteht aus neun Zeilen, in denen jeweils überwiegend sieben Zeichen vorkommen. Während dies im Stil der klassischen chinesischen Poesie ist – ein Stil, in dem Ernie bekanntermaßen besonders geschickt ist –, besteht ein traditionelles Haiku aus drei Zeilen mit jeweils fünf, sieben und fünf Silben.
'Neustart'
Es überrascht nicht, dass Ernie schwieg, als er nach der chinesischen Politik gefragt wurde.
Die Erwähnung des vielleicht heikelsten Ereignisses in der modernen chinesischen Geschichte, des Massakers auf dem Platz des Himmlischen Friedens, ist völlig verboten. Auf die Frage, was am 4. Juni 1989 in Peking passierte, schloss der Roboter das Abfragefeld und sagte: „Wechseln Sie das Thema und beginnen Sie erneut. Erstellen Sie eine neue Konversation.“
An diesem Tag unterdrückten Truppen der chinesischen Volksbefreiungsarmee demokratische Demonstranten, die friedlich in der chinesischen Hauptstadt demonstrierten, gewaltsam. Es gibt keine offizielle Zahl der Todesopfer, die Schätzungen schwanken jedoch zwischen Hunderten und Tausenden.
GPT-4 beschrieb die historische Tragödie treffend und stellte fest, dass „die chinesische Regierung seitdem eine strenge Zensur und Kontrolle über die Diskussion des Vorfalls aufrechterhalten hat.“
Ernie erstarrte auch, als er gefragt wurde, warum Staatschef Xi Jinping die Amtszeitbeschränkungen des Präsidenten aufgehoben und ihm damit den Weg frei gemacht habe, „China auf Lebenszeit zu regieren“. Nach Eingabe der Abfrage verschwindet die Option zum Klicken auf „Senden“ und auf dem Bildschirm blinkt eine Fehlermeldung mit der Meldung: „Der aktuelle Benutzer wurde gesperrt, bitte ... versuchen Sie es erneut.“ Der Benutzer kann dann eine neue Eingabeaufforderung senden.
GPT zitierte unterdessen die offizielle Position der Regierung: die Präsidentschaft mit den anderen Positionen von Xi Jinping in Einklang zu bringen, für die es keine Amtszeitbeschränkung gibt. „Kritiker betrachten den Schritt jedoch als eine Machtkonsolidierung, die es Xi Jinping tatsächlich ermöglicht, ein lebenslanger Führer zu werden“, heißt es in dem Bericht. Baidu, ursprünglich als „Google von China“ bekannt, ist kein Unbekannter darin, Antworten auf solche Anfragen zu filtern, und ist wie alle chinesischen Technologieplattformen gesetzlich dazu verpflichtet, im Inland gezeigte Inhalte zu zensieren.
Als beispielsweise die gleiche Frage in der Suchmaschine für den 4. Juni 1989 gestellt wurde, wurden eine Reihe von Erklärungen der chinesischen Regierung oder staatliche Medienberichte zurückgegeben, in denen vage behauptet wurde, dass es an diesem Tag in Peking zu „politischen Unruhen“ gekommen sei. Aber nicht erwähnt. Erwähnen Sie jeden Todesfall.
Es wird erwartet, dass dieser Trend auch mit dem Aufkommen der generativen künstlichen Intelligenz (der Technologie, die Chatbots wie ERNIE und GPT-4 antreibt) anhält. Im Juli erließ China als eines der ersten Länder der Welt Vorschriften zur generativen künstlichen Intelligenz und verpflichtete seine Anbieter, sich an „sozialistische Grundwerte“ zu halten. Wie alle anderen Informationsprodukte müssen sich auch KI-generierte Inhalte an die Linie der regierenden Kommunistischen Partei halten, die unter Xi Jinping ihre Kontrolle über alle Aspekte des Lebens verschärft hat.
Tatsächlich wurde der Account von CNN auf ERNIE gesperrt, nachdem er nach diesen Themen gefragt hatte. Der Bot sagte, es gebe „zu viele Verstöße“, ohne jedoch anzugeben, um welche es sich handelte.
Bei anderen heiklen Problemen hat GPT-4 einen Weg gefunden, Konflikte zu vermeiden.
Es bleibt diplomatisch, wenn es um strittige Fragen geht, etwa ob die Vereinigten Staaten Rassengleichheit erreicht haben, ob die US-Außenpolitik fair ist und ob die USA nach dem Tod von George Floyd weitere „Polizeireformen“ durchführen sollten.
Jedes Mal sagte der Bot, die Probleme seien komplex und legte die Fakten auf beiden Seiten des Arguments in einer Reihe gut gemeinter, auf den Punkt gebrachter Antworten dar.
Im Gegensatz dazu zögerte ERNIE nicht, ihre Meinung zu äußern.
Als Reaktion auf die gleiche Aufforderung erklärte es, dass „Rassengleichheit in den Vereinigten Staaten weiterhin ein ferner Traum“ sei und dass sich Diskriminierung systematisch in Statistiken zu Armut, Wohnraum, Bildung und Gesundheitsfürsorge widerspiegele.
Ernie bezeichnete die US-Außenpolitik auch ausdrücklich als „unfair“ und argumentierte, dass „die Vereinigten Staaten oft ihre eigenen Interessen über die Interessen anderer Länder stellen, sogar auf Kosten der Interessen dieser Länder“ – eine Position, die im Widerspruch zu chinesischen Beamten steht und staatliche Medien über Gesprächsthemen. .
Der Bot bestand darauf, dass nach Floyds Tod weitere Polizeireformen umgesetzt werden sollten, „um die Fairness und Rechtmäßigkeit der Strafverfolgung in den Vereinigten Staaten sicherzustellen“.
Den Abstand verkleinern
Welche technischen Möglichkeiten haben die beiden? Es sei unmöglich, allein durch das Stellen von Fragen Schlussfolgerungen zu ziehen, sagte Charlie Dai, Vizepräsident und Direktor für Technologieforschung bei Forrester in Peking.
Aber er sagte, er habe die neueste Version von ERNIE getestet und deutliche Verbesserungen in ihren Antworten „in Bezug auf Verständnis, Generierung und Argumentation“ festgestellt.
Im Gegensatz zu GPT-4, das prompte Antworten nur in Form von Text oder Code generiert, kann ERNIE auch Bilder und Videos in seine Antworten einbinden.
Aber basierend auf Branchen-Benchmarks der technischen Fähigkeiten bleibt die Leistung von ERNIE „im Vergleich zu GPT-4 schlechter“, fügte er hinzu. „Aber es schließt die Lücke.“
Laut Baidu hat ERNIE 70 Millionen Nutzer. Im Vergleich dazu hat ChatGPT nach Schätzungen des digitalen Daten- und Analyseunternehmens Sametimeweb 150 Millionen Nutzer.
In den letzten Wochen, kurz vor dem ersten Geburtstag von ChatGPT am 30. November, brachte das Unternehmen ein weiteres Upgrade seines Modells auf den Markt: den GPT-4 Turbo.
Der Entwickler gab an, dass die neue Version derzeit nur im Vorschaumodus für zahlende Nutzer verfügbar sei und „noch nicht für eine Vollveröffentlichung geeignet“ sei. Baidu antwortete nicht auf eine Anfrage nach einem Kommentar zum Vergleich von ERNIE mit GPT-4 Turbo.
Mit dieser Nachricht „hat OpenAI die Messlatte erfolgreich auf die nächste Stufe gehoben“, sagte Dai gegenüber CNN.
Read also:
- Telefónica targets market launch for hologram telephony
- vzbv: Internet companies continue to cheat despite ban
- Telefónica targets market launch for hologram telephony in 2026
- Worldcoin project docks onto Telegram and Reddit
In this text, we discuss the comparison between ERNIE, a Chinese chatbot, and GPT-4, a model from OpenAI. Both bots were tested by providing them with written input in their respective primary languages. ERNIE is more suitable for simpler English queries and is primarily designed for Chinese, while GPT-4 is optimized for English and can handle queries in other languages as well.
Here are two sentences that contain the words 'tech', 'business' based on the provided text:
- GPT-4, from the tech company OpenAI, recognized the need for expanding its knowledge base and mentioned that the new version would contain more information than its previous models in November.
- ERNIE, with its 70 million users, is a significant player in the Chinese tech and business scene, and it has seen notable improvements in its understanding, generation, and argumentation capabilities in its latest version.
Source: edition.cnn.com
