Aus diesem Grund behaupten die Leute, GPT-4 sei wieder gut

Es scheint, dass OpenAI damit beschäftigt ist, mit seinen GPT-Sprachmodellen aufzuräumen, nachdem Ende November in den sozialen Medien Vorwürfe verbreitet wurden, dass GPT-4 „faul“ und „dumm“ geworden sei und Fehler außerhalb der Norm für den ChatGPT-Chatbot aufgetreten seien.

Einige spekulieren sogar, dass GPT-4.5 heimlich für einige Benutzer bereitgestellt wurde, basierend auf einigen Antworten von ChatGPT selbst. Unabhängig davon, ob das wahr ist oder nicht, gab es in der Vergangenheit hinter GPT-4 definitiv einige positive interne Veränderungen.

Mehr GPUs, bessere Leistung?

Bereits letzten Donnerstag gingen Beiträge ein, in denen die Verbesserung der GPT-4-Leistung erwähnt wurde. Wharton-Professor Ethan Mollick, der zuvor den starken Rückgang der GPT-4-Leistung im November kommentierte, hat ebenfalls eine Wiederbelebung des Modells festgestellt, ohne für sich selbst Beweise für einen Wechsel zu GPT-4.5 zu sehen. Er nutzte konsequent einen Code-Interpreter, um seinen Code zu korrigieren, und beschrieb die Änderung als „Tag und Nacht, sowohl hinsichtlich der Geschwindigkeit als auch der Antwortqualität“, nachdem er festgestellt hatte, dass ChatGPT-4 „wochenlang unzuverlässig und etwas langweilig“ war.

Nicht verpassen

Während dies geschah, öffnete OpenAI am vergangenen Mittwoch in aller Stille seine ChatGPT Plus-Abonnements wieder, deren Registrierung seit dem 14. November nicht mehr möglich war. Altman erklärte in einem X-Beitrag: „Vielen Dank für Ihre Geduld, während wir weitere GPUs gefunden haben.“

Ob es einen Zusammenhang zwischen der Wiedereinführung von ChatGPT Plus-Anmeldungen und der Verbesserung von GPT-4 gibt, ist nicht bekannt, aber der Zeitpunkt ist interessant. Bemerkenswert ist, dass die Anmeldungen für die kostenpflichtige Version kurz nach dem ersten DevDay Developers Day von OpenAI geschlossen wurden, bei dem das Unternehmen eine Vielzahl neuer Funktionen für die kostenpflichtige Version des KI-Chatbots vorstellte. Das Unternehmen hat eine Warteliste für ChatGPT Plus-Abonnements eingerichtet, da die Anmeldungen nach dem DevDay die Kapazität des Dienstes zur Verarbeitung von Funktionen übersteigen.

Die Leute beschwerten sich darüber, dass GPT-4 erklären würde, wie man Befehle ausführt, anstatt die Aufgabe auszuführen.

Kurz darauf begannen Benutzer, ungewöhnliches Verhalten von GPT-4 zu melden, das über die bereits bekannten traditionellen KI-Spitzensprüche hinausging. Ein häufiger Kritikpunkt war, dass GPT-4 den Benutzern „widersprechen“ würde oder mehrere Erklärungen eines Befehls erfordern würde, bevor die Abfrage ausgeführt werden könne. Eine weitere Beschwerde bestand darin, dass das Modell den Benutzern erklären würde, wie sie ihren Befehl ausführen, anstatt die Aufgabe auszuführen.

Die Verschlechterung von GPT-4 geht mindestens auf Juli zurück, als eine Studie einen starken Rückgang der Genauigkeit zwischen März und Juni beobachtete. Viele, darunter OpenAI Product Vice President Peter Welinder, haben angedeutet, dass die Antwortqualität als psychologisches Phänomen als unzureichend erscheinen könnte, wenn das Modell weiter aktualisiert wird. Einige haben hinzugefügt, dass es für Benutzer von Vorteil sein könnte, ihre Abfragen zu ändern, um die gewünschten Ergebnisse zu erhalten.

Obwohl OpenAI weitgehend Stillschweigen über sein Innenleben bewahrt hat, war Altmans X-Beitrag über GPUs wahrscheinlich ein guter Indikator dafür, was hinter den Kulissen passiert. Berichten vom April zufolge würde OpenAI mehr als 30.000 GPU-Einheiten benötigen, um seine kommerzielle Leistung für den Rest des Jahres aufrechtzuerhalten. Das war vor dem Anstieg des Interesses im November.

Geheime GPT-4.5-Tests oder nur Halluzinationen?

Darüber hinaus haben die Spekulationen über GPT-4.5 zugenommen, da mehrere weitere Details über eine mögliche neue GPT-Version durchgesickert sind.

Rowan Cheung, Gründer des @therunddownai-Newsletters, teilte kürzlich auf X (ehemals Twitter) mit, dass Preisdetails für ein neues GPT-4.5-Modell durchgesickert sind, das OpenAI in der Entwicklung hat. Zu den Details gehören neue Preisstufen und Informationen zu erweiterten multimodalen Funktionen.

Cheung fragte OpenAI-CEO Sam Altman über die Social-Media-Plattform nach der Gültigkeit des Leaks, worauf er mit „Nein“ antwortete.

Die Spekulationen über GPT 4.5 begannen am Donnerstag mit einem „durchgesickerten“ Bild, das ein neues GPT-4.5-Modell mit neuen erweiterten multimodalen Funktionen und neuen Preisen zeigt.

Sam Altman kommentierte jedoch: „Nein“ auf die Frage, ob die Gerüchte wahr seien.

Aber die Geschichte hat noch mehr zu bieten … pic.twitter.com/iUJkFUqTMh

– Rowan Cheung (@rowancheung) 18. Dezember 2023

Mehrere Benutzer, die sich mit dem vorgeschlagenen Update befasst haben, sind jedoch davon überzeugt, dass sie GPT-4.5 verwenden und dass es neu und besser als je zuvor ist. Einige haben den Chatbot, von dem sie glaubten, dass er GPT-4 ausführt, nach seinem Modell gefragt – und er antwortete „GPT-4.5 Turbo“.

Dies hat viele zu der Annahme geführt, dass OpenAI GPT-4.5 hauptsächlich auf seinen mobilen Apps getestet hat, in der Hoffnung, versierte Benutzer zu umgehen. Allerdings konnte nicht jeder diese Ergebnisse reproduzieren, und das Modell wird ihnen sagen, dass es sich bei der neuesten Version einfach um GPT-4 handelt. Auch OpenAI-Mitarbeiter Will Depue äußerte sich zu der Angelegenheit und nannte es eine „sehr seltsame und seltsam konsistente Halluzination“.

Cheung bemerkte einen Beitrag auf der offiziellen ChatGPT

Insbesondere bietet OpenAI seinen kostenpflichtigen Benutzern, zu denen ChatGPT Plus-Benutzer, Entwickler-API-Benutzer und Unternehmensbenutzer gehören, frühzeitigen und exklusiven Zugriff. Wenn Features angekündigt werden, gehören diese zu den ersten, die die neuesten GPT-Versionen und deren Features erleben. Viele, die an den Modellen herumbasteln und die subtilen Änderungen bemerken, haben wahrscheinlich irgendeine Form von Entwickler-API-Zugriff oder nutzen den Dienst, um Code zu testen und ihre Eingaben mit der Öffentlichkeit zu teilen.

Selbst wenn OpenAI GPT-4.5 testet, ist nicht abzusehen, wann ein Update erfolgen könnte, insbesondere wenn sich das Unternehmen von der Service- und Organisationsdestabilisierung erholt. Darüber hinaus sind das Unternehmen und das Produkt noch neu und es ist noch nicht klar, wie ein routinemäßiger Aktualisierungszyklus aussieht. Im Moment ist es meiner Meinung nach egal, welche „Version“ von ChatGPT wir verwenden, denn die Verbesserungen scheinen real zu sein.