xAI hat das Grok-3-Sprachmodell angekündigt, das in mehreren verschiedenen Versionen verfügbar sein wird und mit enormer Rechenleistung ausgestattet ist, um eine viel bessere Leistung als je zuvor zu liefern. Elon Musk sagte, dass die neue Entwicklung zunächst für X-Premium+-Abonnenten verfügbar sein wird, allerdings zu einem höheren Preis.
Im Jahr 2023 stellte die neu gegründete xAI ihr erstes großes Sprachmodell zusammen und startete innerhalb weniger Monate ihren Chatbot-Service mit generativer KI-Technologie. Im August 2024 folgte die Veröffentlichung von Grok-2, einem wesentlich fortschrittlicheren LLM-Tool mit mehr Funktionen und besserer Skalierbarkeit. Es war eines der ersten Modelle, das die Mixture-of-Experts-Architektur (MoE) nutzte. Jetzt ist Grok-3 fertig, und vorläufigen Ergebnissen zufolge konkurriert es bereits mit DeepSeek.
Bei der Ankündigung wurde besonders hervorgehoben, dass Grok-3 auf dem Supercomputer Colossus trainiert wurde, der nun über die zehnfache Rechenleistung der Vorgängerversion verfügt. Hierüber wurde bereits mehrfach berichtet, mit dem Ziel, dass eine Million GPUs auf diesem System arbeiten lässt. 200.000 Prozessoren arbeiteten an der Lehre des Grok-3-Modells. Wir haben auch erfahren, dass die Installation und Inbetriebnahme der ersten 100.000 GPUs 112 Tage dauerte, die nächsten 100.000 brauchten 92 Tage, und die weitere Expansion wird noch reibungsloser verlaufen. Grundsätzlich werden Nvidia H100-Grafikprozessoren von xAI verwendet, dies wurde jedoch noch nicht separat bestätigt.
In ausgewählten Tests der künstlichen Intelligenz wird Grok-3 in der Lage sein, GPT-4o, Gemini 2 Pro, DeepSeek-V3 und Claude-3.5-Sonnet zu übertreffen. Mehr noch, sogar die Mini-Version von Grok-3 wird bei einigen Aufgaben besser abschneiden als der vollwertige GPT-4o oder andere Konkurrenten. Das Grok-3 mini ist ein kleineres, flexibleres Sprachmodell, das zudem kostengünstiger ist. Bis auf weiteres laufen alle Grok-3-Varianten mit Vorabzugriff.
Nach dem Vorbild und der Arbeit anderer Entwicklungsteams hat xAI auch Argumentationsmodelle entwickelt. Diese sind in der Lage, komplexere Antworten als bisher zu geben, da sie die Ergebnisse besser "durchdenken". OpenAI war das erste Unternehmen, das im September letzten Jahres ein Argumentationsmodell veröffentlicht hat, aber langsam beginnen alle Unternehmen mit Sprachmodellen zu arbeiten, die auf diesem Prinzip basieren. Diese können den Nutzern helfen, qualitativ bessere Antworten zu erhalten, brauchen aber auch länger, um Ergebnisse zu liefern. In den Bereichen Mathematik, Programmierung und Wissenschaft werden die Argumentationsmodelle von Grok die besten sein.
Sowohl Grok-3 Reasoning als auch Grok-3 mini Reasoning können die Modelle o3-mini (hoch), DeepSeek-R1 und Gemini 2 Flash Thinking schlagen. Natürlich kennen wir im Moment nur die Ergebnisse ausgewählter Tests, aber später werden wir ein genaueres und vollständigeres Bild von der Leistung der Grok-3 Modelle haben. Die Grok-App für Mobiltelefone wird verwendet, um die Denkmodelle im wirklichen Leben zu testen, mit einem "Big Brain"-Modus für die wirklich schwierigen Fragen.
Mehrere Denkmodelle wurden ausgelöst, so dass es möglich ist, die "Gedanken" des Systems zu verfolgen, was eine Menge interessanter Informationen ans Licht bringen kann. Allerdings eröffnet dies auch die Möglichkeit des Missbrauchs, so Musk, weshalb Grok-3 die Gedankengänge nicht zeigen wird. Man wolle verhindern, dass andere die Arbeit von xAI "destillieren". Der Vorwurf lautet, dass DeepSeek auf diese Weise auf kostengünstige Weise auf das Niveau der Modelle von OpenAI "aufsteigen" könnte.
Neu für Grok ist, dass es eine Funktion namens DeepSearch erhalten wird, die nur dem Namen nach der Deep Research-Lösung von OpenAI ähnelt. Hier wird DeepSearch eingesetzt, um die für die Beantwortung von Fragen erforderlichen Daten aus den aktuellsten Informationen zu gewinnen, indem das Internet in Echtzeit gescannt wird. Auf diese Weise kann Grok seinen Nutzern genauere und aktuellere Informationen zur Verfügung stellen - eine Fähigkeit, die bereits von Konkurrenten angeboten wird.
In Zukunft wird das X Premium+ Abonnement den Zugang zu den 3 Sprachmodellen von Grok und einer begrenzten DeepSearch-Funktionalität ermöglichen, aber dies wird 50 Dollar pro Monat kosten. Darüber hinaus wird es ein neues Abonnement, SuperGrok, geben, das den Nutzern zusätzliche Funktionen und mehr Freiheit für $30 pro Monat bietet. SuperGrok bietet unter anderem das garantierte Grok-3 Reasoning-Modell und einen verbesserten DeepSearch-Zugang, aber auch weniger Einschränkungen bei der Bilderzeugung. Mit der Zeit wird auch Grok-3 im Prinzip kostenlos verfügbar sein, aber es ist noch nicht fertig, und bis es als vollständig fertig und stabil angesehen wird, haben nur Abonnenten frühen Zugang dazu.
xAI arbeitet auch daran, Grok mit einer Audio-zu-Text-Funktion sowie einem Sprachmodus auszustatten, wo es noch hinter seinen Konkurrenten zurückbleibt, während die Bilderzeugung nicht wirklich intern erfolgt - es gibt noch Raum für Verbesserungen. Mit der Zeit wird die Nutzung von Grok-3-Modellen auch über die Unternehmens-API möglich sein. Die Einführung von Open Source Grok-2 ist ebenfalls für die kommenden Monate geplant, und einige der neuen Funktionen werden in Zukunft zum ersten Mal für SuperGrok-Abonnenten verfügbar sein.
Gegenüber xAI erklärte er, dass einer der Eckpfeiler der Entwicklung darin besteht, die menschenähnlichen Interaktionen von Grok durch verschiedene Funktionen kontinuierlich zu verbessern. Dies könnte für das Unternehmen unter anderem deshalb wichtig sein, damit es in Zukunft möglicherweise effektiver mit humanoiden Robotern eingesetzt werden kann, die von Tesla entwickelt werden. Schließlich besteht kein Zweifel daran, dass die Fäden der verschiedenen Projekte von Elon Musk im Hintergrund ineinander greifen.
