Nach vier Monaten hat das weltweit größte Superrechenzentrum „Supercluster“ offiziell seinen Betrieb aufgenommen. Elon Musk gab auf sozialen Plattformen öffentlich bekannt, dass am 22. Juli um 4:20 Uhr US-Zeit der von xAI, Es besteht aus 100.000 H100-Blöcken und ist derzeit der stärkste Trainingscluster der Welt.
100.000 Nvidia-GPUs sind gleichbedeutend mit dem Aufbau einer „Großen Mauer aus Chips“ durch Musk in der KI-Welt. Im Vergleich zu den 25.000 GPUs, die OpenAI zum Trainieren von GPT4 verwendet, hat sich die Zahl vervierfacht.
Erwähnenswert ist, dass der Bau des größten Superrechenzentrums der Welt erst im März dieses Jahres begonnen hat und die Fertigstellung für 2025 geplant war. Unerwarteterweise dauerte die Fertigstellung nur vier Monate früher als geplant.
Die offizielle Eröffnung des Supercomputing-Zentrums wird Musk zum Gegenangriff auf OpenAI machen.
Ein enorm teures Supercomputing-Zentrum
Der Hauptgrund, warum Musk das Supercomputing-Zentrum baute, war die Schulung des Chatbots Grok von xAI.
Musk gründete xAI im Juli 2023 und seine wichtigsten Gründungsmitglieder stammen aus namhaften Unternehmen wie OpenAI, Google DeepMind, Microsoft Research und Tesla. Um direkt mit ChatGPT konkurrieren zu können, hat Musk in den letzten zwei Jahren den größten Teil seiner Energie in xAI gesteckt.
Um die Umsetzung des Superrechenzentrums sicherzustellen, erklärte Musk öffentlich, dass er die Entwicklung dieses Supercomputers persönlich übernehmen und überwachen werde.
Wenn Sie ein Hochleistungsrechenzentrum bauen möchten, ist die Standortwahl zweifellos der Schlüssel.
Laut „Forbes“ verhandelte Musks Team mit sieben oder acht Städten und entschied sich schließlich im März für Memphis, Tennessee, weil Memphis über ausreichend Strom und schnelle Baumöglichkeiten verfügt.
Erwähnenswert ist, dass Supercomputing-Zentren viele Ressourcen benötigen. Neben einfacher Hardware wie Nvidia-Chips darf die Fabrik bis zu 150 Megawatt Strom pro Stunde verbrauchen, was dem Strombedarf von 100.000 Haushalten entspricht. Dies kann eine enorme Belastung für die lokale Umgebung darstellen.
Zusätzlich zu den Energieressourcen werden für die Kühlung des Hochleistungsrechenzentrums voraussichtlich 1,3 Millionen Gallonen Wasser pro Tag benötigt, was bedeutet, dass es jeden Tag aus der Hauptwasserquelle von Memphis gepumpt werden muss.
Dies löste auch Unzufriedenheit bei den Bürgern und Umweltgruppen von Memphis aus, die gemeinsam einen offenen Brief herausgaben, in dem sie protestierten: „Wir müssen darüber nachdenken, wie sich eine Industrie, die so viel Energie verbraucht, noch weiter auf Gemeinden auswirken wird, die bereits von Umweltverschmutzung und hoher Energiebelastung überwältigt sind.“
Um das Projekt abzuschließen, verpflichtete sich xAI zur Verbesserung der öffentlichen Infrastruktur der Stadt, um die Entwicklung des Supercomputing-Zentrums zu unterstützen, einschließlich des Baus eines neuen Umspannwerks und einer Abwasseraufbereitungsanlage.
Man kann sagen, dass Musk einen enorm hohen Preis für das Supercomputing-Zentrum bezahlt hat. Kostenschätzungen zufolge werden 100.000 NVIDIA H100 jeweils 30.000 bis 40.000 US-Dollar kosten, und der Gesamtwert wird 4 Milliarden US-Dollar erreichen (entspricht über 29 Milliarden RMB).
Selbst wenn Musk der „reichste Mann der Welt“ ist, ist die enorme Kapitalinvestition zu hoch, um sie zu ertragen. Deshalb hat er sich mit Dell und Supermicro zusammengetan, um einen Cluster aufzubauen, und 24.000 H100-Ressourcen von Oracle erhalten.
Obwohl viel Geld ausgegeben wurde, treibt Musk weiterhin unbeirrt den Bau von Supercomputing-Zentren voran. Auf sozialen Plattformen fasste er es in einem Satz zusammen:
„Wir müssen selbst das Steuer in die Hand nehmen.“
Die Bewertung von xAI übersteigt 130 Milliarden
Man muss sagen, dass Musk alles gegeben hat, damit xAI mit OpenAI gleichziehen kann.
Mit dem Segen des reichsten Mannes der Welt ist xAI, das erst im Juli 2023 gegründet wurde, gerade ein Jahr alt geworden und verfügt bereits über das Kapital und das Selbstvertrauen, um OpenAI herauszufordern.
Am 13. April dieses Jahres brachte xAI sein erstes multimodales Großmodell Grok-1.5V auf den Markt. Zusätzlich zu den Textfunktionen kann Grok jetzt eine Vielzahl visueller Informationen verarbeiten, darunter Dokumente, Diagramme, Diagramme, Screenshots und Fotos, und multidisziplinäre Überlegungen anstellen.
Mit der Geburt von Grok-1.5V erfreut sich xAI großer Beliebtheit am Kapitalmarkt.
Am 26. Mai gab xAI den Abschluss einer Finanzierung in Höhe von 6 Milliarden US-Dollar mit einem Wert von 24 Milliarden US-Dollar (ca. 173,8 Milliarden RMB) bekannt. Diese Finanzierungsrunde verfügt über eine starke Investorengruppe, darunter die bekannten Risikokapitalfirmen Sequoia Capital und Andreessen Horowitz aus dem Silicon Valley sowie einen Investmentfonds, der eng mit der saudischen Königsfamilie verbunden ist.
OpenAI hat in den letzten zehn Jahren insgesamt 14,3 Milliarden US-Dollar an Finanzierungen erhalten, und xAI hat in nur 10 Monaten 6 Milliarden US-Dollar eingesammelt, was der Hälfte der zehnjährigen Finanzierung von OpenAI entspricht.
Dies ist auch eine der höchsten Einzelfinanzierungen in der Geschichte des großen Modellgeschäfts und übertrifft die 4-Milliarden-Finanzierung, die Anthropic am 12. September 2023 erhalten hat, und die 2-Milliarden-US-Dollar-Finanzierung, die am 28. Oktober 2023 erhalten wurde, sowie die 1,3-Milliarden-US-Dollar-Finanzierung, die InflectionAI am 30. Juni 2023 erhalten hat. Die Gesamtfinanzierung liegt nach OpenAI und Anthropic an zweiter Stelle.
Die Fähigkeit von xAI, die höchste Finanzierung in der Geschichte der KI-Branche zu erhalten, ist natürlich untrennbar mit Musks Heiligenschein verbunden. Insbesondere andere Unternehmen in Musks Geschäftsimperium haben xAI sehr geholfen.
Medienberichten zufolge schickte Tesla bei der Gründung von xAI etwa 50 Software-Ingenieure, um bei der Codeüberprüfung und anderen Aufgaben zu helfen. Es gibt sogar einige Tesla-Ingenieure, die direkt zu xAI gekommen sind. Gleichzeitig können die von der großen Anzahl von Kameras und anderen Sensoren, die mit Tesla-Fahrzeugen ausgestattet sind, erfassten Videodaten eine Echtzeit-Dateneingabe für das xAI-Modell liefern, um es bei der Schulung zu unterstützen.
X, die bekannte soziale Plattform unter Musks Namen, kann xAI ebenfalls mit riesigen Mengen an von Menschen generierten Daten versorgen. Diese Daten sind eine ideale Ressource, um KI-Systeme darin zu trainieren, besser mit Menschen zu interagieren.
Durch die Kombination verschiedener Vorteile kann ein KI-Einhorn mit einer Bewertung von bis zu 24 Milliarden US-Dollar in einem Jahr entstehen. Es kann mit OpenAI in Bezug auf Kapital, Daten, Chips usw. konkurrieren.
Am 1. Juli gab Musks soziale Plattform öffentlich bekannt, dass der nächste Schritt von xAI darin besteht, große Sprachmodelle aus Internet-Trainingsdaten zu löschen, und plant, im August die aktualisierte Version von Grok-2 der nächsten Generation auf den Markt zu bringen.
Ich glaube, dass wir nächsten Monat sehen können, wie Grok-2 gegen GPT-4o kämpft.
Der Kampf um Talente in der KI-Welt
Neben Geldern und Chips gibt es im Wettbewerb großer KI-Modelle noch einen weiteren wichtigen Faktor: Talent.
Musk beklagte einmal auf sozialen Plattformen: Der Krieg um KI-Talente sei der verrückteste Talentkrieg, den er je gesehen habe.
Als „bekannte Internet-Berühmtheit“ auf der ganzen Welt kann jede Bewegung von Musk die Richtung eines Tracks beeinflussen. Dieser Einfluss und diese Popularität erleichtern Musk auch die Rekrutierung professioneller Talente.
Medienberichten zufolge hat Musk viele wissenschaftliche Forscher von Technologieriesen wie Google und Microsoft abgeworben. Führungskräfte anderer Unternehmen haben sich darüber beschwert, dass xAI äußerst wettbewerbsfähige Gehaltspakete anbietet, die sie auf dem Einstellungsmarkt benachteiligen.
Gleichzeitig ist Musk einer der wichtigsten Mitbegründer von OpenAI und war von 2015 bis 2018 als Direktor im Vorstand tätig. Er steuerte nicht nur Dutzende Millionen Dollar an Fördermitteln bei und machte Vorschläge zu Forschungsrichtungen, sondern spielte auch eine Schlüsselrolle bei der Rekrutierung von Weltklasse-Talenten.
Obwohl er OpenAI aufgrund unterschiedlicher Entwicklungskonzepte verlassen hat, ist er zweifellos mit der Führung von OpenAI bestens vertraut.
Bei der Gründung von xAI hat Musk die Datenwissenschaftler Kyle Kosic und Igor Babuschkin von OpenAI mit hohen Gehältern abgeworben.