Brendan Smialowski/Getty Images
- Meta erwarb eine Horde GPUs, um seinen Algorithmus zu ändern, und nicht, um generative KI-Tools zu entwickeln.
- Mark Zuckerberg beschloss jedoch, für alle Fälle doppelt so viele GPUs zu kaufen, wie Meta benötigte
- „Unser normaler Grundsatz ist, dass etwas am Horizont sein wird, das wir noch nicht sehen können.“
Als Mark Zuckerberg im Jahr 2022 begann, eine große Menge an GPUs anzuhäufen, hatte das nichts mit generativer KI zu tun.
Stattdessen konzentrierte sich der CEO und Mitbegründer von Meta immer noch auf das Metaversum und dachte, dass die Grafikverarbeitungseinheiten, hauptsächlich von Nvidia, für das Ranking von Inhalten und eine große Änderung des Algorithmussystems für Reels, Instagram und Facebook verwendet würden.
Der Algorithmus ging von einem Algorithmus, der auf der Gefolgschaft eines Benutzers basiert, zu einem Algorithmus über, der auf „nicht verbundenen Inhalten“ basiert, oder einem System, das einem Benutzer Inhalte aus der gesamten App anzeigt, typischerweise basierend auf allem, mit dem er interagiert hat. Es handelt sich um einen algorithmischen Stil, der durch TikTok bekannt wurde und eine Zeit lang schneller wuchs als die Apps von Meta.
Zuckerberg begann, GPUs aufzukaufen und die Algorithmen und die zugehörige Trainingsinfrastruktur von Meta zu ändern, damit Reels „mithalten konnte, was TikTok machte“, sagte er dem Podcaster Dwarkesh Patel in einem Interview, in dem der CEO letzte Woche die erweiterte Veröffentlichung des Meta AI-Chatbot-Tools bewarb und Metas Llama 3-Modell.
„Habe ich damals gedacht, dass es um KI gehen würde? Nun ja, wir dachten, es würde etwas mit dem Training großer Modelle zu tun haben, aber damals … war ich so sehr damit beschäftigt, einfach nur zu versuchen, die Empfehlungen für Reels zum Laufen zu bringen.“ und andere Inhalte“, sagte Zuckerberg. „Das ist ein großer Vorteil für Facebook und Instagram, den Leuten Inhalte zeigen zu können, die für sie interessant sind, von Leuten, denen sie noch nicht einmal folgen.“
Obwohl Zuckerberg erst mit dem Durchbruch des ChatGPT-Tools von OpenAI in der Tech-Szene an generative KI dachte, tat er, was er konnte, um auf das Unerwartete vorbereitet zu sein. Nachdem Zuckerberg von anderen technologischen Veränderungen überrascht worden war – der Umstellung auf Mobilgeräte, politische Manipulation von Inhalten, Kurzvideos –, wollte er nicht noch einmal unangenehm überrascht werden.
„Ich habe im Grunde nachgeschaut [needing to catch up with TikTok] und ich dachte: ‚Hey, wir müssen sicherstellen, dass wir nie wieder in diese Situation kommen‘“, sagte Zuckerberg. „‚Also lasst uns genügend GPUs bestellen, um das zu tun, was wir für Reels und das Ranking von Inhalten und Feeds tun müssen. aber lasst uns das verdoppeln.’ Denn auch hier gilt unser normaler Grundsatz: Es wird sich etwas am Horizont abzeichnen, das wir noch nicht sehen können.“
Der CEO gab zu, dass die Verdoppelung der Investition von Meta in GPUs für den Fall, dass das Unternehmen sie benötigen würde, „rückblickend eine gute Entscheidung war“ – eine, die er aufgrund so vieler vermeintlicher Fehler in der Vergangenheit getroffen hat.
„Es kam daher, dass ich im Rückstand war … es war nicht so, als wäre ich so weit voraus“, fügte Zuckerberg hinzu. „Tatsächlich denke ich, dass wir meistens Entscheidungen treffen, die am Ende gut erscheinen, weil wir vorher etwas vermasselt haben und den Fehler einfach nicht wiederholen wollen.“
Sind Sie ein Meta-Mitarbeiter oder jemand, der einen Tipp oder eine Erkenntnis mitteilen möchte? Kontaktieren Sie Kali Hays unter [email protected] oder über eine sichere Messaging-AppSignal unter 949-280-0267. Nehmen Sie Kontakt auf, indem Sie ein Gerät verwenden, das nicht für die Arbeit geeignet ist.