Elon Musk, Tesla’nın sadece bir otomobil üreticisi olmasını istemiyor. Tesla’nın, arabaların kendi kendine hareket etmesini sağlayan bir yapay zeka şirketi olmasını istiyor.
Bu görev için hayati önem taşıyan şey, Tesla’nın Tam Otomatik Sürüş (FSD) sinir ağlarını eğitmek için tasarlanmış özel yapım süper bilgisayarı Dojo’dur. FSD aslında tamamen kendi kendine sürüş özelliğine sahip değil; bazı otonom sürüş görevlerini yerine getirebilir ancak yine de direksiyon başında dikkatli bir insana ihtiyaç duyar. Ancak Tesla, daha fazla veri, daha fazla bilgi işlem gücü ve daha fazla eğitimle neredeyse otonom sürüşten tam otonom sürüşe geçiş eşiğini geçebileceğini düşünüyor.
İşte Dojo’nun devreye girdiği yer burasıdır.
Musk bir süredir Dojo’yla dalga geçiyor, ancak yönetici 2024 boyunca süper bilgisayar hakkındaki tartışmaları artırıyor. Dojo’nun Tesla için önemi varoluşsal olabilir; EV satışlarının düşmesiyle birlikte yatırımcılar Tesla’nın özerkliğe ulaşabileceğine dair güvence istiyor. Aşağıda Dojo’nun bahsettiği ve vaat ettiği zaman çizelgesi yer almaktadır.
2019
Dojo’nun ilk sözleri
22 Nisan – Tesla’nın Özerklik Günü’nde otomobil üreticisi, Otopilot ve Tam Otomatik Sürüş ve her ikisine de güç veren yapay zeka hakkında konuşmak için yapay zeka ekibini sahneye çıkardı. Şirket, Tesla’nın sinir ağları ve sürücüsüz arabalar için özel olarak tasarlanmış özel yapım çipleri hakkında bilgi paylaşıyor.
Etkinlik sırasında Musk, Dojo’yla dalga geçerek onun yapay zeka eğitimi için bir süper bilgisayar olduğunu ortaya koyuyor. Ayrıca o dönemde üretilen tüm Tesla arabalarının tam otonom sürüş için gerekli tüm donanıma sahip olacağını ve yalnızca bir yazılım güncellemesine ihtiyaç duyduğunu belirtiyor.
2020
Musk Dojo tanıtım turuna başlıyor
2 Şubat – Musk, Tesla’nın yakında dünya çapında tamamen kendi kendine sürüş için gerekli sensörler ve bilgi işlemle donatılmış bir milyondan fazla bağlantılı araca sahip olacağını söylüyor ve Dojo’nun yeteneklerini övüyor.
“Eğitim süper bilgisayarımız Dojo, çok büyük miktarlarda video eğitim verilerini işleyebilecek ve çok sayıda parametre, bol miktarda bellek ve çekirdekler arasında ultra yüksek bant genişliği ile hiperuzay dizilerini verimli bir şekilde çalıştırabilecek. Bu konuda daha sonra daha fazla bilgi vereceğiz.”
14 Ağustos – Musk, Tesla’nın “gerçekten çok miktarda video verisini işleyecek” Dojo adında bir sinir ağı eğitim bilgisayarı geliştirme planını yineleyerek onu “bir canavar” olarak nitelendiriyor. Ayrıca Dojo’nun ilk versiyonunun “yaklaşık bir yıl uzakta” olduğunu ve lansman tarihinin Ağustos 2021 civarında olacağını söylüyor.
Aralık 31 — Elon, Dojo’ya ihtiyaç olmadığını ancak otonom sürüşü daha iyi hale getireceğini söylüyor. “İnsan sürücülerden daha güvenli olmak yeterli değil; Autopilot’un sonuçta insan sürücülerden 10 kat daha güvenli olması gerekiyor.”
2021
Tesla Dojo’yu resmileştiriyor
19 Ağustos – Otomobil üreticisi, mühendisleri Tesla’nın yapay zeka ekibine çekmeyi amaçlayan bir etkinlik olan Tesla’nın ilk Yapay Zeka Günü’nde Dojo’yu resmi olarak duyurdu. Tesla ayrıca, otomobil üreticisinin Dojo süper bilgisayarına güç sağlamak için Nvidia’nın GPU’sunun yanı sıra kullanacağını söylediği D1 çipini de tanıttı. Tesla, AI kümesinin 3.000 D1 yongasını barındıracağını belirtti.
12 Ekim – Tesla’nın sürümleri A Dojo Technology teknik incelemesi, “Tesla’nın yapılandırılabilir kayan nokta formatları ve aritmetiğine yönelik bir rehber.” Teknik inceleme, derin öğrenme sinir ağlarında kullanılan ve “tamamen yazılımda, tamamen donanımda veya herhangi bir yazılım ve donanım kombinasyonunda” uygulanabilen yeni bir ikili kayan nokta aritmetiği türü için teknik bir standardın ana hatlarını çiziyor.
2022
Tesla Dojo’nun ilerlemesini açıkladı
12 Ağustos – Musk, Tesla’nın “Dojo’ya geçeceğini” söyledi. Gelecek yıl çok fazla artan GPU satın almanıza gerek kalmayacak.”
30 Eylül – Tesla’nın ikinci Yapay Zeka Günü’nde şirket, 2,2 megavatlık yük testini test ederek ilk Dojo kabinini kurduğunu açıkladı. Tesla, günde bir karo (25 D1 çipten oluşan) inşa ettiğini söylüyor. Tesla, “Mars’taki Cybertruck”un yapay zeka tarafından oluşturulmuş bir görüntüsünü oluşturmak için Kararlı Yayılım modelini çalıştıran Dojo’yu sahnede tanıtıyor.
Daha da önemlisi şirket, 2023’ün ilk çeyreğine kadar tamamlanacak tam bir Exapod kümesi için hedef tarih belirliyor ve Palo Alto’da toplam yedi Exapod üretmeyi planladığını söylüyor.
2023
Uzun vadeli bir bahis‘
19 Nisan – Musk, Tesla’nın ilk çeyrek kazançları sırasında yatırımcılara Dojo’nun “eğitim maliyetinde büyük bir iyileşme potansiyeline sahip olduğunu” ve aynı zamanda “diğer şirketlere de aynı şekilde sunabileceğimiz satılabilir bir hizmet haline gelme potansiyeline sahip olduğunu” söyledi. Amazon Web Services’in web hizmetleri sunduğunu.”
Musk ayrıca Dojo’ya “uzun vadeli bir bahis” olarak baktığını ancak “yapmaya değer bir bahis” olduğunu belirtiyor.
21 Haziran — Tesla AI X hesabı, şirketin sinir ağlarının zaten müşteri araçlarında olduğunu belirtiyor. Konu, Tesla’nın mevcut ve öngörülen bilgi işlem gücünün zaman çizelgesini içeren bir grafik içeriyor; bu, Dojo üretiminin başlangıcını Temmuz 2023’e yerleştiriyor; ancak bunun D1 çiplerini mi yoksa süper bilgisayarın kendisini mi ifade ettiği belli değil. Musk aynı gün Dojo’nun zaten çevrimiçi olduğunu ve Tesla veri merkezlerinde görevler yürüttüğünü söyledi.
Şirket ayrıca Tesla’nın hesaplamasının Şubat 2024’e kadar tüm dünyada ilk beşe gireceğini (bunun başarılı olduğuna dair hiçbir gösterge yok) ve Tesla’nın Ekim 2024’e kadar 100 exaflop’a ulaşacağını öngörüyor.
19 Temmuz – Tesla, ikinci çeyrek kazanç raporunda Dojo üretimine başladığını belirtiyor. Musk ayrıca Tesla’nın 2024 yılına kadar Dojo’ya 1 milyar dolardan fazla harcamayı planladığını da söyledi.
6 Eylül – Musk, X’te Tesla’nın yapay zeka eğitim hesaplamalarıyla sınırlı olduğunu ancak Nvidia ve Dojo’nun bunu düzelteceğini belirtti. Tesla’nın arabalarından günde yaklaşık 160 milyar kare videodan elde edilen verileri yönetmenin son derece zor olduğunu söylüyor.
2024
Ölçeklendirme planları
24 Ocak – Tesla’nın dördüncü çeyrek ve tüm yıl kazanç açıklaması sırasında Musk, Dojo’nun yüksek riskli, yüksek ödüllü bir proje olduğunu bir kez daha kabul etti. Ayrıca Tesla’nın “Nvidia ve Dojo’nun ikili yolunu izlediğini”, “Dojo’nun çalıştığını” ve “eğitim işleri yaptığını” söylüyor. Tesla’nın bunu büyüttüğünü ve “Dojo 1.5, Dojo 2, Dojo 3 ve daha fazlası için planları” olduğunu belirtiyor.
26 Ocak – Tesla, Buffalo’da bir Dojo süper bilgisayarı inşa etmek için 500 milyon dolar harcamayı planladığını duyurdu. Musk daha sonra yatırımı biraz küçümseyerek X’e 500 milyon dolar büyük bir meblağ olsa da bunun “sadece Nvidia’nın 10 bin H100 sistemine eşdeğer olduğunu” yazdı. Tesla bu yıl Nvidia donanımına bundan daha fazlasını harcayacak. Bu noktada yapay zekada rekabetçi olmanın maliyeti yılda en az birkaç milyar dolardır.”
30 Nisan – TSMC’nin Kuzey Amerika Teknoloji Sempozyumu’nda şirket, IEEE’ye göre Dojo’nun yeni nesil eğitim panelinin (25 çipi birleştirerek tek bir parça oluşturmak yerine tüm Dojo parçasını tek bir silikon levha üzerine koyan D2) halihazırda üretimde olduğunu söylüyor. Spektrum.
20 Mayıs – Misk notlar Giga Texas fabrika uzantısının arka kısmında “süper yoğun, su soğutmalı bir süper bilgisayar kümesinin” inşası yer alacak.
4 Haziran – Bir CNBC raporu, Musk’ın Tesla için ayrılan binlerce Nvidia çipini X ve xAI’ye yönlendirdiğini ortaya koyuyor. Başlangıçta raporun yanlış olduğunu söyledikten sonra, Musk X’te paylaşım yapıyor Giga Texas’ın güney uzantısında devam eden inşaat nedeniyle Tesla’nın Nvidia çiplerini gönderecek bir konumu olmadığını, “bu yüzden bir depoda duracaklarını” söyledi. Uzantının “FSD eğitimi için 50 bin H100’ü barındıracağını” belirtti.
O da gönderiler:
“Tesla’nın bu yıl yapacağını söylediğim yapay zeka ile ilgili yaklaşık 10 milyar dolarlık harcamanın yaklaşık yarısı şirket içi harcamalar, özellikle de Tesla tarafından tasarlanan yapay zeka çıkarım bilgisayarı ve tüm arabalarımızda bulunan sensörler ile Dojo. Yapay zeka eğitim süper kümelerini oluşturmak için NVidia donanımı maliyetin yaklaşık 2/3’ü kadardır. Tesla’nın Nvidia satın alımlarına ilişkin şu anki en iyi tahminim bu yıl 3 ila 4 milyar dolar arasında.”
1 Temmuz – Musk, X’te mevcut Tesla araçlarının şirketin yeni nesil yapay zeka modeli için doğru donanıma sahip olmayabileceğini açıkladı. Yeni nesil yapay zeka ile parametre sayısında kabaca 5 kat artış sağlanmasının “araç çıkarım bilgisayarını yükseltmeden elde edilmesinin çok zor olduğunu” söylüyor.
Nvidia tedarik zorlukları
23 Temmuz – Tesla’nın ikinci çeyrek kazanç açıklaması sırasında Musk, Nvidia donanımına olan talebin “o kadar yüksek ki GPU’ları almanın genellikle zor olduğunu” söyledi.
Musk, “Bunun, ihtiyacımız olan eğitim kapasitesine sahip olduğumuzdan emin olmak için Dojo’ya çok daha fazla çaba göstermemizi gerektirdiğini düşünüyorum” dedi. “Ve Dojo sayesinde Nvidia ile rekabet edebilmenin bir yolunu görüyoruz.”
Tesla’nın yatırımcı destesindeki bir grafik, Tesla AI eğitim kapasitesinin Haziran ayındaki 40.000 civarından 2024 sonuna kadar kabaca 90.000 H100 eşdeğeri GPU’ya çıkacağını öngörüyor. Aynı günün ilerleyen saatlerinde X’te Musk, Dojo 1’in “yıl sonuna kadar yaklaşık 8 bin H100 eşdeğeri çevrimiçi eğitime sahip olacağını” paylaştı. Ayrıca Tesla’nın Cybertrucks’ındakiyle aynı buzdolabı benzeri paslanmaz çelik dış yüzeyi kullandığı anlaşılan süper bilgisayarın fotoğraflarını da yayınlıyor.
XXX
30 Temmuz – Musk, AI5’in yüksek hacimli üretime ~18 ay uzaklıkta olduğunu söyledi cevap vermek “AI5 çıktığında geride kalmaktan öfkeli olan Tesla HW4/AI4 sahiplerinden oluşan bir kulüp kurduğunu iddia eden birinin gönderisine.”
3 Ağustos – Musk, X’te “Giga Texas’taki (diğer adıyla Cortex) Tesla süper bilgi işlem kümesi” hakkında bir inceleme yaptığını paylaştı. Bunun yaklaşık 100.000 H100/H200 Nvidia GPU’dan oluşacağını ve “FSD ve Optimus’un video eğitimi için devasa depolama alanına” sahip olacağını belirtiyor.
Kaynak: https://techcrunch.com/2024/08/10/teslas-dojo-a-timeline/