Düşünce Liderleri

Yapay Zeka’da Hesaplama Gücünün Kutsal Kasesi

mm
Unite.AI sitesini Google'daki tercih ettiğiniz kaynaklara ekleyin

İnanılmaz ilerlemelere rağmen, yapay zeka yetenekleri hala gerçek dünya beklentilerine kıyasla sınırlıdır. Karmaşık modeller oluşturur, sinir ağlarını çalıştırır ve algoritmaları test ederiz, ancak bazen ilerleme beklenmedik yerlerde durur.

Sorun genellikle algoritmalar veya verilerde değil, hesaplama gücünde, modellerin öğrenmesini ve gerekli ölçekte çalışmasını sağlayan kaynaklarda yatmaktadır. Peki, bu engel arkasında ne yatmaktadır? Hesaplamalı gücün kritik kaynaklarını, laboratuvarın ötesine geçemeyen en umut verici yapay zeka projelerinin bile geçemeyeceği kaynağı inceleyelim.

Hesaplama açığı ve sonuçları

Bu konuyu anlamak için, mobil iletişimlerin tarihine başlayalım. 3G ve 4G ağları ortaya çıktığında, internet neredeyse küresel hale gelmişti. 5G tanıtıldığında, birçok kişi mantıklı bir soru sordu: “İnternet daha hızlı olacak – ama bu ne anlama geliyor?”

Gerçekte, internet hızındaki artış kullanıcı rahatlığıyla ilgili değildir. Tüm teknolojik manzarayı değiştirir. Önceden imkansız olan kullanım durumları ortaya çıkar. 5G, 4G’den çok daha hızlı çıktı ve bu sıçrama, 1G’den 2G’ye geçiş gibi dần dần değil, üssel bir şekilde oldu. Sonuç olarak, yeni uygulamalar, cihazlar ve teknoloji sınıfları ortaya çıktı.

Trafiği düzenleyen kameralar, gerçek zamanlı trafik analiz sistemleri ve otomatik trafik düzenleme mekanizmaları – tüm bunlar yeni iletişim teknolojileri sayesinde mümkün hale geldi. Polis, verilerini paylaşmak için yeni yollar kazandı ve uzayda, teleskoplar ve uydular, Dünya’ya büyük miktarda bilgi gönderebildi. Temel bir teknolojinin niteliğinde bir sıçrama, tüm ekosistemin gelişimini hızlandırır.

Aynı ilke hesaplamalı güce de uygulanır. İnsanlığın toplam hesaplamalı kapasitesini varsayımsal birimlerle hayal edin. Bugün, diyelim ki on böyle bir birimimiz var. Bunlarla resimler ve videolar oluşturabilir, metinler yazabilir, pazarlama materyalleri oluşturabiliriz… Bu zaten önemli, ancak uygulama aralığı esas olarak sınırlıdır.

Şimdi, on değil, bin böyle bir birimimiz olduğunu hayal edin. Aniden, önce çok pahalı olan teknolojiler uygulanabilir hale gelir ve yüksek hesaplamalı maliyetler nedeniyle terk edilen startups ekonomik olarak anlamlı hale gelir.

Örneğin, robotaksi şirketlerini ele alalım. Bugün, bunlar çoğunlukla araçta kurulan nispeten zayıf yerel bilgisayarlara dayanır. Ancak, video akışı bulut tarafından işlenen büyük hesaplamalı kaynaklara iletilirse, veriler gerçek zamanlı olarak işlenebilir ve geri gönderilebilir. Ve bu kritiktir: 100 km/h hızında giden bir araba, kararları saniyenin kesirlerinde vermelidir – düz gidebilir, dönebilir, fren yapabilir veya yapamaz.

Bu, tam işleyen bir robotaksi endüstrisinin mümkün hale gelmesi demektir, sadece günümüzde gördüğümüz izole çözümler değil. Araçta kurulan herhangi bir yerel bilgisayar, bağlı bir sistem olmadığından dolayı doğal olarak sınırlıdır. Hesaplamalı gücü ne kadar hızlı ölçekleyebilirsek, dünyamız o kadar hızlı değişir.

Yapay Zeka’da “Altın Bilet” ve Çip Erişimi

Hesaplamalı güç bağlamında, modern çiplere erişim yapay zeka pazarına girmek için “altın bilet” haline mi geliyor? Büyük oyuncular, çip üreticileriyle sözleşmeler imzalayarak veya bunları kendileri üreterek, büyük şirketler ile diğerleri arasında bir uçurum mu yaratıyorlar?

Böyle bir uçurum, yalnızca bir iş modelinin büyük müşterilere çip satmakla sınırlı olduğu durumda ortaya çıkar. Pratikte, NVIDIA gibi üreticiler herkes için bulut çözümleri sunmayı amaçlar. Optimizeleri çipleri, OpenAI ve bağımsız geliştiriciler de dahil olmak üzere herkesin bulutunda mevcuttur.

Google, Anthropic, Microsoft, OpenAI, Amazon ve NVIDIA gibi şirketler arasındaki stratejik ittifaklar, pazarı kapatma girişimlerinden ziyade, paylaşılan kaynak kullanımına yönelik ortaklıklardır. Bu model, hesaplamalı gücün verimli dağıtımını sağlar ve teknolojik gelişimi hızlandırır.

Hesaplamalı kaynak kullanım zincirini izlediğimizde, bu zincir son kullanıcıda başlar. Örneğin, WhatsApp’ı video görüşmeleri ve mesajlaşma için kullandığınızda, şirket hizmetin çalışmasını sağlamak zorundadır: veri depolama ve işleme, video temizleme modelleri çalıştırma, efekt ekleme ve görüntü kalitesini iyileştirme.

Kendi sunucularını korumak pahalıdır, bunlar eskimekte ve sürekli bakım gerektirmektedir. Bu nedenle, “bulut” olarak bilinen bulut çözümleri ortaya çıktı. Pazar, Google Cloud, AWS ve Microsoft Azure tarafından domine edilmektedir. Diğer şirketler bu düzeyde rekabet edemez: altyapı ölçeği çok büyüktür.

Bulut hizmetleri, soğutma, güç kaynağı ve 7/24 bakım içeren devasa veri merkezleridir. NVIDIA, AMD ve diğer üreticilerin sunucularını ve özel çiplerini barındırırlar, büyük ölçekli hesaplamalı işlemleri mümkün kılarlar.

Burada, önceki yazımda veri merkezleri hakkında tartıştığım ve burada devam etmek istediğim kritik soru ortaya çıkıyor: Bu sistemdeki temel tıkanıklık nedir? Elektrik kıtlığı mı, yoksa sıcak iklimlerde veri merkezlerini soğutmanın zorluğu mu? Gerçekte, sır çiplerin kendisinde yatmaktadır…

Kutsal Kase

NVIDIA neden bugün yaklaşık 5 trilyon dolar değerinde ve dünyanın en başarılı halka açık şirketleri arasında yer alıyor? Sebebi basittir: NVIDIA, yapay zeka modellerinin eğitildiği ve çıkarım yaptığı çipleri üretir.

Her bir çip, büyük modelleri eğitmek veya her geçen gün artan veri hacimlerini işlemek için muazzam miktarda elektrik tüketir. Ancak bu enerji ne kadar verimli kullanılır? İşte burada özel çipler devreye girer; belirli görevleri genel amaçlı GPU’lere göre çok daha verimli bir şekilde gerçekleştirirler.

Yapay zeka modelleri farklıdır. OpenAI, örneğin, bir dizi modeli vardır, Anthropic ise başka bir dizi modeli. Kavramlar benzer olabilir, ancak matematiksel yapılar ve hesaplamalı süreçler farklıdır. Genel amaçlı bir çip, OpenAI modellerini (örneğin, ChatGPT) eğitmek için 100.000 saatlik hesaplamaya ihtiyaç duyarken, Anthropic modelleri (örneğin, Claude) için 150.000 saatlik hesaplamaya ihtiyaç duyabilir. Verimlilik önemli ölçüde değişir ve nadiren optimaldir.

Şirketler bu sorunu, özel çipler üreterek çözer. Örneğin, bir çip ChatGPT mimarisine optimize edilebilir ve eğitimi 20 dakika gibi bir sürede tamamlayabilir, bir diğeri ise Anthropic mimarisine uyarlanır ve yine 20 dakika gibi bir sürede eğitimi tamamlar. Enerji tüketimi ve eğitim süresi, genel amaçlı bir çipe göre çoklu kez azaltılır.

Bu çipler büyük şirketlere satıldığında, bağımsız ürünler olarak sunulurlar. Kullanıcılar, örneğin, YOLO modeli için optimize edilmiş bir çip veya Xen mimarisi için daha basit ve daha ucuz bir çip seçebilir. Bu şekilde, şirketler görevlerine özgü hesaplamalı kaynaklara erişebilir, genel amaçlı GPU’lar satın almak yerine. Bir kullanıcı on farklı fonksiyona sahipse, on farklı özel çipi kullanabilir.

Eğilim açıktır: Özel çipler dần genel amaçlı çiplerin yerini almaktadır. Çok sayıda startup, özel hesaplamalı görevler için tasarlanmış ASIC’ler (Uygulama-Spesifik Entegre Devreler) ile çalışmaktadır. İlk ASIC’ler Bitcoin madenciliği için ortaya çıktı: başlangıçta, kriptopara NVIDIA GPU’ları üzerinde madencilik yapıyordu, daha sonra yalnızca Bitcoin için tasarlanmış ve diğer görevleri gerçekleştiremeyen çipler üretildi.

Bunu pratikte görüyorum: Aynı donanım yapılandırması, görevlere bağlı olarak tamamen farklı sonuçlar üretebilir. Startup’ım Introspector‘da, bu süreçleri gerçek projelerde inceliyoruz ve Keymakr‘ın stratejik danışmanı olarak, müşterilerin özel çiplerden nasıl verimlilik kazandığını ve modellerin daha hızlı çalışmasını sağladığını gözlemliyorum. Önceki eğitim veya çıkarım sırasında duraklayan projeler, bu yaklaşım sayesinde istikrarlı sonuçlara ulaşıyor.

Ancak dar uzmanlaşma riskleri taşır. Anthropic mimarisine optimize edilmiş bir çip, OpenAI modellerini eğitmek için çalışmaz, tersi de geçerli. Her yeni mimari, yeni bir donanım neslini gerektirir, bu da büyük ölçekli “eski haline getirme” riski yaratır. Anthropic, yarın yeni bir mimari çıkardığında, tüm önceki nesil çipler verimsiz veya işe yaramaz hale gelir. Yeni çipler üretmek milyarlarca dolar maliyeti olabilir ve yıllarca sürebilir.

Bu, bir ikileme yol açar: Dar bir senaryoda mükemmel çalışan özel çipler mi üretmeliyiz, yoksa genel amaçlı çiplerin üretimine devam mı etmeliyiz? Bu çipler, mimari değişikliklerinde tamamlanma gerektirmeksizin, tüm görevleri orta düzeyde iyi bir şekilde çözebilir.

Verimlilik bu bağlamda üç temel parametreye göre ölçülür: Çalışma zamanı, elektrik tüketimi ve ısı üretimi. Bu metrikler doğrudan relacionlıdır: Bir sistem ne kadar uzun çalışırsa, o kadar çok enerji tüketir ve o kadar çok ısı üretir. Bir parametreyi azaltmak, diğer iki parametreyi de otomatik olarak iyileştirir.

Burada, yapay zeka performansının “kutsal kasesi” yatmaktadır: Eğer en az bir temel verimlilik metriği optimize edilebilirse, diğer metrikler de neredeyse otomatik olarak iyileştirilir.

Sürdürülebilir Süreç

Özel çiplerin artan kullanımı ile birlikte, aşırı üretim riskleri konusu acil hale gelmiştir. Şu anda, ekipman fazlası zaten önemlidir ve şirketler bu sorunu çeşitli sürdürülebilir yollarla, mevcut kaynakların yeniden kullanımını da dahil ederek, çözmeye çalışmaktadır.

Ekipman geri dönüşümü, yüksek teknoloji endüstrilerinde sürdürülebilir gelişimin önemli bir öğesi haline gelmiştir. Çipler, değerli ve baz metaller, altın, bakır, alüminyum, palladyum ve nadir toprak malzemeleri ile mikroçipler ve transistörlerde kullanılan malzemeler içerir. Ekipman eski olduğunda, bu değerli kaynaklar üretime geri döndürülebilir, yeni bileşenlerin maliyetini azaltırken aynı zamanda endüstrinin çevresel ayak izini azaltır.

Bazı uzman fabrikalar ve şirketler, eski bileşenlerden değerli metalleri çıkarmaya ve geri dönüştürmeye odaklanmaktadır. Örneğin, bazı tesisler, altın ve bakırı yüksek saflıkta çıkarmak için hidrometalurjik süreçler ve gelişmiş kimyasal yöntemler kullanır, bu da bu malzemelerin yeni çiplerde yeniden kullanılmasına olanak tanır.

Şirketler ayrıca, eski ekipmanın yeni çözümlere entegre edildiği veya yükseltildiği kapalı döngü modellerini uygulamaktadır, bu da birincil kaynak çıkarma ihtiyacını azaltmaktadır. Bu yaklaşımlar, yalnızca atık miktarını azaltmakla kalmaz, aynı zamanda geleneksel madencilik ve metal işlemenin önemli enerji gerektirmesi nedeniyle üretim sürecinin karbon ayak izini de azaltmaya yardımcı olur.

Çipler ve ekipmanların yaşam döngüsünün sürdürülebilir yönetimi, teknolojik ilerlemenin çevresel sorumlulukla uyumlu olduğu bir endüstri standardı haline gelebilir. not only help minimize waste but also lower the carbon footprint of production, as traditional mining and metal processing require significant energy. Sustainable management of the lifecycle of chips and equipment could become an industry standard, where technological progress aligns with environmental responsibility.

Michael Abramov, Introspector'un kurucusu ve CEO'su, 15+ yıllık yazılım mühendisliği ve bilgisayar vizyonu AI sistemleri deneyimini, işletme sınıfı etiketleme araçları oluşturmaya getiriyor.

Michael, kariyerine bir yazılım mühendisi ve Ar-Ge müdürü olarak başladı, ölçeklenebilir veri sistemleri inşa etti ve çok fonksiyonlu mühendislik ekiplerini yönetti. 2025 yılına kadar, büyük ölçekli bilgisayar vizyonu ve otonom veri ihtiyaçlarını desteklemek için insan-çevrimiçi iş akışları, gelişmiş QA sistemleri ve özel araçlar geliştirdiği Keymakr adlı bir veri etiketleme hizmeti şirketinin CEO'su olarak görev yaptı.

Bilgisayar Bilimi alanında lisans derecesine sahip olan Michael, mühendislik ve yaratıcı sanatlar alanında multidisipliner bir lens getirerek zor sorunları çözmeye çalışıyor. Michael, teknoloji inovasyonu, stratejik ürün liderliği ve gerçek dünya etkisinin kesişiminde yaşıyor ve otonom sistemler ve akıllı otomasyonun nächsten sınırını ileriye taşıyor.