Ön eğitimden yapay zekâ ajanı ekiplerine: Jensen Huang'ın dört ölçekleme döngüsü hesaplama sorusunu neden değiştiriyor?

Jensen Huang

Giriş: Yapay zekâ daha yetenekli hâle geldiğinde ne büyür?

Yapay zekâ [AI] hakkındaki tartışmalar çoğu zaman bir modelin boyutuyla başlar. Kaç parametre içeriyor? Eğitiminde ne kadar bilgi kullanıldı? Arkasındaki hesaplama sistemi ne büyüklükteydi?

Bu sorular sistemin yalnızca bir bölümünü açıklar. Jensen Huang'ın daha kapsamlı savı, yapay zekânın çeşitli aşamalarda büyüyebileceğidir: temellerini öğrenirken, davranışını geliştirirken, belirli bir sorunu çözerken ve işi ajanlar arasında dağıtırken. Bu aşamalar arasındaki bağlantıyı anlamak, hesaplama talebi hakkındaki düşüncemizi değiştirir.

Önemli ayrım, bir model oluşturmak ile akıllı bir sistem kullanmak arasındadır. Bunlar ilişkili faaliyetlerdir, ancak aynı iş yükü [Workload] değildir.

1. Ön eğitim bir temel oluşturur, hazır bir çalışan değil

Ön eğitim [Pre-training], bir modeli büyük miktarda bilgiyle karşılaştırarak genel yeteneklerini geliştirir. Model, sonraki görevleri destekleyebilecek örüntüleri ve ilişkileri öğrenir.

Daha fazla veri ve hesaplama bu temelleri iyileştirebilir. Ancak daha büyük bir eğitim çalışması, yararlı zekâyı bütünüyle açıklamaz. Bir model geniş genel bilgiye sahip olsa da daha iyi muhakemeye, göreve özgü deneyime ya da eğitim sırasında karşılaşmadığı bilgilere erişime ihtiyaç duyabilir.

Bu nedenle soru, insanlar tarafından yazılmış malzeme arzının sonunda bir kısıta dönüşüp dönüşmeyeceğiyle sınırlı kalamaz. Sonraki aşamalar hem sistemin öğrenme biçimini hem de yaptığı işi değiştirebilir.

2. Eğitim sonrası geliştirme, temelin nasıl kullanıldığını değiştirir

Eğitim sonrası geliştirme [Post-training], ilk öğrenmenin ardından modeli iyileştirir. Ağırlık davranışa, pratik görevlere ve insanların ihtiyaç duyduğu yanıt türlerine kayar.

Sentetik veri [Synthetic Data] bu sürece katkıda bulunabilir. Bir sistem örnekler oluşturabilir, farklılıkları inceleyebilir ve daha fazla öğrenmede işe yarayan malzemeler üretebilir. Değer, bunu bir makinenin üretmiş olmasında değil, ortaya çıkan deneyimin kalitesindedir.

Bu ayrım önemlidir. Daha fazla malzeme üretmek, onun doğru olduğunu kendiliğinden kanıtlamaz. Yararlı döngü, saklanmaya değer deneyimleri seçer ve bunları sonraki davranışı iyileştirmek için kullanır. Seçim olmadan hacim artışı, zayıflıkları düzeltmek yerine tekrarlayabilir.

3. Kullanım sırasındaki hesaplama, çıkarımı daha zor bir sorun hâline getirir

Çıkarım [Inference] bazen basit bir son adım olarak düşünülür: model zaten öğrenmiştir, dolayısıyla bir yanıt üretmek çok az ek iş gerektirmelidir.

Test zamanında ölçekleme [Test-time Scaling] bu görüşe meydan okur. Zor bir görev, sistemin sorunu küçük parçalara ayırmasını, olası yaklaşımları karşılaştırmasını, bilgi aramasını ve başarısız bir girişimi yeniden değerlendirmesini gerektirebilir.

Bu durumda hesaplama ihtiyacı, sistemin yararlı bir yanıt vermeden önce ne yapması gerektiğine bağlıdır. Kısa bir yanıtın öncesinde de önemli miktarda çalışma olabilir. Buna karşılık uzun bir yanıt, dikkatli akıl yürütmenin kanıtı değildir.

Bir işletme açısından bu, yanıt süresi [Latency], yanıt kalitesi ve işletme maliyetini bağlantılı tercihlere dönüştürür. En ucuz anlık yanıt, her zaman başarıyla tamamlanan en ucuz görev anlamına gelmez.

4. Ajan tabanlı ölçekleme, yeteneğe koordinasyon ekler

Ajan tabanlı ölçekleme [Agentic Scaling] başka bir yol sunar: sistem, bir modelden her şeyi sırayla yapmasını istemek yerine işi birden fazla ajan [Agents] arasında dağıtabilir.

Bir ajan kayıtları incelerken diğeri seçenekleri karşılaştırabilir. Bulguları ortak bir sonucu destekleyebilir. Bu, tek bir modeli büyütmekten veya ona daha fazla süre vermekten farklı bir büyüme biçimidir.

Bir kuruluşla karşılaştırmak yararlıdır. Daha fazla çalışan kapasiteyi artırabilir, ancak sorumluluklar, iletişim ve nihai karar net olduğunda. Aynı şekilde daha fazla ajan; koordinasyon, uyuşmazlıkları giderme ve denetleme işi doğurur. Sayıları bir girdidir, başarı ölçüsü değildir.

5. Dört aşama bir öğrenme döngüsü oluşturur

En önemli bağlantı, sistem çalıştıktan sonra ne olduğudur. Ajanların yararlı deneyimleri sonraki eğitimler için malzemeye dönüşebilir. Geliştirilmiş modeller de daha iyi akıl yürütmeyi ve daha etkili ajanları destekleyebilir.

Bu nedenle ön eğitim, eğitim sonrası geliştirme, kullanım sırasındaki çalışma ve ajan faaliyetleri ayrı kutularda kalmak zorunda değildir. Birbirlerini besleyebilirler.

Bu, altyapı sorusunu da değiştirir. Bir modeli eğitmek, dosyalarda arama yapmak ve birden fazla çalışanı koordine etmek; işlemciler, bellek, depolama ve ağlar üzerinde farklı talepler oluşturur. Dar bir performans testi [Benchmark] etrafında tasarlanan sistem, iş akışının [Workflow] tamamına uygun olmayabilir.

Sonuç: Yalnızca modeli değil, işi ölçün

Huang'ın dört parçalı çerçevesi, tartışmayı yapay zekâ ilerlemesinin yalnızca daha büyük bir veri kümesi [Dataset] üzerinde bir kez eğitilmiş daha büyük bir model olduğu düşüncesinin ötesine taşır.

Pratik ders, ek hesaplamanın nerede daha iyi sonuç ürettiğini belirlemektir. Görev daha iyi temellere, daha yararlı geliştirmeye, daha uzun problem çözmeye mi, yoksa koordineli bir iş bölümüne mi ihtiyaç duyuyor?

Bir işletme yanıtı tamamlanan görevler, kalite, zaman ve toplam maliyet üzerinden değerlendirmelidir. Bu, yalnızca parametreleri veya ajanları saymaktan daha yararlı bir başlangıçtır. Geleceğin hesaplama sorusu, öğrenen ve çalışan sistemin tamamıyla ilgilidir.

Powered By K7