METR, Anthropic'in modellerinin açıkça tanımlanmış görevlerdeki yeteneklerini geçmişe göre yaklaşık iki kat daha hızlı geliştirdiğini tahmin ediyor. 5 Kasım'da yayımlanan değerlendirme, hızlanmanın büyük bölümünü yapay zeka destekli araştırmaya bağlıyor; ancak bu payın kesin olarak ölçülemediğini vurguluyor.
İncelemede Anthropic'in AECI adlı yetenek ölçümündeki ilerleme hızı, Ekim 2025 öncesine göre 1,9 kat olarak hesaplandı. Yüzde 95 güven aralığı 1,5 ile 2,8 kat arasında. Bu, her modelin iki kat daha güçlü olduğu veya her araştırmacının işini yarı sürede bitirdiği anlamına gelmiyor; karşılaştırılan şey zaman içindeki ilerleme hızı.
İnsan desteği ile tam otomasyon aynı değil
Araştırmacılar, 12 Ağustos-29 Ekim 2026 arasında şirket içi ölçümleri ve çalışan görüşmelerini inceledi. Bulguların ağırlığı, insanların yapay zekadan yardım almasına dayanıyor. Model eğitiminin en önemli aşamalarında büyük ve tamamen özerk katkılar henüz doğrulanmış değil.
Anthropic, sonuçları destekleyen önemli kanıtların bir bölümünü kamuya açık rapordan çıkardı. METR, veriye erişim sınırlarının ve kolay ölçülen görevlerin gerçek dünyadaki ilerlemeyi olduğundan hızlı gösterebileceğini belirtiyor. Tersine, son gelişmelerin ölçümlere gecikmeli yansıması hızlanmayı düşük gösterebilir.
Anthropic kurucu ortaklarından Sam McCandlish de araştırmanın yapay zekayla hızlandığını kabul ediyor, ancak artışın tam boyutunu belirlemenin zor olduğunu söylüyor. Açıklamasında veri kısıtlamalarını ticari hassasiyet ve başka geliştiricilere hızlanma yolunu göstermeme gerekçeleriyle savundu.
Yorumlar
İlk yorumu siz yazın!
Yanıt: —