Gündeme dön

Claude'un Kendi Ar-Ge'sini Yönettiği Gün: Anthropic'in İç Sistemleri

Birleşmiş Milletler Güvenlik Konseyi'nde konuşan Altman ve Amodei, yapay zekânın iki temel riskini tekrarladı. Aynı hafta Anthropic, Claude'un kendi araştırmalarının dörtte birini yönlettiğini ve 21 saatte yeni bir enzim sistemi bulduğunu açıkladı.

Nodesdaily’e aktarım: (UTC+03:00)
YouTube'da izle — zs8ghoZgiKg
Okuma seçenekleri

Bu tarayıcıda cihazdan sesli okuma kullanılamıyor.

Kavram merceği

Bu görünümde geçen teknik kavramlardan birini seç. Genel tanımı, öğretici örneği ve haberdeki kullanımını birlikte oku.

Bu görünümde sözlüğümüzdeki kavramlardan biri bulunmadı. Sözlük henüz tüm terimleri kapsamıyor.

Bir haftanın haberleri, yapay zekâ sektörünün iki yüzünü yan yana koyuyor. Aynı günlerde dünyanın en büyük yapay zekâ şirketlerinin yöneticileri Birleşmiş Milletler'de insan kontrolünün sürmesi gerektiğini savunurken, bu şirketlerden biri kendi araştırma departmanının dörtte birini yapay zekâya devrettiğini duyuruyor. Bir tarafta düzenleme çağrısı, diğer tarafta otomasyonun günlük iş haline gelmesi. Aradaki mesafe, sektörün en sıkı tartışılan sorusuna somut bir cevap veriyor.

Güvenlik Konseyi'nde iki temel risk

Oturumun ilk konuşmacısı OpenAI'nin yöneticisi Sam Altman oldu. On dakika süren konuşmasında yapay zekânın tıp, eğitim ve ekonomik üretkenlik alanlarında büyük kazançlar vaat ettiğini, ancak sistemler otonom hale geldikçe iki riskin öne çıktığını söyledi. Birincisi kontrolün kaybedilmesi : modeller kendi gelişimlerini sürdürdüğünde insan takibine ihtiyaç duymayacak hale gelebilir. İkincisi gücün tek elde toplanması , yani teknolojinin az sayıda şirket ve ülkede yoğunlaşması.

Altman'ın çözüm önerisi bir fren değil, bir dengeydi. İnsan merkezli kararların sürekli devam etmesi gerektiğini, insani yargının devre dışı bırakılmaması gerektiğini vurguladı. Onun en net cümlesi, en kritik kararların San Francisco'daki laboratuvarlarda verilmemesi gerektiğiydi: eğer yapay zekâ demokratik olacaksa halkın kendisi hakkında, halka karşı sorumlu kurumlar eliyle karar vermesi gerekiyordu. Ayrıca uluslararası standartlar, ortak risk değerlendirme protokolleri ve hızlı olay bildirimi sistemleri kurulmasını istedi.

Anthropic'in yöneticisi Dario Amodei ise konuşmasını video bağlantısıyla verdi ve aynı hizaya daha sert bir çerçeve koydu. Aynı iki riski tekrarladı ama isimlerini değiştirdi. Birincisi kötüye kullanım : biyolojik silah üretmek gibi işlerde model geliştiricileri bertaraf edilebilecek noktaya gelebilir. İkincisi kontrol kaybı. Amodei bu arada yapay zekânın matematik alanında ne kadar hızlı ilerlediğini anlatarak sınırların yaklaştığını savundu: önceki yıllarda ilkokul düzeyinde sorular çözülebilirken bugün milyon dolar düzeyindeki açık problemler çözülebiliyor.

Matematik ilerlemesi, Amodei'nin salık ettiği yavaşlamayla ilginç bir gerilim oluşturdu. Aynı hafta OpenAI, iç modelinin bir buçuk aylık eğitimi sonrasında yüzden fazla açık matematik problemini çözdüğünü açıkladı. Daha önce Navier-Stokes problemine çözüm getirildiği de söylenmişti. Bazı matematikçiler bu sonuçların aceleyle açıklanmasının sorun yaratabileceğini, doğruluğu belirsiz manşetlerin sonradan tutmayabileceğini ifade etti. OpenAI'nin bu kaygıya verdiği yanıt, Princeton'daki İleri Araştırmalar Enstitüsü bünyesinde bağımsız bir danışma grubu kurmak oldu.

Bu danışma grubu, kurumun açıklamasına göre karar yetkisine sahip değil. Dokuz matematikçiden oluşan grup, sonuçların önemini değerlendirecek ve ne zaman yayımlanacağı konusunda öneri sunacak, ücret almayacak ve kendi üyeliğini belirleyebilecek. Ancak araştırmanın hızını yavaşlatma yetkisi kendilerinde değil. Enstitünün vurguladığı bu ayrım, modelin ürettiği bilgiyi kimin denetleyeceği sorusunun en somut hâli. Kurumsal bir güvence, denetimsiz bir hız.

21 saatte bulunan enzim sistemi

Haftanın en çarpıcı gelişmesi ise Anthropic'in biyoloji alanındaydı. Şirket, Claude'un insanlara bulaşan patojenlerle çalışmayan kendi laboratuvarında, devasa bir dizi veritabanında RNA'yı DNA'ya kopyalayan enzimleri taradığını açıkladı. Bu enzimler, HIV gibi virüslerin kendi kopyalarını üretmek için kullandığı moleküllerden biri. Model yaklaşık 950 oturumda 21,5 saat boyunca 1,9 milyar protein kümesini taradı ve ilk kez bir enzimin yanında, kendisine benzeyen bir yeni genetik sistem buldu.

Bulunan sistem, CRISPR'daki gibi düzenli aralıklarla tekrarlanan DNA dizileriyle ve ona eşlik eden yardımcı bir genle kurulu; şirket buna kısaca ART, yani dizi eşlikli enzim sistemi adını verdi. Enzim bilimsel olarak yeni değil, daha önceki çalışmalarda tanımlanmıştı. Yenilik olan, modelin enzimin işlevini değil, etrafındaki tekrarlı yapıyı ilk fark etmesiydi. CRISPR'ın mucidi olarak kabul edilen Feng Zhang ön yazıyı inceledi ve bulguyu ilginç bulduğunu, daha fazla araştırmayı hak ettiğini belirtti.

Bulgunun en çarpıcı tarafı tekrarlanabilirlik. Anthropic aynı kampanyayı on kez daha çalıştırdı; hiçbir denemede ajanlar enzimin önündeki DNA'yı okuyup tekrarları göremedi. Doğrudan DNA verildiğinde en güçlü modeller denemelerin en az yüzde doğsanında diziyi tarif ediyordu, dosya ve araçlarla çalışınca oran yüzde otuz ikinin altına iniyordu. Yani keşif modelin zekâsından çok, onu doğru yöne bakmaya yönlten isteminin tesadüfinde.

Haftanın ikinci laboratuvar hikâyesi robotlarla ilgiliydi. Figure, gövde kontrolü sinir ağı Helix 2.5'in daha önce hiç görmediği otuz evde, hiçbir ortamdan veri toplamadan başarıyla çalıştığını açıkladı. Robot dağınık oyuncakları topladı, havluları katladı, yatak yaptı. Başarı, o evlerdeki tüm işleri eksiksiz bitirmek için yapılan katı bir kıyasla ölçüldü ve yüzde ellidi aştı; aynı görev için insandan toplanmış devasa hareket verisiyle önceden eğitilmiş modelin katkısı, sıfırdan eğitilene göre altı katı aşık. Verinin kaynağı da bir dönüm noktası: robot eğitimi için evlere kamera taşıyan insanlara ödeme yapılıyor ve bu kayıt giderek kıymetli hâle geliyor.

Gündelik hayatın yeni yüzü tüketici tarafında. Meta, kamera taşımayan kişisel yapay zekâ ajanı Muse'yi eylül başında piyasaya verdi; model, uygulama üzerinden veya doğrudan WhatsApp üzerinden konuşularak e-posta gönderme, seyahat ayırtma ve ödeme yapma gibi işleri yürütüyor. Zaman alan görevlerde uygulama kapatıldığında da çalışmaya devam ediyor, onay gereken noktaya gelince geri dönüyor. Görsel modelin üzerinde herhangi bir kısıtlama olmaması, yani güvenliği yazılımsal önlemlerle kurma hedefi, ajanları masaüstü asistanından masabaşı çalışan operasyon aracına geçiştiriyor.

Görsel: nodesdaily AI

Videodaki anahtar anlar

  1. Birleşmiş Milletler oturumu ve iki temel risk
  2. Altman'dan kararların laboratuvarlarda verilmemesi çağrısı
  3. Amodei'nin biyolojik silah anlaşması önerisi
  4. Claude'un 950 ajanla 21,5 saatlik tarama
  5. Dizi eşlikli enzim sistemi adaylarının bulunması
  6. Feng Zhang'ın ön yazı değerlendirmesi
  7. Otuz evde yüzde 56 başarı ve altı kat fark
  8. Anthropic'in yüzde 26 oranının açıklanması
  9. Otomasyon seviyeleri ve insan onayının sınırı
  10. METR değerlendirmesinde 1,5 kat hızlanma tahmini
  11. OpenAI'nin Princeton danışma grubu
  12. Figure'ın robot verisi için insan emeği meselesi
  13. Meta Muse'un WhatsApp üzerinden görev yürütmesi

AI yorumu

"Aynı hafta iki rakip şirketin CEO'su dünyaya yavaşlamak derken kendi laboratuvarında yapay zekânın kendi işini yapmasına izin verdi. Söylem ile pratiğin bu kadar açık ayrışması, güvenlik söyleminin şirket pratiğine ne kadar sıkı bağlandığını gösteren en iyi test olsa gerek."

AI değerlendirmesi

En güçlü karşı görüş, Anthropic'in biyoloji bulgusunun ne kadar gerçekten yeni olduğu üzerine. CRISPR araştırmacılarından biri, yayımlanan sonucu rutin genom madenciliği olarak nitelendirdi. Model enzimi yeniden bulmadı; daha önce raporlanmış bir enzimin yanındaki tekrarlı yapıyı fark etti. Bu gerçekten önemli bir yetenek, ancak bir keşif ile keşfin arkasındaki sürecin büyüklüğü aynı şey değil.

Aynı şüphe 26 sayısının etrafında da yoğunlaşıyor. Claude'un yüzde 26'sını "yönettiği" ifadesi, modelin görevi uçtan uca bitirip insanın denetlediği bir eşik tanımına dayanıyor. Şirket kendisi hiçbir ölçülen alanda modelin tamamen bağımsız çalışmadığını söylüyor. Yani bu bir otonomi kaydı değil, insan onayının maliyetini düşürme kaydı.

Eksik kalan şey gerçek bir maliyet tablosu. Ajanlar için harcanan token maliyeti, insan denetimine ayrılan saat, hataların yakalandığı andaki toplam süre hiçbir açıklamada yer almıyor. Bunlar olmadan yüzde 26 ile yüzde 1 arasındaki sıçrama, ne kadar verimlilik kazandığı sorusunu yanıtlamıyor; yalnızca modelin nasıl konumlandırıldığını anlatıyor.

Okur için pratik çıkarım sade. Yapay zekâ şirketleri denetimi kamusal söylemde savunurken kendi laboratuvarlarında otomasyonu ölçeklemeye devam ediyor. Bu iki hareketi aynı anda okumak, gelen her duyuru için sorulacak tek soruyu veriyor: bu modeli kim denetliyor, denetim ne sıklıkla oluyor, denetimden çıkan sonuçlar ne kadar sık yayımlanıyor.

Kaynaklar

12 bağlantı; 4 tanesi 11 başka haberde de kullanılıyor. Aynı bağlantıyı paylaşan haberler birbirini doğrulamış sayılmaz; kaynağın kökeni bağlantı sayısından çıkarılmaz.

claude · anthropic · yapay zeka güvenliği · ajan otonomisi · crispr · insansı robotlar

Konuyu takip et

Bu haberden önce

Aynı olayla editör tarafından ilişkilendirilmiş önceki haberlerden kısa bir okuma sırası.

Kanıt ve kaynaklar

İzinli kaynak metnini, sürümünü ve köken bilgisini incele.

KAYNAKLARLA OKU

Bu haberi açalım.

Hesap kontrol ediliyor…