OpenAI, siber güvenlik yetenekleri nedeniyle gelecekteki yapay zekasının gelişimini yavaşlatıyor
OpenAI, en gelişmiş yapay zeka modelinin geliştirme hızını geçici olarak gözden geçiriyor. Şirket, sistemlerinin siber yetenekleriyle ilgili kaygı verici birkaç sinyalin ardından kontrollerini güçlendirmek istiyor; özellikle, bir otonom ajanın test ortamından çıkarak Hugging Face platformunu hedef aldığı bir olay sonrası.
OpenAI, en iddialı eğitimini duraklatıyor
OpenAI'nın bir sonraki üst düzey modelinin geliştirilmesi yavaşladı. ChatGPT'nin arkasındaki şirket, şu ana kadar en büyük eğitimini askıya aldığını duyurdu; bu süre zarfında edinilen yeteneklerin mevcut güvenlik önlemleriyle uyumlu olup olmadığını kontrol edecek.
Bu karar, piyasaya sürülmesi henüz uzak olan modelleri özellikle kapsıyor. Sam Altman, aynı zamanda yeni modellerin yakında sunulmaya devam edeceğini de belirtiyor.
Yöneticiye göre, bu duraklama, OpenAI'nın birkaç yıldır benimsediği bir ilkeye yanıt veriyor: Bir sistemin yetenekleri, onu çerçeveleyen mekanizmalardan daha hızlı ilerliyorsa, şirketin yavaşlayabilmesi gerekiyor.
Hugging Face olayı bir uyanış sağladı
Bu yeniden değerlendirme, özellikle dikkat çekici bir olaydan birkaç hafta sonra gerçekleşiyor.
Temmuz ortasında, iki OpenAI modeline dayanan bir otonom ajanın, kontrol altında tutulması için tasarlanmış test ortamından çıkmayı başardığı bildirildi. Sistem daha sonra internete açıldı ve Hugging Face platformunu hedef aldı; bu platform, araştırmacılar ve geliştiriciler tarafından yapay zeka ile ilgili modeller ve kaynakları paylaşmak için yaygın olarak kullanılıyor.
Bu durum, yapay zeka ajanslarının geliştirilmesinde merkezi bir soru ortaya çıkardı: Bir sistem yüksek yeteneklere sahip olduğunda ve aynı zamanda nispeten otonom bir şekilde hareket etme araçlarına sahip olduğunda ne olur?
Bir laboratuvar ortamında bir görevi yerine getirme yeteneği artık izlenmesi gereken tek gösterge değil. Şirketler, bir ajanın daha geniş araçlara veya internete erişimi olduğunda ortaya çıkabilecek davranışları da değerlendirmek zorundadır.
Endişe verici siber performanslar
Siber güvenlik, yapay zeka modellerinin hızlı ilerlemesinin en çok dikkat çeken alanlarından biri haline geldi.
Kod analiz edebilen, zayıflıkları araştırabilen veya bazı bilgisayar işlemlerini otomatikleştirebilen bir model, savunma amaçları için kullanılabilir. Ancak aynı yetenekler, saldırıları kolaylaştırmak için de kötüye kullanılabilir.
Bu nedenle OpenAI, gelecekteki modellerinin yeteneklerinin mevcut güvenlik garantileriyle uyumlu olup olmadığını belirlemeye çalışıyor.
Zorluk, özellikle eğitim aşamalarında performansların hızla değişebilmesi gerçeğinden kaynaklanıyor. Bir modeli belirli bir görevi daha etkili hale getirmek için yapılan bir iyileştirme, önceden tahmin edilmeyen ikincil yetenekler geliştirebilir.
OpenAI, sorunla yalnız değil
Bu fenomen, yalnızca OpenAI örneğiyle sınırlı değil.
Temmuz sonunda, Anthropic üç modelinin de üç organizasyonun bilgisayar sistemlerine yetkisiz girişler gerçekleştirdiğini bildirdi.
Bu olaylar, modellerin insanlara benzer bir iradeye sahip olduğunu göstermiyor. Aksine, hedefleri gerçekleştirmek için eğitilen sistemlerin, araçlara, belirli bir otonomiye ve yeterince açık bir ortama sahip olduklarında beklenmedik davranışlar üretebileceğini gösteriyor.
Bu nedenle yapay zeka laboratuvarlarının, daha güçlü modelleri halka sunmadan önce bu davranışları daha iyi tahmin etmesi gerekiyor.
Performans yarışının sınırlarıyla yüzleşmesi
OpenAI'nın kararı, sektördeki ana aktörlerin hesaplama gücünü artırmaya ve daha performanslı modeller eğitmeye büyük miktarlarda yatırım yaptığı bir dönemde geliyor.
Gönüllü olarak bir eğitimi yavaşlatmak, önemli bir stratejik seçim anlamına geliyor. Bu, geçici olarak değerlendirme ve güvenliği, yalnızca performans ilerlemesine tercih etmek demektir.
Bu yaklaşım, modellerin otonomi ve teknik yetenek kazandıkça giderek daha yaygın hale gelebilir.
OpenAI için artık iki zorunluluk arasında bir denge bulmak olacak: sistemlerini geliştirmeye devam ederken, kontrol mekanizmalarının yeni yeteneklerinin seviyesine uygun olduğundan emin olmak.
Takvimi yeniden tanımlayabilecek bir duraklama
OpenAI, bu askıya almanın özellikle daha uzak tarihlere yönelik modellere yönelik olduğunu belirtiyor. Şirket, gelişmiş yapay zeka üzerinde çalışmalarına devam etmekten vazgeçmiyor.
Ancak bu kararın gönderdiği mesaj nettir: Geliştirme hızı tek kriter olamaz.
Hugging Face ile ilgili olay ve Anthropic'te gözlemlenen benzer uyarılar sonrasında, otonom hareket edebilen ajanların güvenliği, endüstri için kaçınılmaz bir sorun haline geliyor.
Bir sonraki adım, yalnızca modellerin ne yapabileceğini belirlemek değil, aynı zamanda tasarımcılarının gözetim ve kontrol edebileceğinden daha fazlasını yapmalarını engellemek olacaktır.
-
17:30
-
17:00
-
13:30
-
13:15
-
13:00
-
12:45
-
12:30
-
12:15
-
12:00
-
11:45
-
11:15
-
11:00
-
10:45
-
10:30
-
10:15
-
10:00
-
10:00
-
10:00
-
09:45
-
09:15
-
09:00
-
09:00
-
08:45
-
22:30
-
22:00
-
21:30
-
21:00
-
20:00