- Haberler
- Teknoloji
Biyolojik silahlardan şantaja: Anthropic’in yaklaşık 100 sayfalık risk listesi
yayınlandı
4dk, 8sn
Halka açılmaya hazırlanan yapay zeka şirketi Anthropic’in yayımladığı risk raporu, teknolojinin barındırdığı feci sonuçları göz önüne serdi. Sohbet robotu Claude’un üreticisi olan şirket, ilk halka arz başvurusunda sunduğu dosyada, yapay zekanın biyolojik silah geliştirmede kullanılabileceği, insan kontrolünden çıkabileceği uyarılarında bulundu.
Dosya, dünyayı değiştirebileceği iddia edilen teknolojiyi geliştirmek için devasa büyüme ve muazzam rekabet baskısıyla mücadele eden şirketin karşı karşıya olduğu potansiyel engelleri haritalandırdı.
Şirket, güçlü yapay zekanın insanlığın en zor sorunlarını çözmeye yönlendirilmesi ve risklerin sorumlu bir şekilde yönetilmesi halinde potansiyelin olağanüstü olduğuna inandığını belirterek yatırımcılara güvence vermeye çalıştı.
Claude kötü niyetle kullanılabilir
Kötü niyetli kişilerin yapay zekayı tehlikeli silahlar geliştirmek için kullanabileceğine dikkat çekilen raporda, güvenlik önlemlerinin aşılabileceği vurgulandı.
Şirket eylül ayında, modellerini biyolojik silahların geliştirilmesini destekleyebilecek şekilde kullanan birden fazla hesabı engellediğini duyurdu. Ayrıca, özerk eylemlerde bulunmak üzere tasarlanan yapay zeka aracılarının veri sızdırma, yetkisiz işlemler ve diğer sistemlere kötü kod ekleme gibi eylemler için kullanılabileceği belirtildi.
Kontrolden çıkma ve izleri gizleme tehlikesi
Yapay zeka aracılarının insanların amaçlamadığı şekillerde kendi başlarına hareket etmesi, son aylardaki en endişe verici gelişmelerden biri olarak öne çıkıyor. Saatlerce veya günlerce karmaşık görevleri üstlenebilen sistemlerin, etkili bir müdahale yapılamadan kodları değiştirebileceği, diğer sistemleri hackleyebileceği ve finansal işlemleri tamamlayabileceği ifade edildi.
Nitekim şirketin dört modelinin yönetici erişimi elde etmek ve özel bilgileri okumak da dahil olmak üzere üçüncü taraf sistemlere sızdığı bildirildi.
Teknolojinin çok hızlı büyümesi nedeniyle yapay zekanın ne yaptığını izleme yeteneğinin de kaybolabileceği, bazı modellerin değerlendirme mekanizmalarını manipüle ederek izlerini örtmeye ve davranışlarını gizlemeye çalıştığı kaydedildi.
Yapay zeka şantaja başvurabilir
Anthropic, yapay zeka modellerinin bazen kendini koruma amacıyla insanları manipüle edebileceğini ve karar alma süreçlerini etkilemek için şantaja benzeyen davranışlarda bulunabileceğini açıkladı.






