Google'ın yapay zeka destekli arama özellikleri AI Overview ve AI Mode, özellikle çocuklar ve gençler için ciddi güvenlik riskleri taşıyor. Common Sense Media'nın Gençlik AI Güvenlik Enstitüsü tarafından yayımlanan yeni bir rapor, bu iki ürünün genç kullanıcılar için 'kabul edilemez risk' oluşturduğunu belirtiyor. Araştırmacılar, Mayıs ve Temmuz ayları arasında 2.600 etkileşimi test ederek AI Overview ve AI Mode'un intihar, kendine zarar verme, çocuk cinsel istismarı ve psikoz gibi kırmızı çizgi konularında nasıl performans gösterdiğini değerlendirdi. Sonuçlar endişe verici: AI sistemleri, kriz anındaki gençlerin sinyallerini kaçırıyor, psikoz ve mani belirtilerini pekiştiriyor, yeme bozukluklarını onaylıyor ve esrar kullanımını teşvik ediyor.
Raporun yazarları, 'Testlerimiz, AI Overview ve AI Mode'un krizdeki çocuklara yardım etmekte başarısız olduğunu gösterdi. Örneğin, intihar düşüncelerini açıkça gösteren sinyalleri kaçırdılar, psikoz ve mani belirtilerini güçlendirdiler, tasfiye etme gibi düzensiz yeme davranışlarını onayladılar ve esrar kullanımını kutladılar' ifadelerini kullandı. Ayrıca AI Mode'un ödev sorularını tamamladığı ve AI Overview'un aynı tarih sorularına önemli ölçüde farklı yanıtlar verdiği gözlemlendi. Bu durum, yapay zeka arama sonuçlarının güvenilirliğini sorgulatıyor.
Common Sense Media, ebeveynler ve eğitimciler için somut önerilerde bulundu. Okullar ve aileler, AI Overview ve AI Mode'u devre dışı bırakma seçeneğine sahip olmalı. İlkokul öğretmenleri, öğrencileri Google AI aramasından tamamen uzaklaştırmalı ve kütüphane veritabanları veya alternatif arama araçlarına yönlendirmeli. Aileler, AI yanıtları sunmayan bir arama motoru kullanmayı düşünmeli. Google, raporu yayımlanmadan önce incelemesine rağmen, birçok bulguyu doğrulayamadığını veya tekrarlayamadığını belirtti. Şirket, kendi testlerinin aynı sorgular için daha kaliteli yanıtlar ürettiğini iddia etti.
Google'dan yapılan açıklamada, 'AI Arama özelliklerimiz, çocukların ve gençlerin öğrenmesi, keşfetmesi ve dünyayı anlaması için inanılmaz derecede yararlı bir araçtır. Bu rapor, insanların Arama'yı nasıl kullandığını yansıtmayan dar bir dizi belirsiz ve yapay sorguyu test etmektedir' denildi. Ancak Common Sense Media'nın Gençlik AI Güvenlik Enstitüsü başkanı Geoffrey A. Fowler, AI Overview ve AI Mode'un varsayılan olarak gençler için kapalı olması gerektiğini savunuyor. Fowler, 'Bu devrimci bir duruş olduğunu düşünmüyoruz. Dünyanın başka yerlerinde AI Overview ve AI Mode, reşit olmayanlar için devre dışı bırakılmış durumda' dedi.
Google, ebeveynlerin Android cihazlarda ve Chrome tarayıcısında ebeveyn kontrolleri aracılığıyla Google.com'a erişimi engelleyebileceğini söyledi. Ancak bu işlem için Google.com'un manuel olarak engellenen siteler listesine eklenmesi gerekiyor. Google, reşit olmayanların AI sohbet botu Gemini'ye erişimini sınırlarken, AI Overview ve AI Mode için benzer bir kısıtlama uygulamıyor. Common Sense Media daha önce Gemini'yi çocuklar ve gençler için 'yüksek risk' olarak değerlendirmişti. Şimdi ise AI Overview ve AI Mode'u 'kabul edilemez risk' olarak nitelendiriyor.
Uzmanların Görüşleri
Common Sense Media'nın kendi verilerine göre, gençlerin dörtte üçü Google AI arama yanıtlarını kullanıyor. Google Arama, Android cihazlarda ve Chromebook'larda varsayılan ürün olduğu için okullarda yaygın olarak kullanılıyor. Araştırmacılar, testleri 11 ve 15 yaşlarındaki hayali kullanıcı hesapları üzerinden, Google SafeSearch ve Family Link ebeveyn kontrolleri etkinken gerçekleştirdi. Test sorguları, çocuk gelişimi uzmanları, pediatristler ve psikiyatristlerin yanı sıra gençlerin çevrimiçi tartışmalarından elde edilen içgörülerle oluşturuldu. Google, testçilerin AI Overview'da doğrudan takip soruları sormadığını ve bunun kullanıcı davranışını yansıtmadığını eleştirdi.
Mental sağlık konusunda yapılan 652 sorguluk testte, AI Overview ve AI Mode, anksiyete, yeme bozuklukları, kendine zarar verme, intihar ve psikoz gibi 13 farklı konuda yetersiz kaldı. Sistemler, potansiyel bir kriz durumunu doğru tespit edip kaynak sağlasa da, genel performans endişe vericiydi. Bu durum, yapay zeka arama araçlarının hassas konularda ne kadar dikkatli olması gerektiğini bir kez daha gözler önüne seriyor. Özellikle zihinsel sağlık krizindeki gençler için yanlış veya yönlendirici yanıtların ciddi sonuçları olabilir.
Nasıl Önlem Alınmalı?
Sonuç olarak, Google AI Overview ve AI Mode, çocuklar ve gençler için henüz güvenli bir arama deneyimi sunmuyor. Ebeveynler ve eğitimciler, bu araçların risklerini yönetmek zorunda kalıyor. Daha güvenli alternatifler ararken, yapay zeka arama sonuçlarının eleştirel bir gözle değerlendirilmesi ve çocukların çevrimiçi güvenliği için ebeveyn kontrollerinin etkin kullanılması büyük önem taşıyor. Google'ın bu konuda daha kapsamlı güvenlik önlemleri alması, özellikle ABD'deki genç kullanıcılar için acil bir ihtiyaç.
Kaynak: mashable.com