Araştırma: Yapay zeka anketlerde insan yanıtlarını mükemmele yakın taklit ediyor

Yapay zekâ (AI), yeni bir araştırmaya göre çevrimiçi kamuoyu anketlerinde insan yanıtlarını botlardan ayırt etmeyi neredeyse imkânsız hâle getiriyor.

Proceedings of the National Academy of Sciences (PNAS) dergisinde pazartesi günü yayımlanan Dartmouth Üniversitesi çalışması, büyük dil modellerinin (LLM'lerin) kamuoyu anketlerini büyük ölçekte bozabileceğini ortaya koyuyor.

Çalışmada, “İnsan kişiliklerini taklit edebilir, mevcut tespit yöntemlerini atlatabilir ve çevrimiçi anket sonuçlarını sistematik olarak saptıracak şekilde son derece kolay biçimde programlanabilirler,” deniliyor.

Bulgular, “veri altyapımızda kritik bir zafiyet” bulunduğunu ve “denetimsiz çevrimiçi araştırma için potansiyel bir varoluşsal tehdit” oluşturduğunu ortaya koyuyor.

Anketlere AI müdahalesi, kritik seçimleri daha da karmaşık hâle getirebilir. Avrupa seçimlerinde, çevrimiçi izleme grupları tarafından AI ile beslenen dezenformasyon kampanyaları işaret ediliyor.

Sistemi kandırmak

Çevrimiçi anket yazılımlarının zafiyetini test etmek için Westwood, 500 kelimelik bir yönergeyle çalışan basit bir AI aracı olan “özerk sentetik katılımcı”yı tasarlayıp geliştirdi.

Her anket için araç, rastgele atanan bilgilere – yaş, cinsiyet, ırk, eğitim, gelir ve ikamet ettiği eyalet dahil – dayalı bir demografik kişilik benimsiyordu.

Bu kişilikle, gerçekçi okuma sürelerini taklit ediyor, insanlara özgü fare hareketleri üretiyor ve açık uçlu yanıtları tek tek tuş vurarak yazıyordu; üstelik inandırıcı yazım hataları ve düzeltmeler de yapıyordu.

43 binden fazla testte, araç sistemlerin yüzde 99,8'ini insan olduğuna inandırdı. Mantık sorularında hiç hata yapmadı ve reCAPTCHA gibi otomatik yanıtları tespit etmek için tasarlanan geleneksel önlemleri aştı.

Westwood, “Bunlar ilkel botlar değil,” dedi. “Her soruyu düşünerek yanıtlıyor ve gerçek, dikkatli insanlar gibi davranıyor; veriyi bütünüyle meşru gösteriyor”.

Anket sonuçlarına hâlâ güvenebilir miyiz?

Çalışma, pratik siyasi anketlerin kırılganlığını inceledi ve örnek olarak 2024 ABD başkanlık seçimini ele aldı.

Westwood, kampanyanın kritik son haftasında, en üst düzey yedi ulusal ankette öngörülen sonucu tersine çevirmek için yalnızca 10 ila 52 sahte AI yanıtının yeterli olacağını buldu.

Bu otomatik katılımcıların her birini devreye almak 5 ABD senti (4 euro senti) kadar ucuza mal oluyordu.

Testlerde botlar, Rusça, Mandarin ya da Korece programlandıklarında bile kusursuz İngilizce yanıtlar üretti. Çalışma, bunun yabancı aktörler tarafından kolayca istismar edilebileceği anlamına geldiği ve bunların bir kısmının tespiti atlatmak için daha da sofistike araçlar tasarlayacak kaynaklara sahip olduğu uyarısında bulunuyor.

Bilimsel araştırmalar da anket verilerine büyük ölçüde dayanıyor; her yıl çevrimiçi veri toplama platformlarından elde edilen verilere dayanan binlerce hakemli çalışma yayımlanıyor.

Westwood, “Anket verileri botlarla kirlenirse AI tüm bilgi ekosistemini zehirleyebilir,” dedi.

Çalışması, bilim camiasının, gelişmiş AI araçlarınca manipüle edilemeyecek yeni veri toplama yöntemlerini acilen geliştirmesi gerektiğini savunuyor.

“Gerçek insan katılımını doğrulayacak teknoloji mevcut; bunu hayata geçirmek için sadece iradeye ihtiyacımız var,” diye konuştu

“Şimdi harekete geçersek, hem anketlerin bütünlüğünü hem de sağladıkları demokratik hesap verebilirliği koruyabiliriz.”