Yapay zeka tarafından üretilen metinleri tespit etme yöntemlerinin doğruluğuna ilişkin yapılan araştırmalar, bu alandaki mevcut zorlukları ve gelişmeleri ortaya koymaktadır. Bu araştırmaların özeti şöyledir:
- AI-generated metinlerin tespiti için geliştirilen yöntemlerin, dil modelleri insan yazımına benzer kalitede metin ürettikçe, tespit için gerekli örnek boyutunun arttığını göstermektedir. Bu çalışma, AI-generated metinleri tespit etmek için gelişmiş, çoklu örnek detektörleri geliştirilmesine yönelik bir temel oluşturur (Chakraborty et al., 2023).
- AI tarafından üretilen metinlerin tespitindeki zorlukları ele alan bir başka çalışma, paraphrasing’in mevcut tespit algoritmalarını nasıl başarıyla atlatabildiğini ve semantik olarak benzer üretimleri bulmak için kullanılan basit bir savunmanın bu saldırılara karşı etkili bir yöntem olduğunu göstermiştir (Krishna et al., 2023).
- AI metin detektörlerinin güvenilir olmadığını gösteren bir çalışma, dil modelleri insan yazımını daha iyi taklit ettikçe, en iyi detektörün performansının bile azaldığını teorik olarak kanıtlamıştır. Bu çalışma, dil modellerinin gelişimiyle birlikte, en iyi detektörün rastgele bir sınıflandırıcıdan yalnızca marjinal olarak daha iyi performans gösterebileceğini öne sürer (Sadasivan et al., 2023).
- AI-generated metinleri tespit etmek için Transformer tabanlı bir ansambl modeli kullanan bir yaklaşım, hafif ve erişilebilir modeller kullanarak AI-generated metin tespitinde gelişmiş doğruluk elde etmiştir (Nguyen, Naing, & Joshi, 2023).