Yapay Zekâ Tespit Araçları Ne Kadar Güvenilir? Haksız Suçlamaya Karşı Ne Yapmalı?

Yapay zekâ tespit araçları nasıl çalışır, neden yanılır, yabancı dilde yazanlar neden daha çok risk altında ve metniniz haksız yere ‘yapay zekâ yazmış’ denirse ne yapmalısınız?

2 dk okuma

“Metninizin yüzde 60’ı yapay zekâ tarafından yazılmış görünüyor.” Bu cümle, son iki yılda birçok öğrencinin ve araştırmacının hiç beklemediği bir anda karşısına çıktı. Bazıları gerçekten metni bir araca yazdırmıştı. Bazıları ise her kelimeyi kendi yazmıştı. Sorun da tam burada: tespit araçları, bu iki durumu her zaman ayırt edemiyor.

Bu araçlar nasıl çalışır?

Yapay zekâ tespit araçları metni “okuyup anlamaz”. Metnin istatistiksel özelliklerine bakar: kelime seçimlerinin ne kadar öngörülebilir olduğu, cümle uzunluklarının ne kadar düzenli olduğu gibi. Dil modelleri genellikle en olası kelimeyi seçtiği için, çok düzenli ve öngörülebilir metinler “yapay” sayılmaya eğilimlidir.

Bunun doğal sonucu: öngörülebilir yazan insan da yapay zekâ gibi görünebilir. Kalıp ifadelerle dolu yöntem bölümleri, standart akademik dil, kısa ve yalın cümleler bu riski artırır.

Neden yanılıyorlar?

  • Yanlış pozitif: İnsan yazısını yapay zekâ diye işaretlemek. 2023’te Patterns dergisinde yayımlanan bir çalışma, birden fazla tespit aracının İngilizceyi anadili olarak konuşmayan yazarların metinlerini belirgin biçimde daha sık “yapay zekâ” olarak işaretlediğini gösterdi. Türkiye’deki araştırmacıların büyük kısmı İngilizce yazarken tam bu gruptadır.
  • Yanlış negatif: Yapay zekâ metnini kaçırmak. Küçük düzenlemeler ya da yeniden yazdırma, birçok aracı kolayca yanıltabiliyor.
  • Üreticinin kendisi bile emin değil: OpenAI, kendi geliştirdiği metin sınıflandırıcısını düşük doğruluk gerekçesiyle 2023’te kullanımdan kaldırdı.

Bu bulgulardan çıkan sonuç açık: tespit puanı bir ipucu olabilir, ama tek başına kanıt değildir.

Kurumlar ne diyor?

Yayıncılar ve kurumlar giderek aynı ilkeyi benimsiyor: tespit aracının sonucu, tek başına karar gerekçesi olmamalı; editoryal ve akademik değerlendirmeyle birlikte ele alınmalı.

Metniniz haksız yere işaretlenirse ne yapmalısınız?

  1. Panik yapmayın, sonucu yazılı isteyin. Hangi aracın kullanıldığını, hangi bölümlerin işaretlendiğini ve puanın ne olduğunu öğrenin.
  2. Yazım sürecinizin izini gösterin. Belge sürüm geçmişi (Word ve Google Docs bunu tutar), eski taslaklar, notlar, veri dosyaları ve e-postalar, metni zaman içinde sizin ürettiğinizi gösteren en güçlü kanıtlardır.
  3. Beyanınızı hatırlatın. Dil düzeltmesi için araç kullandıysanız ve bunu doğru biçimde beyan ettiyseniz, bu kullanım zaten şeffaftır.
  4. Sözlü savunma önerin. Çalışmanızı, yöntem kararlarınızı ve kaynaklarınızı ayrıntılı anlatabilmek, metnin size ait olduğunun doğal kanıtıdır.
  5. Bilimsel literatüre başvurun. Yanlış pozitif oranları ve dil önyargısı üzerine yayımlanmış çalışmaları savunmanızda kullanabilirsiniz.

Önleyici öneriler

  • Yazarken sürüm geçmişini açık tutun ve ara taslakları saklayın.
  • Yapay zekâ kullandıysanız baştan beyan edin; beyan edilmiş kullanım bir ihlal değil, şeffaflıktır.
  • Metninizi bir tespit aracından geçirip “insanlaştırma” araçlarıyla oynamak yerine, kendi sesinizle yazmaya zaman ayırın; bu hem riski azaltır hem metni güçlendirir.

Kaynaklar

  • Liang, W., Yuksekgonul, M., Mao, Y., Wu, E., Zou, J. (2023). GPT detectors are biased against non-native English writers. Patterns, 4(7).
  • OpenAI, New AI classifier for indicating AI-written text (Temmuz 2023 güncellemesi: düşük doğruluk nedeniyle kullanımdan kaldırıldı)

Bu yazı bilgilendirme amaçlıdır. Kurumunuzun akademik dürüstlük süreçleri için ilgili yönerge ve etik kurul kararları esastır.

Özgür Yayınları

Kitabınızı ya da kitap bölümünüzü hakemli ve açık erişimli olarak yayımlamak mı istiyorsunuz? Özgür Yayınları’nda her kitap ve bölüm DOI ile kayıt altına alınır.

Özgür Yayınları’nı ziyaret edin →