Bir öğretmen, yıllardır tanıdığı bir öğrencisinden kusursuz akan, düzenli paragraflı, ama nedense hiç ona benzemeyen bir ödev alıyor. Bir editör, serbest yazarından gelen metinde her bölümün aynı ritimle açılıp kapandığını fark ediyor. İkisi de aynı soruyu soruyor: Bu metni yapay zekâ mı yazdı? İnternette bu soruya "şu siteye yapıştırın, yüzdeyi görün" diye cevap veren çok araç var. Bu yazı, o yüzdeye neden tek başına güvenilmemesi gerektiğini ve onun yerine nelere bakılabileceğini anlatıyor. Amaç birini suçlamak değil, doğru soruyu sorabilmek.
Önce kötü haber: Kesin bir test yok
Yapay zekâ tespit araçları genellikle metnin istatistiksel özelliklerine bakar: kelime seçimlerinin ne kadar "tahmin edilebilir" olduğu, cümle uzunluklarının ne kadar düzenli dağıldığı gibi. Dil modelleri, bir sonraki kelimeyi olasılığa göre seçtikleri için ürettikleri metin çoğu zaman bu ölçütlerde belirli bir düzen gösterir. Sorun şu ki insan yazısı da aynı düzeni gösterebilir.
- Yanlış pozitifler: Resmî, kalıplı bir dille yazılmış insan metinleri, örneğin hukuki metinler, ansiklopedi maddeleri ya da standart raporlar, yapay zekâ ürünü olarak işaretlenebilir.
- Anadili olmayan yazarlar: Bir dili ikinci dil olarak kullananlar daha sınırlı bir kelime dağarcığıyla, daha öngörülebilir yapılar kurabilir. Bu, tespit araçlarında haksız işaretlemelere yol açabilir.
- Kolay atlatma: Yapay zekâ ile yazılmış bir metin, birkaç cümlesi elle değiştirilerek ya da başka bir araçla yeniden ifade edilerek tespit skorunu kolayca düşürebilir.
- Türkçe için ek belirsizlik: Araçların çoğu ağırlıklı olarak İngilizce veriyle geliştirilmiştir. Türkçe gibi sondan eklemeli dillerde istatistiksel örüntüler farklıdır; bu dillerde güvenilirlik daha da tartışmalıdır.
Bu yüzden bir tespit aracının verdiği yüzde, bir kanıt değil, en fazla bir "yakından bak" işaretidir. Bir öğrenciyi, çalışanı ya da yazarı yalnızca bu skora dayanarak suçlamak ciddi haksızlıklara yol açabilir.
Metnin kendisinde görülebilecek işaretler
Aşağıdaki işaretlerin hiçbiri tek başına bir şey kanıtlamaz. Hepsi iyi ya da kötü insan yazısında da görülebilir. Ancak birkaçı bir arada ve yazarın bilinen üslubuyla çelişecek şekilde ortaya çıkıyorsa, sorular sormak için makul bir zemin oluşur.
| İşaret | Nasıl görünür | Neden yanıltıcı olabilir |
|---|---|---|
| Somut ayrıntı eksikliği | Genel doğrular, ama yazarın kendi deneyiminden hiçbir iz yok | Aceleyle yazılmış insan metinleri de genel kalabilir |
| Aşırı dengeli yapı | Her bölüm aynı uzunlukta, her paragraf bir girişle açılıp bir özetle kapanıyor | Şablonla çalışmaya alışık yazarlar da böyle yazar |
| Kaynak tutarsızlıkları | Var olmayan kitaplar, yanlış yıllar, bulunamayan makaleler | İnsanlar da yanlış kaynak gösterebilir, ama uydurma kaynak güçlü bir işarettir |
| Bağlamdan kopukluk | Ödevin ya da görevin özel koşullarına değinmeyen, her yere uyacak bir metin | Talimatı yanlış anlayan biri de böyle yazabilir |
| Üslup kırılması | Kişinin önceki yazılarından belirgin şekilde farklı bir ses ve kelime dağarcığı | İnsanlar gelişir; bir editör ya da arkadaş yardımı da üslubu değiştirir |
| Kalıp ifadeler | Sık tekrarlanan geçiş cümleleri, abartılı sıfatlar, her konuyu "çok boyutlu" bulan bir dil | Bu ifadeler yapay zekâdan önce de vardı |
Kaynak tutarsızlığı satırı özellikle önemlidir, çünkü doğrulanabilir tek işaret odur. Metinde atıf yapılan bir kitabın, makalenin ya da istatistiğin gerçekten var olup olmadığını kontrol etmek, üslup tahmini yürütmekten çok daha sağlam bir zemindir. Dil modellerinin neden gerçek görünen ama var olmayan kaynaklar üretebildiğini halüsinasyonun anatomisini anlattığımız yazıda ele aldık.
Pratik bir kaynak kontrolü nasıl yapılır?
Metinde geçen her atfı tek tek doğrulamak zaman alır; bunun yerine örneklem yöntemiyle başlayın. Metinden rastgele üç kaynak seçin ve her biri için şunları kontrol edin: Yazar gerçekten var mı ve bu alanda çalışıyor mu? Yayın, belirtilen dergide ya da yayınevinde, belirtilen yılda yayımlanmış mı? Metinde kaynağa atfedilen iddia, kaynağın kendisinde gerçekten geçiyor mu? Üçünden biri bile bulunamıyorsa, geri kalanları da kontrol etmek gerekir. Kütüphane katalogları, akademik arama motorları ve yayıncıların kendi siteleri bu iş için en güvenilir yerlerdir. Sonuçta bulunamayan bir kaynak yapay zekâ kullanımını kesin olarak kanıtlamaz, ama metnin güvenilirliği hakkında kesin bir şey söyler: o iddia desteksizdir.
Metnin dışına bakmak: Süreç kanıtları
Bir metnin nasıl yazıldığını anlamanın en güvenilir yolu, sonucun kendisine değil, sürecine bakmaktır. Eğitimde ve editoryal işlerde giderek daha fazla kullanılan birkaç yöntem var:
Taslak geçmişi
Çevrim içi belge düzenleyicilerin çoğu sürüm geçmişi tutar. Bir metnin saatler ya da günler içinde, silinip yeniden yazılarak geliştiği görülebilir. Tek seferde bütün hâlinde yapıştırılmış bir metin ise soru işareti doğurur; ama bunun da masum açıklamaları olabilir, örneğin başka bir programda yazıp kopyalamak.
Ara teslimler
Öğretmenler için etkili bir yöntem, ödevi tek parça yerine aşamalı istemektir: önce konu önerisi, sonra kaynak listesi, sonra taslak, en son nihai metin. Her aşamada öğrencinin düşüncesinin nasıl geliştiği görünür olur.
Sözlü takip
En basit ve en adil yöntem, yazarla metin hakkında konuşmaktır. "Bu paragrafta neden bu örneği seçtin?", "Bu kaynağı nerede buldun?", "Bu fikre katılmayan biri ne derdi?" gibi sorular, metni gerçekten düşünerek yazan biri için kolaydır. Burada amaç sorgulamak değil, merak etmektir; aynı sorular iyi bir öğretim pratiği olarak da değerlidir.
Eğitimde yaklaşım: Yasak mı, kural mı?
Birçok eğitim kurumu, yapay zekâyı tamamen yasaklamak yerine hangi aşamada nasıl kullanılabileceğini tanımlayan kurallara yöneliyor. Örneğin fikir üretmek ya da dil bilgisi kontrolü için kullanıma izin verip, metnin kendisinin öğrenci tarafından yazılmasını şart koşmak. Bu tür kuralların açıkça yazılı olması, hem öğrencinin neyin yasak olduğunu bilmesini hem de öğretmenin keyfî değil tutarlı karar vermesini sağlar. Yapay zekânın eğitimdeki daha geniş rolünü eğitimde yapay zekâ yazımızda tartıştık.
Ödev tasarımı da bir çözüm parçası. Yalnızca genel bilgi isteyen ödevler yapay zekâya kolayca devredilebilir. Öğrencinin kendi gözlemini, sınıfta tartışılan belirli bir örneği ya da yerel bir konuyu içeren ödevler ise hem daha öğretici hem de daha zor devredilir.
Yayıncılık ve iş dünyasında yaklaşım
Editörler ve içerik yöneticileri için asıl soru çoğu zaman "yapay zekâ kullanıldı mı" değil, "bu metin doğru, özgün ve okura faydalı mı" sorusudur. Yapay zekâ yardımıyla yazılmış ama yazarın kendi uzmanlığıyla kontrol edilmiş, doğrulanmış ve zenginleştirilmiş bir metin ile hiç kontrol edilmemiş bir makine çıktısı arasında büyük fark vardır. Serbest yazarlarla çalışırken yapay zekâ kullanımına dair beklentileri baştan sözleşmeye ya da brief'e yazmak, sonradan yaşanacak anlaşmazlıkları önler.
Medyada yapay zekâ ile üretilmiş içeriğin daha geniş bir sorun olarak nasıl ele alındığını, sahte görüntü ve seslerle birlikte medyada yapay zekâ ve deepfake tespiti yazımızda inceledik.
Kendi metniniz haksız yere işaretlendiyse
Bu durum düşündüğünüzden daha sık yaşanıyor. Kendi yazdığınız bir metin bir tespit aracında yüksek skor aldıysa:
- Sakin kalın ve süreç kanıtlarınızı toplayın: taslak dosyaları, sürüm geçmişi, notlarınız, kullandığınız kaynaklar.
- Metin hakkında konuşmayı teklif edin; kendi yazdığınız bir metni açıklamak zor olmayacaktır.
- Kurumun yapay zekâ politikasını isteyin ve tespit aracının tek başına bir kanıt olarak kullanılıp kullanılamayacağını sorun.
- Gelecekteki işlerinizde taslak geçmişi tutan bir düzenleyici kullanmayı alışkanlık hâline getirin.
Sıkça Sorulan Sorular
Yapay zekâ ile yazılmış metinlerde gizli bir işaret var mı?
Bazı şirketler, ürettikleri içeriğe istatistiksel filigran eklemek için yöntemler geliştirdiğini açıkladı. Ancak bu tür işaretler her araçta bulunmaz, her dilde aynı şekilde çalışmaz ve metin yeniden yazıldığında zayıflayabilir. Bugün için evrensel bir çözüm sayılmaz.
Birden fazla tespit aracı kullanmak sonucu güvenilir kılar mı?
Kısmen fikir verebilir, ama araçlar benzer yöntemler kullandığı için aynı hataları paylaşabilir. Birkaç aracın aynı sonucu vermesi, sonucun doğru olduğu anlamına gelmez.
Yapay zekâ yardımı almak her zaman kopya mıdır?
Hayır. Bu, bağlamın ve kuralların belirlediği bir konudur. Bir kurum dil bilgisi kontrolüne izin veriyor olabilir, başka bir kurum hiçbir kullanıma izin vermeyebilir. Önemli olan kuralların baştan bilinmesi ve kullanımın şeffaf şekilde beyan edilmesidir.
Metnin bir kısmı yapay zekâ ile yazıldıysa bu anlaşılabilir mi?
Karışık metinlerde tespit daha da zorlaşır. Bu tür durumlarda süreç kanıtları ve yazarla yapılan konuşma, herhangi bir skordan daha anlamlı bilgi verir.
Son söz
"Bu metni kim yazdı?" sorusunun cevabı çoğu zaman bir yüzdede değil, bir sohbette saklıdır. Tespit araçlarını bir başlangıç işareti olarak görün; kararı ise kaynak kontrolüne, süreç kanıtlarına ve yazarla yapılan açık bir konuşmaya dayandırın.
