GPTZero araştırması: EY Canada raporundaki atıfların çoğu uydurma çıktı

Yapay zeka metin tespiti alanında çalışan GPTZero şirketinin araştırması, EY Canada’nın 2025 sonunda yayımladığı siber güvenlik raporunun büyük ölçüde uydurma ve yanlış atfedilmiş kaynaklara dayandığını ortaya koydu. Şirket bu uygulamayı “hisse göre atıf” (vibe citing) olarak adlandırıyor.

Araştırma neler buldu

44 sayfalık “Points of Attack: Uncovering Cyber Threats and Fraud in Loyalty Systems” başlıklı rapor iki ortak ve bir kıdemli yönetici olmak üzere üç çalışana atfediliyor. Raporda dipnot ya da standart atıf kullanılmıyor; kaynaklar metin içinde veya 41–43. sayfalardaki tabloda veriliyor. GPTZero’ya göre bu tablodaki bağlantıların neredeyse tamamı bozuk ya da sahte, başlıkların yarısından fazlası ise gerçek bir kaynağa karşılık gelmiyor.

Şirkete göre metnin kendisi de yapay zeka tarafından üretilmiş gibi okunuyor ve büyük dil modellerinin bilinen izlerini taşıyor.

Çelişkili rakamlar ve “aklanmış” kaynaklar

Yönetici özetinde yazarlar küresel sadakat puanı piyasasının 200 milyar dolar olduğunu ve bu puanların %30–50’sinin kullanılmadığını belirtiyor. 42. sayfada bu rakam sahte bir Forbes atfıyla destekleniyor; 10. sayfada ise aynı 200 milyar dolar kullanılmayan puanların değeri olarak sunuluyor — bu da en az 400 milyar dolarlık bir piyasa gerektirir.

43. sayfada atıf yapılan McKinsey & Company raporu mevcut değil. GPTZero bu atfın izini altı ay önce yayımlanan bir Financial IT blog yazısına kadar sürdü; yazıda “her yıl 200 milyar dolardan fazla puanın atıl beklediği” söyleniyor ve kaynak olarak “McKinsey & Company: Loyalty Economics Report (2022)” gösteriliyor. Bu uydurma kaynak EY’nin tablosuna kelimesi kelimesine taşınmış.

Bazı iddialar farklı yerlerde farklı kaynaklara bağlanıyor. Sadakat programlarının %72’sinin hırsızlık veya dolandırıcılık bildirdiği istatistiği 6. sayfada Paystone’a, 11. sayfada Forter’a atfediliyor; ikisi de kaynak tablosunda yer almıyor ve asıl kaynak büyük olasılıkla 2017 tarihli bir Ipsos anketi. Dolandırıcılık saldırılarındaki %89 artış ise 6. sayfada 2019’a, 11. sayfada yalnızca 2018–2019 dönemine tarihleniyor.

Neden önemli

Şirketin testlerinde ChatGPT, Claude ve Perplexity raporun verilerini tekrarladı. GPTZero’ya göre tanınmış bir şirketin yüksek trafikli bir sitede yayımladığı sahte içerik, gelecekteki araştırmacıların ve yapay zeka “derin araştırma” araçlarının beslendiği veri havuzunu zehirliyor.

GPTZero Hallucination Check aracını 2025’ten bu yana kullanıyor; araç daha önce bir devlet yayınında ve iki Deloitte raporunda sorun tespit etti. EY, dünya çapında 150 ofisi bulunan “büyük dörtlü” danışmanlık şirketlerinden biri; Kanada kuruluşu her yıl Kanada hükümetine milyonlarca dolarlık hizmet veriyor.