GPTZero-ի հետաքննություն. EY Canada-ի զեկույցը հիմնված է հորինված մեջբերումների վրա

Արհեստական բանականության տեքստի հայտնաբերմամբ զբաղվող GPTZero ընկերության հետաքննությունը պարզել է, որ EY Canada-ի՝ 2025 թվականի վերջին հրապարակած կիբերանվտանգության զեկույցը մեծապես հենվում է հորինված ու սխալ վերագրված մեջբերումների վրա։ Ընկերությունն այդ երևույթն անվանում է «տրամադրությամբ մեջբերում» (vibe citing)։

Ինչ է պարզել հետաքննությունը

44 էջանոց «Points of Attack: Uncovering Cyber Threats and Fraud in Loyalty Systems» զեկույցը վերագրվում է երեք աշխատակցի՝ երկու գործընկերոջ և մեկ ավագ մենեջերի։ Զեկույցում ծանոթագրություններ կամ ակադեմիական ստանդարտ մեջբերումներ չկան. աղբյուրները նշված են տեքստի մեջ կամ 41–43 էջերի աղբյուրների աղյուսակում։ Ըստ GPTZero-ի՝ այդ աղյուսակի գրեթե բոլոր հղումները կոտրված կամ կեղծ են, իսկ վերնագրերի կեսից ավելին իրական աղբյուրի չեն համապատասխանում։

Ըստ ընկերության՝ տեքստն ինքն էլ կարդացվում է որպես արհեստական բանականությամբ ստեղծված և կրում է մեծ լեզվական մոդելներին բնորոշ հետքեր։

Հակասական թվեր և «լվացված» աղբյուրներ

Ամփոփագրում հեղինակները պնդում են, որ համաշխարհային հավատարմության միավորների շուկան 200 միլիարդ դոլար է, իսկ այդ միավորների 30–50%-ը մնում է չօգտագործված։ 42-րդ էջում այդ թիվը հիմնավորվում է Forbes-ի կեղծ մեջբերմամբ, իսկ 10-րդ էջում նույն 200 միլիարդը չօգտագործված միավորների արժեքն է, ինչը հեղինակների իսկ տրամաբանությամբ պահանջում է առնվազն 400 միլիարդ դոլարի շուկա։

43-րդ էջում նշված McKinsey & Company-ի զեկույցը գոյություն չունի։ GPTZero-ն դրա հետքը գտել է վեց ամիս առաջ հրապարակված Financial IT բլոգի գրառման մեջ, որի աղբյուրների ցանկում նշված է «McKinsey & Company: Loyalty Economics Report (2022)»։ Այդ հորինված հղումը բառացիորեն տեղափոխվել է նաև EY-ի աղյուսակ։

Որոշ պնդումներ տարբեր տեղերում տարբեր աղբյուրների են վերագրվում։ Այն վիճակագրությունը, թե հավատարմության ծրագրերի 72%-ը հայտնել է գողության կամ խարդախության մասին, 6-րդ էջում վերագրվում է Paystone-ին, 11-րդ էջում՝ Forter-ին, թեև ոչ մեկը աղբյուրների աղյուսակում չկա. իրական աղբյուրը, ամենայն հավանականությամբ, 2017 թվականի Ipsos հարցումն է։ Խարդախության հարձակումների 89%-անոց աճը 6-րդ էջում թվագրվում է 2019 թվականով, իսկ 11-րդ էջում սահմանափակվում 2018–2019 թվականներով։

Ինչու է սա կարևոր

Զեկույցի հանրային ազդեցությունը դժվար է չափել, սակայն GPTZero-ն նշում է, որ այն հիշատակվել է Canberra Times-ի հոդվածում, որը տպագրվել է Ավստրալիայի 60-ից ավելի թերթերում։ Ընկերության թեստերում ChatGPT-ն, Claude-ը և Perplexity-ն կրկնել են զեկույցի տվյալները։ Հայտնի ընկերության կողմից բարձր այցելելիություն ունեցող կայքում հրապարակված կեղծ նյութը, ըստ GPTZero-ի, թունավորում է այն տվյալների ավազանը, որտեղից սնվում են ապագա հետազոտողներն ու արհեստական բանականության «խորը հետազոտության» գործիքները։

GPTZero-ն Hallucination Check գործիքն օգտագործում է 2025 թվականից. այն նախկինում խնդիրներ է հայտնաբերել պետական հրապարակման և Deloitte-ի երկու զեկույցների մեջ։ EY-ն «մեծ քառյակի» ընկերություններից մեկն է՝ 150 գրասենյակով. կանադական մասնաճյուղը տարեկան միլիոնավոր դոլարների ծառայություններ է մատուցում Կանադայի կառավարությանը։