„კოდის ხაზებმა უკეთესი PR-ი მიიღო“ — კრიტიკა AI-ის კოდის მეტრიკებზე

AI ინდუსტრიის მთავარი რიცხვები წელს მოცულობის მაჩვენებლებია და არა შედეგის: „კოდის რამდენი პროცენტია AI-ით დაწერილი“ — ეს უბრალოდ კოდის ხაზებია უკეთესი პიარით, ამტკიცებს ინჟინერი დევიდ კარლუისი 10 ივნისს გამოქვეყნებულ პოსტში.

რომელი რიცხვები ჟღერს

ის ჩამოთვლის 2026 წლის განაცხადებს: Google-ის თქმით, ახალი კოდის 75% AI-ის მიერ არის გენერირებული; Anthropic-ის მიხედვით, წარმოებაში შერწყმული კოდის დაახლოებით 80% Claude-ს ეკუთვნის და ინჟინრები „კვარტალში 8-ჯერ მეტ კოდს“ აწვდიან; OpenAI ასევე ~80%-ს აცხადებს; Cursor კი რეკლამირებს „დღეში 100 მილიონზე მეტი ხაზის საწარმოო კოდს“. ყველა მათგანი AI-ის გამყიდველია.

კონტრასტი ადრინდელ განაცხადებთან — სწორედ ამაშია საქმე: GitHub-ის მთავარი განაცხადი Copilot-ზე იყო, რომ დეველოპერები ამოცანებს 55%-ით უფრო სწრაფად ასრულებდნენ — შედეგზე დაფუძნებული მტკიცება, რომლის შემოწმებაც და უარყოფაც შეიძლებოდა. მოცულობის რიცხვი კი მხოლოდ მაშინ იწვევს იმედგაცრუებას, თუ ადოპცია ჩერდება.

რას აჩვენებს კვლევები

კვლევითი სურათი შერეულია: ყველაზე ძლიერი დადებითი შედეგი რჩება Cui et al.-ის კვლევა — თითქმის 5 000 დეველოპერი და შესრულებული ამოცანების 26%-იანი ზრდა. თუმცა GitClear-მა აჩვენა, რომ Copilot-ის გავრცელებასთან ერთად კოდის გადამუშავება იზრდებოდა და რეფაქტორინგი მცირდებოდა, ხოლო METR-ის კვლევამ აღმოაჩინა, რომ გამოცდილი ღია კოდის დეველოპერები საკუთარ კოდურ ბაზებში AI-ით 19%-ით ნელი იყვნენ, თუმცა ფიქრობდნენ, რომ 20%-ით უფრო სწრაფად მუშაობდნენ — ეს დასკვნა ჯგუფმა 2026 წლის თებერვალში ფაქტობრივად უკან წაიღო.

NBER-ის გამოკითხვამ დაახლოებით 6 000 ხელმძღვანელს შორის აჩვენა, რომ კომპანიების 69% აქტიურად იყენებს AI-ს, თუმცა ათიდან დაახლოებით ცხრა არ აღნიშნავს გაზომვად პროდუქტიულობის ეფექტს; კვლევებს შორის კონსენსუსი ორგანიზაციული მოგების დაახლოებით 10%-ს შეადგენს. თავად Anthropic-მა ერთდროულად გამოაქვეყნა „8-ჯერ მეტი კოდის“ განაცხადიც და კვლევაც, რომლის მიხედვითაც AI-ის დახმარებით მომუშავე დეველოპერებმა ახლახან გაშვებული კოდის გააზრებაში 17%-ით დაბალი შედეგი აჩვენეს.

რატომ აქვს ამ რიცხვებს მნიშვნელობა

იმიტომ, რომ ისინი ბიუჯეტებსა და თანამშრომლების რაოდენობას ცვლის. თებერვალში ჯეკ დორსიმ Block-ის თანამშრომლების 40%-ზე მეტი — 4 000-ზე მეტი ადამიანი — შეამცირა, AI კი ღიად ძირითად თეზისად დაასახელა: „მნიშვნელოვნად მცირე გუნდს, კომპანიის მიერ შექმნილი ხელსაწყოებით, შეუძლია მეტი და უკეთესად გააკეთოს“ — მაშინ, როცა ბიზნესი ძლიერი იყო და მთლიანი მოგება იზრდებოდა. რამდენიმე კვირის შემდეგ Atlassian-მა დაახლოებით 1 600 ადამიანი შეამცირა.

კარლუისი მტკიცებულებას ითხოვს, რომ სამუშაო ძალის გარკვეული ნაწილი ნამდვილად უსაქმურია იმის გამო, რომ ნაკლებ ადამიანს შეუძლია ამ სამუშაოს შესრულება, და აღნიშნავს, რომ არასოდეს უნახავს პროდუქტული კომპანია უსასრულო გეგმის გარეშე: დამატებითი შესაძლებლობა გამოყენებაში, კონვერსიასა და შემოსავალში უნდა გამოჩნდეს.

პოსტი AI-ს საწინააღმდეგო არ არის: კარლუისის თქმით, ყველა ინჟინერმა AI ყოველდღიურად უნდა გამოიყენოს. თუმცა ადოპცია, მისი აზრით, სასტარტო ხაზია და არა შედეგების დაფა — მიწოდება უკვე იზომება DORA მეტრიკებით, საიმედოობით და, საბოლოოდ, შემოსავლით. „იყავი AI-პირველი მუშაობაში, მაგრამ გამოცდილი გაზომვაში“, — წერს ის.