״שורות הקוד קיבלו יחצן טוב יותר״: ביקורת על מדדי ה-AI

המספרים הגדולים שה-AI הציבה השנה על השלט הם הצהרות נפח ולא הצהרות תוצאה: ״אחוז הקוד שנכתב ב-AI״ הוא בסך הכול שורות קוד עם יחצן טוב יותר, טוען המהנדס דיוויד קורליוויס בפוסט שפורסם ב-10 ביוני.

אילו מספרים מצוטטים

הוא מונה את הצהרות 2026: לפי גוגל, 75% מהקוד החדש נוצר ב-AI; לפי Anthropic, כ-80% מהקוד הממוזג לפרודקשן נכתב בידי Claude ומהנדסים מספקים ״פי 8 יותר קוד ברבעון״; OpenAI מדווחת על כ-80% אף היא; ו-Cursor מפרסמת ״מעל 100 מיליון שורות קוד ארגוני ביום״. כולן ספקיות AI, שעבורן עלייה באימוץ היא אינטרס מסחרי.

הניגוד להצהרות קודמות הוא העיקר: ההצהרה המרכזית של GitHub על Copilot הייתה שמפתחים משלימים משימות מהר ב-55% — טענה על תוצאה שאפשר לבדוק ולהפריך. מספר נפח, לעומתם, יכול לאכזב רק אם האימוץ נעצר.

מה מראה המחקר

תמונת המחקר מעורבת: התוצאה החזקה ביותר בעד האימוץ היא זו של Cui ואחרים — כמעט 5,000 מפתחים ועלייה של 26% במשימות שהושלמו, כשהיתרון הגדול ביותר למפתחים זוטרים. אבל GitClear הראה עלייה בשכתוב קוד והתמוטטות של ריפקטורינג עם התפשטות Copilot, ו-METR מצא שמפתחי קוד פתוח מנוסים היו איטיים ב-19% עם AI במאגרי הקוד שלהם, בעודם סבורים שהם מהירים ב-20% — ממצא שהקבוצה למעשה חזרה בה ממנו בפברואר 2026.

סקר NBER בקרב כ-6,000 מנהלים מצא ש-69% מהחברות משתמשות ב-AI, אך כתשעה מתוך עשרה לא מדווחים על השפעה מדידה על הפרודוקטיביות; הקונצנזוס בין המחקרים עומד על כ-10% שיפור ארגוני. Anthropic עצמה פרסמה גם את הטענה על ״פי 8 יותר קוד״ וגם מחקר שבו מפתחים בסיוע AI קיבלו ציון נמוך ב-17% בהבנת הקוד שזה עתה סיפקו. הוא מבקר באותה מידה גם את ״סולמות הבגרות״ של AI שנמכרים בידי ספקים ויועצים.

למה המספרים האלה חשובים

מפני שהם מזיזים תקציבים ומצבת עובדים. בפברואר קיצץ ג'ק דורסי יותר מ-40% מכוח האדם של Block — למעלה מ-4,000 איש — כשהציג את ה-AI כתזה המרכזית: ״צוות קטן בהרבה, עם הכלים שאנחנו בונים, יכול לעשות יותר וטוב יותר״ — בעוד העסק היה חזק והרווח הגולמי צמח. שבועות אחר כך קיצצה Atlassian כ-1,600 משרות.

קורליוויס דורש ראיות לכך שחלק מכוח האדם באמת אינו מנוצל מפני שפחות אנשים יכולים לבצע את העבודה, ומציין שלא ראה חברת מוצר בלי מפת דרכים אינסופית: תוספת כושר אמורה להופיע בשימוש, בהמרות ובהכנסות.

הפוסט אינו אנטי-AI: קורליוויס אומר שכל מהנדס צריך להשתמש ב-AI מדי יום. אבל אימוץ, הוא מתעקש, הוא קו הזינוק ולא לוח התוצאות — את האספקה כבר מודדים במדדי DORA, באמינות, בקצב השינוי המשמעותי ובסופו של דבר בהכנסות. ״היו AI-first באופן העבודה, אבל מנוסים באופן המדידה״, הוא כותב.