კვლევითმა ორგანიზაცია METR-მა 'expenditure horizon' (ხარჯვის ჰორიზონტი) შემოიღო — მეტრიკა, რომელიც ზუსტად განსაზღვრავს, როდის ხდება AI აგენტები უფრო ძვირი, ვიდრე ადამიანური შრომა. ნანოGPT-ს ტესტებმა აჩვენა, რომ თითოეული 1%-იანი აჩქარება ადამიანს $2,500 უჯდება.

METR מציגה מדד חדש: מתי סוכני AI הופכים ליקרים יותר מבני אדם?

ארגון המחקר METR (Model Evaluation and Threat Research) הציג מדד חדש בשם "אופק ההוצאות" (expenditure horizon) — נתון מבוסס דולרים הקובע במדויק מתי סוכני AI הופכים ליקרים יותר מעבודה אנושית.

מהו אופק ההוצאות?

"אופק ההוצאות" הוא מדד המשווה את העלות של השלמת משימה על ידי סוכן AI לעומת ביצוע אותה העבודה על ידי אדם. הוא מראה את הסף שמעבר לו השימוש ב-AI הופך ליקר יותר משכירת עובד. זה חשוב במיוחד לעסקים המעריכים את התשואה על ההשקעה (ROI) בטכנולוגיות AI.

המדד מאחד את שני סוגי העלויות במטבע אחד, מה שמאפשר השוואה ישירה. הוא לוקח בחשבון לא רק את עלויות המשאבים החישוביים הישירים של AI, אלא גם את עלויות העבודה האנושית, כולל שעות עבודה ותעריפים שעתיים.

בדיקה על NanoGPT Speedrun

METR בדקה את המדד שלה על פרויקט NanoGPT speedrun — יוזמה קהילתית שמטרתה להאיץ את אימון מודלי GPT. הפרויקט עבר 82 שלבי שיפור, והשיג האצה של פי 33 מאז מאי 2024.

עלות עבודה אנושית: 16 שעות עבודה לכל 1% שיפור במהירות = $2,500 (בתעריף של $150 לשעה). עלות סוכני AI משתנה — לעיתים קרובות זולה יותר למשימות פשוטות, אך יקרה יותר למשימות מורכבות. זמן אימון NanoGPT ירד מ-45 דקות לפחות משתי דקות, מה שמדגים התקדמות מרשימה בתחום.

המשמעות העסקית

עבור עסקים השוקלים אימוץ AI, "אופק ההוצאות" עוזר לענות על שאלה מרכזית: אילו משימות כדאי להקצות ל-AI ואילו להשאיר לבני אדם? פעולות פשוטות וחוזרות על עצמן לרוב כדאי יותר לבצע באמצעות AI, בעוד שמשימות מורכבות, יצירתיות או רב-שלביות עשויות לדרוש התערבות אנושית.

מגבלות המדד

למדד יש כתמים עיוורים: הוא מודד רק עבודת AI בסביבה אוטונומית לחלוטין, ללא התחשבות בצורך בפיקוח אנושי. בנוסף, מודלי AI חדישים עלולים לשנות באופן משמעותי את התוצאות. למרות מגבלות אלה, "אופק ההוצאות" נותר כלי רב-ערך לעסקים המסייע בקבלת החלטות מושכלות לגבי הטמעת סוכני AI.

מקור: the-decoder.com