კვლევითმა ორგანიზაცია METR-მა 'expenditure horizon' (ხარჯვის ჰორიზონტი) შემოიღო — მეტრიკა, რომელიც ზუსტად განსაზღვრავს, როდის ხდება AI აგენტები უფრო ძვირი, ვიდრე ადამიანური შრომა. ნანოGPT-ს ტესტებმა აჩვენა, რომ თითოეული 1%-იანი აჩქარება ადამიანს $2,500 უჯდება.

METR-ը ներկայացնում է նոր մետրիկ․ ե՞րբ են AI-գործակալները դառնում ավելի թանկ, քան մարդիկ

Հետազոտական կազմակերպությունը՝ METR (Model Evaluation and Threat Research), ներկայացրել է նոր մետրիկ՝ «expenditure horizon» (ծախսերի հորիզոն) անվամբ․ դոլարային ցուցիչ, որը ճշգրիտ որոշում է, թե երբ են AI-գործակալները դառնում ավելի թանկ, քան մարդկային աշխատուժը:

Ի՞նչ է ծախսերի հորիզոնը

«Ծախսերի հորիզոնը» մետրիկ է, որը համեմատում է AI-գործակալի կողմից առաջադրանքի կատարման արժեքը նույն աշխատանքը մարդու կատարելու արժեքի հետ։ Այն ցույց է տալիս այն սահմանագիծը, որից այն կողմ AI-ի օգտագործումը դառնում է ավելի ծախսատար, քան մարդու վարձելը։ Սա հատկապես կարևոր է բիզնեսների համար, որոնք գնահատում են AI-ում ներդրումների վերադարձը (ROI):

Մետրիկը միավորում է երկու տեսակի ծախսերը մեկ արժույթով՝ թույլ տալով ուղղակի համեմատություն։ Այն հաշվի է առնում ոչ միայն AI-ի ուղղակի հաշվողական ռեսուրսների ծախսերը, այլև մարդկային աշխատանքի ծախսերը՝ ներառյալ աշխատանքային ժամերը և ժամավճարները:

NanoGPT Speedrun-ի փորձարկումը

METR-ը փորձարկել է իր մետրիկը NanoGPT speedrun նախագծի վրա՝ համայնքային նախաձեռնություն, որն ուղղված է GPT մոդելների ուսուցման արագացմանը։ Նախագիծն անցել է 82 բարելավման քայլով՝ հասնելով 33 անգամ արագացման 2024 թվականի մայիսից ի վեր։

Մարդկային աշխատանքի արժեքը՝ 16 ժամ աշխատանք յուրաքանչյուր 1% արագացման համար = $2,500 ($150/ժամ դրույքաչափով)։ AI-գործակալների արժեքը փոփոխական է․ հաճախ ավելի էժան է պարզ առաջադրանքների համար, բայց ավելի թանկ՝ բարդերի համար։ NanoGPT-ի ուսուցման ժամանակը 45 րոպեից նվազել է մինչև 2 րոպեից պակաս՝ ցուցադրելով տպավորիչ առաջընթաց ոլորտում:

Գործնական նշանակությունը բիզնեսի համար

Բիզնեսների համար, որոնք դիտարկում են AI-ի ներդրումը, «ծախսերի հորիզոնն» օգնում է պատասխանել հիմնական հարցին․ որ առաջադրանքներն արժե վստահել AI-ին, և որոնք՝ թողնել մարդկանց։ Պարզ, կրկնվող գործողությունները հաճախ տնտեսապես ավելի շահավետ են AI-ի միջոցով, մինչդեռ բարդ, ստեղծագործական կամ բազմաստիճան առաջադրանքները կարող են պահանջել մարդկային միջամտություն:

Մետրիկի սահմանափակումները

Մետրիկն ունի որոշակի կույր կետեր․ այն չափում է միայն AI-ի աշխատանքը լիովին ինքնավար ռեժիմում՝ առանց հաշվի առնելու մարդկային վերահսկողության անհրաժեշտությունը։ Բացի այդ, նորագույն AI մոդելները կարող են էապես փոխել արդյունքները։ Չնայած այս սահմանափակումներին՝ «ծախսերի հորիզոնը» մնում է արժեքավոր գործիք բիզնեսի համար՝ օգնելով կայացնել տեղեկացված որոշումներ AI-գործակալների ներդրման վերաբերյալ:

Աղբյուր՝ the-decoder.com