TBC-ն ու AWS-ը շուկա են հանում նեյրոններից ստացված առաջին AI վիդեո մոդելը

Սան-Ֆրանցիսկոյի The Biological Computing Co. (TBC) ստարտափը հայտարարել է Amazon Web Services-ի հետ համագործակցության մասին՝ շուկա հանելու «նեյրոններից ստացված» առաջին AI վիդեո մոդելը։ Բաց կոդով վիդեո մոդելի վրա հիմնված այն, ըստ ընկերության, աշխատում է հինգ անգամ ավելի արագ և 80 տոկոսով ավելի էժան։

Համագործակցություն AWS-ի հետ

TBC-ն ծրագրում է մոդելը գործարկել AWS Trainium չիպերում, մատուցել Amazon SageMaker AI-ի միջոցով և վաճառել AWS Marketplace-ում։ Այս ամենը դեռ թղթի վրա է. այժմ հասանելի է միայն վաղ հասանելիության գրանցումը։

«AWS-ի հետ գործընկերությունը նեյրոններից ստացված AI օպտիմիզացիան տանում է առևտրային մասշտաբի»,— ասում է TBC-ի գլխավոր տնօրեն և համահիմնադիր Ալեքս Քսենձովսկին։ AWS-ի ղեկավար Ջեյսոն Բենեթը մոտեցումը «առաջին համակարգչից» սովորելու ուղի է անվանել։

Նեյրոնները մնում են լաբորատորիայում

Անվանումը հուշում է, թե հաշվարկներն այստեղ անում են ուղեղի բջիջները։ Դա այդպես չէ. TBC-ն վաճառում է սովորական ծրագրային ապահովում՝ սեփական շերտ, որը բազային մոդելի չափին ավելացնում է 0,1 տոկոսից պակաս և աշխատում ստանդարտ AI ենթակառուցվածքում։ Հաճախորդներին ոչ կենսաբանական սարքավորում է պետք, ոչ նոր աշխատանքային հոսքեր։

TBC-ն կորտիկալ նյարդաբջիջներ աճեցնում է 4 096 էլեկտրոդով չիպերի վրա, էլեկտրականորեն խթանում դրանք և չափում, թե ինչպես է ակտիվությունը տարածվում ու մարվում։ Այդ չափումները դառնում են փոքր ադապտերներ, որոնք միանում են գոյություն ունեցող դիֆուզիոն մոդելներին։ Նեյրոններն իրենք երբեք չեն լքում լաբորատորիան։

Արդյունքներ և բաց հարցեր

Բլոգում TBC-ն մոտեցումը ցույց է տվել բաց Minecraft մոդելի՝ Oasis-ի օրինակով՝ մոտ 600 միլիոն պարամետրով դիֆուզիոն մոդել։ Նման մոդելներում սխալները կուտակվում են, և մի քանի վայրկյանից տեսարանը մշուշվում է այն աստիճանի, ինչ TBC-ն կոչում է «washout»։ Մոտ 156 000 պարամետրով Neural Dynamics Adapter-ը կոդավորում է բջիջներից կարդացված մեկ կանոն՝ ակտիվությունը գործում է հիմնականում հարևանությամբ, ապա մարվում։ Տասը թեստային տեսանյութերում այն բնօրինակից մոտ 19 տոկոսով, իսկ LoRA ադապտացիայից՝ 5 տոկոսով լավ արդյունք է ցույց տվել։

Առևտրային մոդելի համար համադրելի մանրամասներ պակասում են. TBC-ն չի նշում ոչ բազային մոդելը, ոչ սարքավորումը, լուծաչափը կամ որակի չափանիշը։ «Հինգ անգամ արագ» և «80 տոկոսով էժան» մաթեմատիկորեն նույն բանն են՝ GPU ժամանակի հինգերորդ մասը 80 տոկոս խնայողություն է։ Արդյոք կենսաբանական ճանապարհը գերազանցում է զուտ թվային հնարքներին՝ դիստիլյացիային, մնում է բաց հարց։