OpenAI, Google, Microsoft և Anthropic-ը աջակցում են ԱԲ սկրեյփինգից հրաժարվելու նոր ազդանշանին

OpenAI, Google, Microsoft և Anthropic-ը ասում են, որ կընդունեն նոր ստանդարտ, որը հրատարակիչները կարող են օգտագործել՝ ԱԲ սկրեյփինգից հրաժարվելու համար։ Այս վերահսկողության շնորհիվ հրատարակիչները կարող են իրենց ԱԲ ուսուցման նախապատվությունները կիրառել մի քանի ԱԲ ընկերությունների վրա՝ դրանք առանձին սահմանելու փոխարեն։ Ընդհանուր ազդանշանը առաջարկել է Anthropic-ի ստանդարտների տեխնիկական ղեկավար Kevin Kelley-ը՝ որպես Internet Engineering Task Force-ի մաս։

Ինչպես է գործում ազդանշանը

Ազդանշանը կլինի վեբկայքի robots.txt ֆայլում, որը երկար ժամանակ է ցույց է տալիս, թե որ վեբ քրոուլերները կարող են և չեն կարող սկրեյփել կայքը՝ որոնման ինդեքսավորման, արխիվացման կամ ԱԲ ուսուցման համար։ Ներկայում կայքերը պետք է իրենց ԱԲ ուսուցման նախապատվությունները առանձին փոխանցեն յուրաքանչյուր ԱԲ ընկերության։ Ընկերությունները ասում են, որ կսահմանափակեն իրենց ԱԲ քրոուլերների մուտքը կայք, եթե հանդիպեն ընդհանուր թոքենին։

Ընկերությունների պլանները և վերահսկողությունը

Anthropic-ը արդեն ընդունել է ազդանշանը, իսկ Google-ը և Microsoft-ը պլանավորում են այն աջակցել հաջորդ տարի։ OpenAI-ը ասում է, որ կներդնի այն առաջիկա ամիսներին։ Microsoft-ը ասում է, որ կառաջարկի մանրամասն վերահսկողություն, որը թույլ կտա հրատարակիչներին հրաժարվել ԱԲ ուսուցումից կամ ԱԲ հիմնավորումից, որը նա նկարագրում է որպես ԱԲ մոդելի ուղղորդում դեպի տեղեկատվության ստուգված աղբյուր՝ հալյուցինացիաները նվազեցնելու համար։ Microsoft-ը նշում է, որ կայքերը միևնույն է կհայտնվեն Bing-ի որոնման արդյունքներում՝ անկախ իրենց նախապատվություններից։ Google-ը նախկինում ներդրել է նման վերահսկողություն, որը թույլ է տալիս կայքերին վերահսկել՝ իրենց բովանդակությունը կհայտնվի ԱԲ որոնման հնարավորություններում, թե կօգտագործվի ԱԲ ուսուցման համար, առանց ազդելու որոնման տեսանելիության վրա։

Աջակցություն և այլ ջանքեր

Meta-ի հաղորդակցության ղեկավար Andy Stone-ը նույնպես աջակցություն հայտնեց նոր կարգավորմանը, բայց չասաց՝ ընկերությունը կհարգի այն, թե ոչ։ Stone-ը ասաց, որ մի քանի մատակարարներին միաժամանակ նման նախապատվություններ փոխանցող ընդհանուր ազդանշանի ստեղծումը կարևոր քայլ է, և որ Meta-ն ակնկալում է աշխատել այլ ԱԲ ընկերությունների հետ՝ ստանդարտների և դրանց ներդրման վրա ամբողջ ոլորտում։ Հայտարարությունը հրապարակվում է այն պահին, երբ հրատարակիչները պայքարում են իրենց կայքերը սկրեյփող և իրենց բովանդակությունը ԱԲ մոդելներ ուղարկող ԱԲ քրոուլերների շարունակական հոսքի դեմ։ Որոշ ընկերություններ և կազմակերպություններ փորձել են պայքարել չթույլատրված սկրեյփինգի դեմ. Really Simple Licensing ստանդարտը հրատարակիչներին հնարավորություն է տալիս վճար գանձել իրենց կայքերը այցելող քրոուլերներից, իսկ Cloudflare-ը ԱԲ քրոուլերները արգելափակում է ըստ լռելյայնի։

Աղբյուրներ: The Verge · Techmeme