OpenAI, Google, Microsoft და Anthropic მხარს უჭერენ AI-ის მიერ სკრაპინგზე უარის თქმის ახალ სიგნალს

OpenAI, Google, Microsoft და Anthropic აცხადებენ, რომ დანერგავენ ახალ სტანდარტს, რომლის საშუალებითაც გამომცემლებს შეეძლებათ უარი თქვან AI-ის მიერ მათი საიტების სკრაპინგზე. ამ კონტროლით გამომცემლები AI-ის ტრენინგის პარამეტრებს რამდენიმე AI კომპანიაზე გაავრცელებენ, ნაცვლად იმისა, რომ თითოეულისთვის ცალ-ცალკე დააყენონ. საერთო სიგნალი შესთავაზა კევინ კელიმ, Anthropic-ის სტანდარტების ტექნიკურმა ხელმძღვანელმა, Internet Engineering Task Force-ის ფარგლებში.

როგორ მუშაობს სიგნალი

სიგნალი განთავსდება ვებსაიტის robots.txt ფაილში, რომელიც დიდი ხანია აცნობებს, რომელ ვებ-კრავლერებს შეუძლიათ და რომლებსაც არ შეუძლიათ საიტის სკრაპინგი საძიებო ინდექსაციის, არქივირების ან AI-ის ტრენინგისთვის. ამჟამად საიტებმა AI-ის ტრენინგის პარამეტრები ცალ-ცალკე უნდა აცნობონ თითოეულ AI კომპანიას. კომპანიები ამბობენ, რომ შეზღუდავენ თავიანთი AI კრავლერების წვდომას საიტზე, თუ ეს კრავლერები საერთო ტოკენს წააწყდებიან.

კომპანიების გეგმები და კონტროლი

Anthropic-მა სიგნალი უკვე დანერგა, Google და Microsoft კი მისი მხარდაჭერის დანერგვას მომავალ წელს გეგმავენ. OpenAI აცხადებს, რომ მომდევნო თვეებში დანერგავს. Microsoft ამბობს, რომ შესთავაზებს დეტალურ კონტროლს, რომელიც გამომცემლებს საშუალებას მისცემს უარი თქვან AI-ის ტრენინგზე ან AI grounding-ზე, რასაც კომპანია აღწერს როგორც AI მოდელის მითითებას ინფორმაციის დადასტურებულ წყაროზე ჰალუცინაციების შესამცირებლად. Microsoft აღნიშნავს, რომ ვებსაიტები მაინც გამოჩნდებიან Bing-ის ძიების შედეგებში, მიუხედავად მათი პარამეტრებისა. Google-მა ადრე დანერგა მსგავსი კონტროლი, რომელიც საიტებს საშუალებას აძლევს გააკონტროლონ, გამოჩნდება თუ არა მათი კონტენტი AI-ის ძიების ფუნქციებში ან გამოყენებული იქნება თუ არა AI-ის ტრენინგისთვის, ძიებაში ხილვადობაზე გავლენის მოხდენის გარეშე.

მხარდაჭერა და სხვა ძალისხმევა

Meta-ს კომუნიკაციების ხელმძღვანელმა ენდი სტოუნმა ასევე გამოთქვა მხარდაჭერა ახალი პარამეტრის მიმართ, თუმცა არ თქვა, დაიცავს თუ არა კომპანია მას. სტოუნის თქმით, საერთო სიგნალის შექმნა, რომელიც ასეთ პარამეტრებს ერთდროულად მრავალ პროვაიდერს გადასცემს, მნიშვნელოვანი ნაბიჯია და Meta მოუთმენლად ელოდება სხვა AI კომპანიებთან თანამშრომლობას სტანდარტებსა და მათ ინდუსტრიაში დანერგვაზე. განცხადება გაკეთდა იმ დროს, როცა გამომცემლები ებრძვიან AI კრავლერების განუწყვეტელ ნაკადს, რომლებიც მათ საიტებს სკრაპავენ და მათ კონტენტს AI მოდელებში აწვდიან. ზოგიერთი კომპანია და ორგანიზაცია ცდილობს უნებართვო სკრაპინგს დაუპირისპირდეს: Really Simple Licensing სტანდარტი გამომცემლებს აძლევს შესაძლებლობას, გადაახდევინონ კრავლერებს, რომლებიც მათ საიტებს სტუმრობენ, ხოლო Cloudflare ნაგულისხმევად ბლოკავს AI კრავლერებს.

წყაროები: The Verge · Techmeme