GitHub-მა Copilot-ს დესკტოპ აპლიკაციების მართვა დაუმატა, თუმცა ჯერ სხვა ხელსაწყოებს გვირჩევს

1 ოქტომბერს GitHub-მა Copilot-ში ახალი ფუნქცია computer use გამოუშვა, ჯერ საჯარო პრევიუს რეჟიმში. ის Copilot CLI-სა და დესკტოპ აპლიკაციას macOS-ისა და Windows-ის პროგრამებში მუშაობის საშუალებას აძლევს: აგენტს შეუძლია შიგთავსის წაკითხვა, დაკლიკება, აკრეფა, სქროლვა და გადათრევა. ეს მუშაობს ძველ პროგრამებშიც, რომლებსაც არც API, არც ბრძანებათა ხაზი და არც MCP ინტეგრაცია აქვთ.

გაშვების დემონსტრაციაზე GitHub-მა Safari-ში ხარჯების ანგარიშის შევსება აჩვენა, თუმცა სხვა სცენარებსაც ასახელებს: ძველ აპლიკაციაში ინფორმაციის შეჯამება, პრეზენტაციის განახლება, მონაცემების შეყვანა და პროგრამებს შორის ინფორმაციის გადატანა. ფუნქცია ტერმინალიდან ან Copilot-ის აპლიკაციიდანაა ხელმისაწვდომი.

რატომ გვირჩევს GitHub პირდაპირ ხელსაწყოებს

Copilot CLI-ში computer use-ს ჩართვა ჩაშენებულ პლაგინს ააქტიურებს საკუთარი MCP სერვერით. ფუნქცია ლოკალურ სესიებში მუშაობს: აპლიკაციის შიგთავსს ოპერაციული სისტემის წვდომადობის ხიდან კითხულობს, ვიზუალური კონტექსტისთვის კი ეკრანის სურათებს იღებს.

GitHub მაინც გვირჩევს, პირველ რიგში პირდაპირი ხელსაწყოები გამოვიყენოთ: API, MCP სერვერი, ტერმინალის ბრძანება, ფაილების ხელსაწყო ან ბრაუზერის ხელსაწყო უფრო სტრუქტურირებულ და პროგნოზირებად შედეგს იძლევა, ვიდრე დესკტოპთან ურთიერთქმედება. OpenAI-ის პრეზიდენტმა გრეგ ბროკმანმა კი გასულ თვეში ფართო მიდგომა დაიცვა: აგენტებს ადამიანების ინტერფეისები უნდა ეყოთ, რომ ინდუსტრიამ ყოველი პროგრამისთვის კონექტორი აღარ აწყოს.

ნებართვები და კორპორატიული კონტროლი

ფუნქცია Copilot CLI-ში ბრძანებით /computer ჩაირთვება, აპლიკაციაში კი Computer Use-ის პარამეტრებიდან. macOS-ზე დამატებით საჭიროა Accessibility-ს ნებართვა ელემენტების მართვისთვის და Screen Recording-ის ნებართვა ფანჯრების სანახავად. CLI-ის სესიის ნებართვების რეჟიმი განსაზღვრავს, აპლიკაციაზე წვდომამდე Copilot ჰკითხავს თუ არა მომხმარებელს. მოთხოვნისას წვდომა მიმდინარე სესიისთვის შეიძლება დავრთოთ, მომავალი სესიებისთვის „ყოველთვის დაშვება“ ავირჩიოთ ან უარი ვთქვათ; აკრძალვის წესები ავტომატურ და შენახულ ნებართვებზე მაღლა დგას.

CLI-ში შენახული ნებართვები იმავე კომპიუტერზე დესკტოპ აპლიკაციაზეც გადადის. „ყოველთვის დაშვებული“ სიიდან აპლიკაციის ამოღება მომავალი სესიების ნებართვებს აუქმებს, მიმდინარე სესიაში მიცემულ წვდომას კი არ ეხება. კორპორატიული პოლიტიკა დეველოპერის ლოკალურ პარამეტრზე მაღლა დგას: თუ მართული პარამეტრები computer use-ს ბლოკავს, Copilot CLI აცხადებს, რომ ფუნქცია მიუწვდომელია. managed-settings.json-ით მფლობელები აკონტროლებენ, შეუძლიათ თუ არა დეველოპერებს ნებართვების მოთხოვნების გვერდის ავლა Copilot-ის აპლიკაციაში, CLI-სა და VS Code-ში. GitHub-ის ნაგულისხმევი ჩართვის პოლიტიკა Business და Enterprise პაკეტებზე ამ პრევიუს პირობებს არ ცვლის: ის 22 ოქტომბრიდან ამოქმედდება, პრევიუს ფუნქციებს კი არ მოიცავს.

საიმედოობა ინტერფეისზეა დამოკიდებული

GitHub აფრთხილებს: დროის ან ფანჯრის მდგომარეობის ცვლილებამ შეიძლება Copilot მოქმედების გამეორებისკენ აიძულოს ან პროცესი შეაჩეროს. აგენტმა შეიძლება არასწორი ელემენტი აირჩიოს, არასწორ ველში აკრიფოს ან დინამიკურ ინტერფეისებთან ვერ გაართვას თავი.