GitHub أضاف إدارة تطبيقات سطح المكتب إلى Copilot، لكنه لا يزال ينصح بأدوات أخرى أولاً

في 1 أكتوبر، أطلق GitHub وظيفة جديدة هي computer use في Copilot، حاليًا في وضع المعاينة العامة. تتيح هذه الوظيفة لـ Copilot CLI والتطبيق المكتبي العمل في برامج macOS وWindows: يمكن للوكيل قراءة المحتوى والنقر والكتابة والتمرير والسحب. يعمل هذا حتى في البرامج القديمة التي لا تحتوي على API ولا سطر أوامر ولا تكامل MCP.

في عرض الإطلاق، أظهر GitHub تعبئة حساب نفقات في Safari، لكنه يذكر سيناريوهات أخرى أيضًا: تلخيص المعلومات في تطبيق قديم، تحديث عرض تقديمي، إدخال البيانات ونقل المعلومات بين البرامج. الوظيفة متاحة من الطرفية أو من تطبيق Copilot.

لماذا ينصح GitHub باستخدام الأدوات المباشرة

تفعيل computer use في Copilot CLI يشغّل إضافة مدمجة بخادم MCP خاص. تعمل الوظيفة في جلسات محلية: تقرأ محتوى التطبيق عبر جسر إمكانية الوصول في نظام التشغيل، وتلتقط صور الشاشة للسياق البصري.

لا يزال GitHub ينصح باستخدام الأدوات المباشرة أولاً: أدوات API أو خادم MCP أو أمر الطرفية أو أداة الملفات أو أداة المتصفح توفر نتيجة أكثر هيكلة وقابلية للتنبؤ من التفاعل مع سطح المكتب. كما دافع رئيس OpenAI غريغ بروكمان عن نهج واسع الشهر الماضي: يجب على الوكلاء استخدام واجهات البشر حتى لا تضطر الصناعة إلى بناء موصل لكل برنامج.

الأذونات والتحكم المؤسسي

تُفعَّل الوظيفة في Copilot CLI بالأمر /computer، ومن التطبيق من إعدادات Computer Use. على macOS، يلزم إذن Accessibility لتحكم العناصر وإذن Screen Recording لعرض النوافذ. وضع أذونات جلسة CLI يحدد ما إذا كان Copilot سيطلب من المستخدم قبل الوصول إلى التطبيق. عند الطلب، يمكن منح الوصول للجلسة الحالية أو اختيار «السماح دائمًا» للجلسات المستقبلية أو الرفض؛ قواعد الرفض تتجاوز الأذونات التلقائية والمحفوظة.

الأذونات المحفوظة في CLI تنتقل أيضًا إلى تطبيق سطح المكتب على نفس الكمبيوتر. إزالة التطبيق من قائمة «المسموح دائمًا» تلغي أذونات الجلسات المستقبلية دون التأثير على الوصول الممنوح في الجلسة الحالية. السياسة المؤسسية تتجاوز الإعدادات المحلية للمطور: إذا كانت الإعدادات المدارة تحظر computer use، يعلن Copilot CLI أن الوظيفة غير متاحة. عبر managed-settings.json، يتحكم المالكون فيما إذا كان يمكن للمطورين تجاوز طلبات الأذونات في تطبيق Copilot وCLI وVS Code. سياسة التفعيل الافتراضية في GitHub لحزمتي Business وEnterprise لا تغير شروط المعاينة هذه: تسري اعتبارًا من 22 أكتوبر ولا تشمل وظائف المعاينة.

الموثوقية تعتمد على الواجهة

يحذر GitHub: قد يؤدي تغيير التوقيت أو حالة النافذة إلى إجبار Copilot على تكرار الإجراءات أو إيقاف العملية. قد يختار الوكيل عنصرًا خاطئًا أو يكتب في حقل خاطئ أو يفشل في التعامل مع الواجهات الديناميكية.