أطلقت OpenAI مؤخرًا تحديثًا جديدًا لميزة "استخدام الكمبيوتر" لتطبيق Codex لسطح المكتب على منصة macOS، مما يسمح لعامل الترميز الذكي هذا بتشغيل التطبيقات المعتمدة من قبل المستخدم عن بُعد حتى عندما يكون جهاز Mac مقفلاً. ويعني هذا التغيير أنه يمكن للمستخدمين تكليف Codex من هواتفهم، وسيقوم بتنفيذ سلسلة من الإجراءات على أجهزة Mac الخاصة بهم أثناء إيقاف تشغيل الشاشة وقفل الكمبيوتر.
وفقًا لنموذج لقطة الشاشة التي نشرها فريق مطوري OpenAI على منصة التواصل الاجتماعي
لتمكين هذه الميزة، يحتاج المستخدمون إلى تثبيت البرنامج الإضافي "استخدام الكمبيوتر" ومنحه أذونات تسجيل الشاشة وإمكانية الوصول في إعدادات النظام. بمجرد الإعداد، يمكن لـ Codex تنفيذ عمليات مثل النقر على النوافذ، وإدخال النص، والتنقل في القوائم، والوصول إلى الحافظة في التطبيقات المصرح بها صراحةً من قبل المستخدم، ومحاكاة سلوكيات الاستخدام البشري المعتادة في الواجهات الرسومية. قالت OpenAI إن هذه الإمكانية تستهدف بشكل أساسي سيناريوهات الاستخدام التي يصعب تغطيتها بأدوات سطر الأوامر، مثل إعادة إنتاج الأخطاء التي تظهر فقط في الواجهة الرسومية، أو ضبط إعدادات التطبيق، أو تشغيل عمليات محددة في تطبيقات سطح المكتب التي تساعد Codex في تطويرها.
فيما يتعلق بالأمن والتحكم في الأذونات، ستحصل Codex على موافقة المستخدم قبل تولي كل تطبيق جديد لأول مرة. يمكن للمستخدمين أيضًا اختيار تعيين "السماح دائمًا" لتطبيقات معينة لتقليل عمليات التأكيد المتكررة. أكدت OpenAI أيضًا على أن هذه الميزة لن تكون متاحة للمستخدمين في المنطقة الاقتصادية الأوروبية والمملكة المتحدة وسويسرا في المرحلة الأولى من الإطلاق، ولا يمكن استخدامها في التطبيقات الطرفية الآلية، وتطبيقات Codex الخاصة، ونوافذ مطالبة إذن المسؤول على مستوى النظام. يعكس هذا القيد المقايضات الإقليمية التي لا يزال يتعين على OpenAI القيام بها حول حدود الامتثال والأمن مع تعزيز قدرات التشغيل الآلي والتشغيل عن بعد.
يواصل هذا التحديث أيضًا سلسلة توسعات ميزات Codex الأخيرة، بما في ذلك وظيفة "Appshots" التي تم إطلاقها حديثًا و"وضع/goal". من بينها، تسمح Appshots للمستخدمين بإدخال لقطات شاشة لنافذة تطبيق Mac الحالية ومحتوى النص ذي الصلة في محادثة Codex بنقرة واحدة عن طريق النقر المزدوج فوق مفتاح الأوامر (اختصار الأوامر والأوامر)، حتى يتمكن الوكيل من فهم سياق الواجهة وتقديم عمليات أو اقتراحات مستهدفة. يسمح وضع /goal لـ Codex بالعمل بشكل مستمر لساعات أو حتى أيام حول هدف واضح، مما يمنحه قدرًا أكبر من الاستمرارية وقدرات التخطيط في سيناريوهات مثل وكلاء الترميز، وأتمتة تشغيل سطح المكتب، والتقدم في المهام على المدى الطويل.