أصدر باحثو شركة Apple نموذجًا جديدًا مفتوح المصدر للذكاء الاصطناعي يمكنه تحرير الصور بناءً على تعليمات اللغة الطبيعية من المستخدمين. MGIE هو اختصار لـ MLLM-GuidedImageEditing، والذي يستخدم نموذج اللغة الكبير متعدد الوسائط (MLLM) لتفسير طلبات المستخدم وإجراء عمليات على مستوى البكسل.
هذا النموذج قادر على تحرير كل جانب من جوانب الصورة. يمكن أن تتضمن تحسينات الصور العالمية السطوع أو التباين أو الحدة أو تطبيق تأثيرات فنية مثل الرسم. يمكن للتحرير المحلي تعديل الشكل أو الحجم أو اللون أو الملمس لمناطق أو كائنات معينة في الصورة، بينما تتضمن تعديلات نمط Photoshop الاقتصاص وتغيير الحجم والتدوير وإضافة المرشحات، أو حتى تغيير الخلفية ومزج الصورة.
قد يكون إدخال المستخدم لصورة البيتزا هو "جعلها تبدو صحية أكثر". وباستخدام المنطق السليم، يمكن للنموذج إضافة مكونات نباتية مثل الطماطم والأعشاب. يمكن أن تكون طلبات إدخال التحسين العالمية في شكل "زيادة التباين، ومحاكاة المزيد من الضوء"، في حين أن تعديلات نمط Photoshop يمكن أن تطلب من النموذج إزالة الأشخاص من خلفية الصورة، وتحويل تركيز الصورة إلى تعبيرات وجه الهدف.
تعاونت Apple مع باحثين من جامعة كاليفورنيا لإنشاء MGIE ونشرت ورقة بحثية في المؤتمر الدولي لتمثيلات التعلم (ICLR) لعام 2024. النموذج متاح على GitHub، بما في ذلك التعليمات البرمجية والبيانات والنماذج المدربة مسبقًا.
وهذا هو الإنجاز الثاني لشركة Apple في أبحاث الذكاء الاصطناعي خلال عدة أشهر. في أواخر ديسمبر، كشفت شركة أبل أنها قطعت خطوات واسعة في نشر نماذج اللغات الكبيرة (LLMs) على أجهزة آيفون وغيرها من أجهزة أبل ذات الذاكرة المحدودة من خلال اختراع تقنية مبتكرة لاستخدام ذاكرة الفلاش.
في الأشهر القليلة الماضية، قامت شركة آبل باختبار "AppleGPT" الذي يمكن أن يتنافس مع ChatGPT. ووفقا لمارك جورمان من بلومبرج، فإن عمل الذكاء الاصطناعي يمثل أولوية بالنسبة لشركة أبل، وتقوم الشركة بتصميم إطار عمل "Ajax" لنماذج اللغات الكبيرة.
يزعم كل من The Information والمحلل Jeff Pu أن شركة Apple ستطلق نوعًا من ميزات الذكاء الاصطناعي التوليدي على iPhone وiPad في نهاية عام 2024 تقريبًا، وهو موعد إطلاق iOS 18. وفقًا لجورمان، يقال إن iOS 18 يتضمن نسخة محسنة من Siri مع إمكانات الذكاء الاصطناعي التوليدية الشبيهة بـ ChatGPT ولديه القدرة على أن يكون تحديث البرنامج "الأكبر" في تاريخ iPhone.