يدعي باحثو مايكروسوفت أنهم طوروا أكبر نموذج للذكاء الاصطناعي 1 بت حتى الآن، والمعروف أيضًا باسمشبكات البت". يُطلق على النموذج اسم BitNet b1.58 2B4T وهو مرخص بموجب ترخيص MITمتاحة للجمهور، يمكن تشغيله على وحدات المعالجة المركزية بما في ذلك Apple M2.
إن شبكات Bitnet هي في الأساس نموذج ضغط مصمم للعمل على أجهزة خفيفة الوزن. في النماذج القياسية، غالبًا ما يتم قياس الأوزان (القيم التي تحدد البنية الداخلية للنموذج) بحيث يؤدي النموذج أداءً جيدًا على مجموعة متنوعة من الآلات. يؤدي تحديد الأوزان إلى تقليل عدد البتات (أصغر الوحدات التي يمكن للكمبيوتر معالجتها) اللازمة لتمثيل تلك الأوزان، مما يسمح للنماذج بالعمل بشكل أسرع على الرقائق ذات الذاكرة الأقل.
تقوم شبكات البت بقياس الأوزان إلى ثلاث قيم: -1، 0، و1. من الناحية النظرية، هذا يجعلها أكثر ذاكرة وأكثر كفاءة من الناحية الحسابية من معظم النماذج اليوم.
يقول باحثو مايكروسوفت إن BitNet b1.58 2B4T هي أول BitNet تحتوي على 2 مليار معلمة، حيث تكون "المعلمات" مرادفة إلى حد كبير لـ "الأوزان". ويدعي الباحثون أن BitNet b1.58 2B4T، الذي تم تدريبه على مجموعة بيانات مكونة من 4 تريليون رمز (تقدر بما يعادل حوالي 33 مليون كتاب)، يتفوق في الأداء على النماذج التقليدية ذات الحجم المماثل.
لكي نكون واضحين، فإن BitNet b1.58 2B4T لا يتفوق تمامًا على نموذج المعلمة المنافسة البالغ 2 مليار، ولكن يبدو أنه يحتفظ بنموذجه الخاص. وفقًا لاختبارات الباحثين، تفوق النموذج على Meta's Llama 3.2 1B، وGemma 3 1B من Google، وQwen 2.5 1.5B من Alibaba في معايير تشمل GSM8K (مجموعة من أسئلة الرياضيات في المدارس الابتدائية) وPIQA (اختبار لقدرات المنطق المنطقي الفيزيائي).
ولعل الأمر الأكثر إثارة للإعجاب هو أن BitNet b1.58 2B4T أسرع من النماذج الأخرى ذات الحجم المماثل - في بعض الحالات أسرع مرتين - بينما يستخدم جزءًا صغيرًا فقط من الذاكرة.
ومع ذلك، هناك مشكلة. يتطلب تحقيق هذا النوع من الأداء استخدام إطار عمل Microsoft المخصص bitnet.cpp، والذي يعمل حاليًا على أجهزة معينة فقط. ولم يتم بعد إدراج وحدات معالجة الرسومات، التي تهيمن على عالم البنية التحتية للذكاء الاصطناعي، في قائمة الرقائق المدعومة.
في ملخص،شبكات البتقد يكون المستقبل مشرقًا، خاصة بالنسبة للأجهزة ذات الموارد المحدودة، لكن التوافق لا يزال يمثل مشكلة رئيسية ومن المرجح أن يظل كذلك.