شهدت الأوساط الأكاديمية والتقنية مؤخراً إعلاناً مهماً من مختبر Sky Computing في جامعة كاليفورنيا – بيركلي، حيث كشفت مجموعة الباحثين عن نموذج الذكاء الاصطناعي Sky-T1-32B-Preview.
ويُعتبر هذا النموذج واحدًا من أولى النماذج المفتوحة المصدر التي تُظهر قدرات متقدمة في مجال الاستنتاج المنطقي، مع إمكانية إعادة إنتاجه من الصفر بتكلفة منخفضة تقل عن 450 دولارًا.
خفض تكاليف التدريب بفضل البيانات الاصطناعية
لطالما ارتبطت نماذج الذكاء الاصطناعي المتطورة بتكاليف تدريب باهظة تصل إلى ملايين الدولارات. ومع ذلك، أظهر Sky-T1 تغييراً في هذا الواقع.
فقد اعتمد الباحثون على بيانات تدريبية اصطناعية وطرق مبتكرة لتقليل التكاليف، وهو ما ساهم في تحقيق هذا الإنجاز.
على سبيل المثال، أحد النماذج السابقة (Palmyra X004) الذي أطلقته شركة Writer، تم تدريبه بالكامل تقريبًا باستخدام بيانات اصطناعية بتكلفة 700,000 دولار.
ولإنتاج Sky-T1، استخدم فريق NovaSky نموذجًا سابقًا من Alibaba والمعروف بـ QwQ-32B-Preview لتوليد بيانات أولية.
بعد ذلك، تم تحسين البيانات باستخدام نموذج GPT-4o-mini من OpenAI ليصبح أكثر قابلية للاستخدام.
أما بالنسبة إلى عملية التدريب، فقد تمت على 8 وحدات معالجة Nvidia H100 GPUs خلال 19 ساعة فقط، وهو ما يظهر كفاءة تقنية ملحوظة.
وعند اختباره، تفوق Sky-T1 على نسخة سابقة من نموذج OpenAI والمعروفة بـ o1 preview في اختبارات مثل MATH500 (اختبارات رياضيات تنافسية) وLiveCodeBench (اختبارات برمجية).
إلا أن النموذج أظهر أداءً أقل في GPQA-Diamond، وهي مجموعة من الأسئلة المتخصصة في الفيزياء والكيمياء وعلم الأحياء.
ويرى فريق NovaSky أن Sky-T1 ليس سوى البداية في تطوير نماذج مفتوحة المصدر بقدرات استنتاج متقدمة.
ويعمل الفريق حاليًا على تحسين الكفاءة وتعزيز الدقة في النماذج المستقبلية.
ووفقًا لما نشره الفريق، فإن الهدف المستقبلي يشمل استكشاف تقنيات جديدة تعزز الأداء مع الحفاظ على التكلفة المنخفضة.
بالختام، فإن نموذج Sky-T1 يعتبر خطوة هامة في مجال الذكاء الاصطناعي المفتوح المصدر، حيث أظهر أنه من الممكن تحقيق توازن بين الأداء العالي والتكلفة المعقولة.
وقد يشجع هذا الكثير من المطورين على بناء نماذجهم الخاصة، بل وربما تتفوق أيضًا في بعض المعايير.
فالأمر ليس قاصرًا فقط على الشركات العملاقة ذات الموارد الضخمة، وهذا ما أسميه ب"الباب المفتوح" في عالم الذكاء الاصطناعي.
الوصول إلى صفحة النموذج من هنا
