هواوي openPangu-Ultra-MoE-718B لا توجد تقنية Nvidia مستخدمة لبناء هذا النموذج - فقط رقائق الذكاء الاصطناعي الصاعدة ، CANN وليس CUDA. "... تم تدريبه من البداية على Ascend NPU ، مع عدد إجمالي للمعلمات 718B و 39B معلمات منشطة لكل رمز مميز. تم تدريب openPangu-Ultra-MoE-718B على ما يقرب من 19 تريليون رمز مميز ، ومجهز بالقدرة على التبديل بين التفكير السريع والبطيء ". يبدو أنه نموذج حديث إن لم يكن أفضل نموذج مفتوح متاح حاليا. الرابط أدناه - يمكنك تنزيله واستخدامه
‏‎26.53‏K