هندسة نماذج اللغات الكبيرة
2 published articles
المختبرات والأبحاث3 min read
أبحاث الذكاء الاصطناعي
Memory Decoder: ذاكرة إضافية بحجم 6.9 مليار معلمة تجعل نموذجًا بحجم 410 ملايين يتفوق على Pythia-12B
يفصل Memory Decoder at Scale الذاكرة طويلة المدى عن الاستدلال في نماذج اللغة الكبيرة. ذاكرة مُدرَّبة مسبقًا بحجم 6.9 مليار معلمة رفعت Pythia-410M فوق Pythia-12B على 17 معيارًا مع معلمات أقل بنسبة 39%؛ وأضافت ذاكرات مجالية بحجم 1.7 مليار معلمة أكثر من 9 نقاط إلى Qwen3 Base على كل مقياس تم اختباره.
2026-07-31
نماذج اللغات الكبيرة2 min read
بنية خالية من الرموز
Aleph Alpha تطلق T-Free: بنية خالية من الرموز للذكاء الاصطناعي السيادي
Aleph Alpha تكشف عن T-Free، وهي بنية لنماذج اللغات الكبيرة خالية من الرموز تقوم بتعيين الكلمات مباشرة إلى متجهات. يوفر الأسلوب ما يقرب من سبعة أحرف لكل متجه بدلاً من الأربعة النموذجية، مما يقلل التكاليف واستهلاك الطاقة مع تحسين الأداء في المجالات المتخصصة واللغات منخفضة الموارد.
2026-07-03