لورا طريقة ضبط دقيقة موفرة للمعلمات تُجمّد أوزان النموذج الأصلية وتُحقن مصفوفات صغيرة قابلة للتدريب في كل طبقة، مما يُقلّص الذاكرة والحساب المطلوبين بشكل كبير. بدلاً من تحديث مليارات المعلمات، تدرّب بضعة ملايين فقط، مما يجعل تكييف النموذج بسعر معقول على وحدات الرسومات العامة. يمكن لشركة ناشئة مغربية ضبط نموذج لغة مفتوح على بيانات الزبائن بالدارجة بوحدة رسومات واحدة بدلاً من عنقود مكلف.
نماذج ولغوية كبيرةLoRA (Low-Rank Adaptation)
لورا (LoRA)
مصطلحات ذات صلة
تعلّم استخدام هذه المفاهيم عملياً.
انضم إلى 212AY Academy ←