الضبط الدقيق يعلّم نموذجًا قائمًا صيغتك أو أسلوبك أو مهمتك من خلال أمثلة. ويحاسبك المزوّدون على الرموز المعالجة في التدريب مضروبةً في عدد الدورات، ثم على كل رمز عند استخدام النموذج المضبوط. وفاتورة التدريب غالبًا أصغر مما يخشاه الناس؛ أما تكلفة التشغيل وعدد التجارب فهما موضع تجاوز الميزانيات.
روجعت الأرقام في بواسطة Muhammad Ahmad بالاستناد إلى OpenAI: Fine-tuning pricing، Anthropic: Pricing و Google Cloud: Vertex AI fine-tuning pricing. الأسعار والقواعد تتغير، فتأكد من المصدر الرسمي قبل الاعتماد عليها. كيف نتحقق من الحسابات
كيف تعمل
الرموز المدرَّبة = الأمثلة × متوسط الرموز في المثال × الدورات. فـ 5,000 مثال من 800 رمز تعني مجموعة بيانات من 4 ملايين رمز؛ وثلاث دورات تعني تدريب 12 مليون رمز.
تكلفة التدريب للجولة = الرموز المدرَّبة ÷ 1,000,000 × السعر لكل مليون. تحتاج معظم المشاريع إلى عدة جولات لضبط البيانات والإعدادات، لذا تضرب الحاسبة الناتج في عدد الجولات المتوقعة.
يُسعَّر تشغيل النموذج المضبوط لكل طلب، مثل أي استدعاء API: رموز الإدخال × سعر الإدخال + رموز الإخراج × سعر الإخراج. وغالبًا ما تُسعَّر النماذج المضبوطة أعلى من نماذجها الأساسية، فقارن هذا الرقم الشهري بخيار استخدام نموذج أساسي أكبر مع صياغة جيدة.
الأسعار الافتراضية أمثلة لتوضيح الحساب وليست عروض أسعار. تتفاوت أسعار الضبط الدقيق كثيرًا بين المزوّدين والنماذج الأساسية، فأدخل الأرقام الحالية من صفحة أسعار المزوّد.
مثال محلول
تضبط نموذجًا على 5,000 مثال بمتوسط 800 رمز لمدة 3 دورات، فيُدرَّب 12 مليون رمز في كل جولة. بسعر $25 للمليون تكون التكلفة $300 للجولة، أو $900 لثلاث جولات. وتشغيل 100,000 طلب شهريًا بواقع 600 رمز إدخال و250 رمز إخراج، بأسعار النموذج المضبوط $3.75 و$15 للمليون، يكلّف $600 شهريًا، فيبلغ إجمالي السنة الأولى $8,100.
أمثلة إضافية
التدريب غالبًا هو الجزء الأصغر. فعند مليون طلب شهريًا، تبلغ تكلفة تشغيل النموذج المضبوط $6,000 شهريًا، وتكلفة السنة الأولى نحو $72,900، مقابل $900 للتدريب.
أخطاء شائعة
- وضع الميزانية للتدريب فقط ونسيان ارتفاع أسعار تشغيل النماذج المضبوطة.
- إجراء تجربة واحدة بينما يلزم عادةً عدة تجارب.
- الضبط الدقيق قبل تجربة صياغات أفضل أو الاسترجاع.
- تجاهل تكلفة إعداد بيانات التدريب وتنظيفها.
أسئلة يطرحها الناس
كم تبلغ تكلفة الضبط الدقيق لنموذج LLM؟
اضرب رموز مجموعة بياناتك في عدد الدورات وفي سعر التدريب لدى المزوّد لكل مليون رمز. قد تكلّف المجموعات الصغيرة بضعة دولارات للجولة، والكبيرة مئات الدولارات أو أكثر. ثم أضف تكلفة تشغيل النموذج المضبوط، وهي عادةً الرقم الأكبر على مدى سنة.
كم مثالًا للتدريب أحتاج؟
يقترح المزوّدون غالبًا البدء بعدد من عشرات إلى بضع مئات من الأمثلة عالية الجودة، ثم الزيادة إن تحسّنت النتائج. فالجودة والاتساق أهم من الكمّ: إذ كثيرًا ما تتفوق 500 مثال نظيف على 5,000 مثال مشوَّش.
ما الدورة (epoch) في الضبط الدقيق؟
هي مرور كامل واحد على بيانات التدريب. ثلاث دورات تعني أن كل مثال يُرى ثلاث مرات، وأنك تدفع ثلاثة أضعاف رموز مجموعة البيانات. وقد يؤدي الإفراط في الدورات إلى أن يحفظ النموذج الأمثلة بدل أن يتعلم النمط.
هل الضبط الدقيق أرخص من هندسة الصياغات؟
أحيانًا. فالنموذج المضبوط يستطيع استخدام صياغة أقصر بكثير، مما يخفض رموز الإدخال في كل طلب. وإذا كانت صياغتك الحالية طويلة وحجم عملك كبيرًا، فقد تفوق هذه الوفورات تكلفة التدريب والسعر الأعلى لكل رمز.
هل أضبط النموذج أم أستخدم RAG؟
الضبط الدقيق يغيّر سلوك النموذج: الصيغة والأسلوب ومهمة ضيقة. أما الاسترجاع (RAG) فيمنحه حقائق لم يكن يعرفها. إذا كانت المشكلة معرفة ناقصة أو متغيرة فاستخدم RAG. وإذا كانت أسلوبًا أو اتساقًا فالضبط الدقيق أنسب.