Mistral 7B Instruct v0.2
نموذج 7B سريع وعملي للتطبيقات الإنتاجية العامة ذات التكلفة المتوازنة.
ما هو النموذج
`mistralai/Mistral-7B-Instruct-v0.2` نموذج تعليمات 7B يستخدم بكثرة في واجهات الإنتاج بسبب توازن الجودة/الكمون.
ماذا يفعل
- محادثة عامة.
- تلخيص وتوليد نصوص تشغيلية.
- مساعدين داخليين بتكلفة مناسبة.
مقارنة سريعة
- أقل تخصصًا للعربية من `ALLaM` و`JAIS`.
- غالبًا أفضل كخيار افتراضي عام منخفض المخاطر.
أفضل استخدام على DCP
- MVPs سريعة.
- مساعدين عامين غير متخصصين بمجال عربي عميق.
متطلبات العتاد
- الحد الأدنى العملي: `16 GB VRAM`.
- GPU مناسب: `RTX 3090` أو `RTX 4090`.
التشغيل على DCP
- قالب موصى به: `vllm-serve`
- معرف النموذج:
mistralai/Mistral-7B-Instruct-v0.2- مثال طلب API:
{
"job_type": "vllm_serve",
"params": {
"model": "mistralai/Mistral-7B-Instruct-v0.",
"max_model_len": ,
"dtype": "float16"
}
}الترخيص والاستخدام التجاري
- الترخيص: `Apache 2.0`.
- الاستخدام التجاري: مسموح ضمن شروط الترخيص.