وظّف كبار مهندسي vLLM المُدقَّقين

التوظيف الخاطئ في vLLM يُقيم عنقود معالجاتٍ رسومية يجلس عند 20% من الاستغلال، ويخدم الطلبات واحداً تلو الآخر بينما الدفعات المستمرة تُضاعِف الإنتاجية، ويُكلِّف لكل رمزٍ أكثر من واجهة OpenAI التي كان يُفترض أن يحلّ محلّها. استضافة النموذج اللغوي ذاتياً لا تكون منطقيةً إلا حين تُنفَّذ جيّداً؛ فإن نُفِّذت بسوء، جمعت أسوأ العالمين: تكلفة معالجاتٍ ثابتة عالية، وإنتاجية منخفضة.

استضافة نموذج لغوي ذاتياً هي الإجابة للفرق التي لا تقدر أن تُرسِل بيانات إلى واجهة خارجية: المصارف، والحكومات، والرعاية الصحية، وكل من لديه قواعد إقامة بيانات. لكن القيمة لا تظهر إلا بهندسة حقيقية. ما نُدقِّق عليه هو: هل يقدرون على تشغيل vLLM بإنتاجية عالية: الدفعات المستمرة، وPagedAttention، والتوازي التنسوري عبر المعالجات، والتكميم، ونقطة نهاية متوافقة مع OpenAI فلا تتغيّر شيفرة تطبيقكم. هنا تلتقي MLOps مع واقع إقامة البيانات في الخليج.

ما نُقدّمه

01

خدمة نماذج لغوية مستضافة ذاتياً عبر vLLM: دفعات مستمرة وPagedAttention لإنتاجية عالية.

02

توازٍ تنسوري وضبط استغلال المعالجات الرسومية فيكون العتاد الذي تدفعون ثمنه هو العتاد الذي تستخدمونه.

03

تكميم (AWQ، GPTQ) لملاءمة نماذج أكبر على معالجات أقل دون فقدان الجودة.

04

خدمة متوافقة مع OpenAI فلا تتغيّر شيفرة تطبيقكم، إضافة إلى التوسّع التلقائي والرصد.

كيف تُميّز مهندس
vLLM القوي

كيف يسير
التعاقد

اتفاقية عدم إفصاح (NDA) عند الطلب. إن انطوى إيجازك على تفاصيل حسّاسة تخصّ المشروع أو الفريق أو الملكية الفكرية، نُقدِّم اتفاقية عدم إفصاح تمهيدية كخدمة. وهي غير مطلوبة لاستلام القائمة المختصرة.

ملف تعريفي
نموذجي

مهندس عمليات تعلّم آلة كبير، سبع سنوات في المنصات والبنية التحتية. بنى منصة خدمة النماذج اللغوية المستضافة ذاتياً لبنك من الفئة الأولى لم يقدر أن يُرسِل بيانات إلى واجهة خارجية: vLLM مع دفعات مستمرة وتوازٍ تنسوري، وتكميم AWQ لملاءمة نموذج بحجم 70 مليار على أربعة معالجات، ونقطة نهاية متوافقة مع OpenAI فلم يُغيِّر فريق التطبيق شيئاً. حقّق ثلاثة أضعاف إنتاجية الإعداد الساذج بنفس تكلفة المعالجات. قوي في vLLM، Kubernetes، CUDA، Prometheus، Terraform. متاح للعمل عن بُعد في أوروبا ودول الخليج، متعاقد عبر Mahala.ai. مُقيَّم عند 91/100.

أسئلة ذات صلة

اطلب قائمة مرشحين مُدقَّقين

نبذة عنك
نبذة عن الوظيفة
نبذة عن المشروع

احجز مكالمة