Home › توظيف › وظّف كبار مهندسي Databricks المُدقَّقين

وظّف كبار مهندسي Databricks المُدقَّقين

التوظيف الخاطئ في Databricks يُفرِط في تخصيص العناقيد، ولا يُشغِّل OPTIMIZE أو VACUUM على جداول Delta، ويكتب مهام Spark تُبعثِر مجموعة البيانات كاملة بينما يكفي ربطٌ بثّي (Broadcast Join). والنتيجة Lakehouse يُكلِّف ثلاثة أضعاف ما ينبغي، ويُشغِّل في ساعاتٍ مهاماً ينبغي أن تستغرق دقائق. عمل Databricks الكبير هو اقتصاديات العناقيد وضبط Spark بقدر ما هو تصميم خطوط الأنابيب.

أيّ شخص يستطيع أن يُشغِّل عنقود Databricks. السؤال هو: هل يقدر أن يُصمِّم Lakehouse يبقى سريعاً وميسوراً: تحسين جداول Delta Lake، واستعلامات مُسرَّعة بـ Photon، وحوكمة Unity Catalog عبر مساحات العمل، وعناقيد مهام بحجم صحيح، ومهام Spark مضبوطة لتجنّب البعثرة غير الضرورية. هذا ما نُدقِّق عليه مهندسي Databricks.

ما نُقدّمه

01

بنية Lakehouse على Delta Lake: تصميم الجداول، وOPTIMIZE والترتيب Z، وتطوّر المخطّط دون كسر المهام اللاحقة.

02

تحسين مهام Spark: ضبط التقسيمات، والربط البثّي، وتسريع Photon لخفض زمن التشغيل والتكلفة.

03

حوكمة Unity Catalog: النسب، والتحكّم في الوصول، والتدقيق عبر مساحات العمل لبيئة منظَّمة.

04

تحجيم عناقيد المهام بشكل صحيح، وDelta Live Tables لخطوط تصريحية، وMLflow للفرق التي تُدرِّب النماذج أيضاً.

كيف تُميّز مهندس
Databricks القوي

  • يُحجِّم عناقيد المهام بدقّة ويُشغِّل OPTIMIZE وVACUUM على جداول Delta كعادةٍ روتينية.
  • يعرف متى يُجدي Photon ومتى لا يُجدي، بدل تفعيله في كل موضع.
  • يضبط مهام Spark لتجنّب البعثرة غير الضرورية، ويقدر أن يُريَك مهمّةً خفضها من ساعاتٍ إلى دقائق.

كيف يسير
التعاقد

  • أخبِرنا: الدور، والتقنيات، ومرحلة المشروع، والجدول، ونموذج الوصول (VDI).
  • نُطابِق من قاعدة خبرائنا المُدقَّقة.
  • ملفّان أو ثلاثة، دون أسماء أو صور، خلال 72 ساعة من تلقّي الإيجاز الواضح.
  • قابِل النهائيين، واختر الأنسب.
  • تتولّى Mahala التعاقد، والتحقّقات المهنية والأمنية عند الحاجة، والانطلاق. عقد واحد، وفاتورة شهرية واحدة.

اتفاقية عدم إفصاح (NDA) عند الطلب. إن انطوى إيجازك على تفاصيل حسّاسة تخصّ المشروع أو الفريق أو الملكية الفكرية، نُقدِّم اتفاقية عدم إفصاح تمهيدية كخدمة. وهي غير مطلوبة لاستلام القائمة المختصرة.

اطلب قائمة مرشحين مُدقَّقين
احجز مكالمة

ملف تعريفي
نموذجي

مهندس بيانات كبير، عشر سنوات في المصارف والطاقة. بنى Lakehouse على Databricks خلف نظام المخاطر اللحظي لبنك أوروبي من الفئة الأولى: تحسين Delta Lake، واستعلامات مُسرَّعة بـ Photon، وحوكمة Unity Catalog لتدقيق تنظيمي. خفض مهمة المخاطر الليلية من أربع ساعات إلى أربعين دقيقة عبر ضبط Spark. قوي في Databricks، Spark، Delta Lake، Python، Azure. متاح للعمل عن بُعد في أوروبا ودول الخليج، متعاقد عبر Mahala.ai. مُقيَّم عند 90/100.

أسئلة ذات صلة

مهندسو Databricks لدينا يُحجِّمون عناقيد المهام بشكل صحيح، ويستخدمون Photon حيث يُجدي، ويُشغِّلون OPTIMIZE وVACUUM على جداول Delta، ويضبطون مهام Spark لتجنّب البعثرة غير الضرورية. اقتصاديات العناقيد جزء من سقف التدقيق، لا أمر ثانوي.

نعم. تحسين جداول Delta Lake وحوكمة Unity Catalog عبر مساحات العمل كفاءتان أساسيتان. مهندسونا يُعِدّون النسب، والتحكّم في الوصول، والتدقيق للبيئات المنظَّمة.

نعم. ضبط التقسيمات، والربط البثّي، واستراتيجية التخزين المؤقت، وتسريع Photon. تكليف شائع هو خفض مهمة ليلية بطيئة من ساعات إلى دقائق.

نعم. مهندسو Databricks الذين يعملون أيضاً مع MLflow لتتبّع التجارب وسجلّ النماذج موجودون على القاعدة. أخبرونا بمتطلب تعلّم الآلة في الطلب.

نعم. معظم تعييناتنا في المؤسسات تعمل داخل بيئات بعيدة منظَّمة. نُؤكِّد متطلبات الوصول في الطلب.

التوصيل الكبير يُسعَّر على أساس أجر يومي أو ساعي، حسب نموذج التكليف. نُشارِك نطاقات الأجور خلال المكالمة الأولى.

اطلب قائمة مرشحين مُدقَّقين

نبذة عنك
نبذة عن الوظيفة
نبذة عن المشروع

احجز مكالمة