الحوسبة بالبيانات الضخمة باستخدام سبارك

تظهر أنظمة البيانات الضخمة مثل Hadoop وSpark كتقنيات تمكينية لإدارة كميات هائلة من البيانات عبر مئات، بل وحتى آلاف، من عُقد الحوسبة. وفي الوقت نفسه، جعلت منصات الحوسبة السحابية هذه التقنيات متاحة بسهولة للأفراد كما للمؤسسات الكبرى، مما يسرّع تبنّي حلول معالجة البيانات على نطاق واسع. هذه الدورة هي نسخة إلكترونية مُكيّفة من المقرر المميّز MSBD 5003 «الحوسبة بالبيانات الضخمة» المُقدَّم ضمن برنامج الماجستير الشهير في «تقنية البيانات الضخمة». وتهدف إلى تزويد المتعلمين بفهم نظري متين وخبرة تطبيقية مباشرة في أنظمة البيانات الضخمة، مع اعتماد Spark كمنصة نموذجية للتعلّم والتطبيق. إلى جانب أكثر من 20 ساعة من مقاطع المحاضرات المصوّرة، تتضمن الدورة أكثر من 100 سؤال اختيار من متعدد و20 سؤالاً برمجياً. صُممت هذه المواد لتقوية الفهم المفاهيمي، وقياس الاستيعاب، وتطوير مهارات حل المشكلات وبناء الحلول العملية لمعالجة البيانات على نطاق كبير. بنهاية الدورة، سيكون لدى المتعلم أساس واضح حول كيفية عمل منصات البيانات الضخمة، وكيفية الاستفادة من بيئات الحوسبة السحابية لتشغيلها، وكيفية تطبيق Spark بفعالية في مهام المعالجة والتحليل، مع التركيز على الجمع بين النظرية والممارسة لبناء حلول قابلة للتوسع والأداء العالي.

• برمجة Spark باستخدام واجهتي RDD وDataFrame
• استخدام حزم وأدوات مفيدة مثل ML وGraphX/GraphFrames وSparkStreaming
• فهم البنية الداخلية لـ Spark وتقنيات تحسين الأداء
• تصميم الخوارزميات لأنظمة البيانات الضخمة

• أساسيات برمجة بايثون