TrueschoTruescho
كل الدورات
بناء خطوط أنابيب بيانات مؤتمتة باستخدام سبّارك وdbt وأيرفلو
Coursera
دورة
غير محدد

بناء خطوط أنابيب بيانات مؤتمتة باستخدام سبّارك وdbt وأيرفلو

Coursera

تعلم تصميم خطوط أنابيب بيانات قادرة على معالجة ملايين السجلات تلقائياً باستخدام أدوات حديثة مثل Apache Spark وdbt وAirflow لضمان الأداء والموثوقية.

غير محدد11 أسبوعالإنجليزية

عن الدورة

تقدم هذه الدورة التدريبية خبرة شاملة في بناء خطوط أنابيب بيانات مؤتمتة وجاهزة للإنتاج قادرة على معالجة ملايين السجلات بشكل تلقائي. ستتعلم تصميم سير العمل الشامل الذي يدمج مصادر بيانات متنوعة مثل قواعد البيانات وواجهات برمجة التطبيقات (APIs) والبث المباشر للبيانات، باستخدام أدوات صناعية معروفة مثل Apache Spark وdbt وApache Airflow. تشمل الدورة إنشاء نماذج بيانات قوية تحفظ التغييرات التاريخية باستخدام أنماط SCD Type 2، وتطبيق تحسينات الأداء التي تقلل زمن المعالجة بنسبة 30٪ أو أكثر. أيضاً، ستتعلم كيفية بناء تدفقات عمل مؤتمتة مع منطق إعادة المحاولة الذكية، ورصد الالتزامات الزمنية والإشعارات لضمان موثوقية التشغيل على نطاق واسع.

ماذا ستتعلم

  • بناء خطوط أنابيب بيانات شاملة من مصادر متعددة باستخدام Spark وdbt وAirflow
  • تصميم نماذج بيانات مع تتبع تاريخي شامل باستخدام أنماط SCD Type 2
  • إنشاء تدفقات عمل مؤتمتة مع منطق إعادة المحاولة ورصد مستوى الخدمة
  • تحسين أداء وظائف Spark عبر التقسيم والتخزين المؤقت

المتطلبات المسبقة

  • مهارات حاسوبية وإنترنت أساسية
  • القدرة على قراءة التعليمات باللغة الإنجليزية وأداء تمارين قصيرة

المدرسون

P

Professionals from the Industry

المواضيع

تحليل البيانات
علوم البيانات
الاحتمالات والإحصاء
دمج البيانات
خطوط أنابيب البيانات
جودة البيانات
إدارة التكوين
تخزين البيانات

معلومات الدورة

المنصةCoursera
المستوىغير محدد
طريقة التعلمغير محدد
السعرمجاني

المهارات

تحليل البيانات
علوم البيانات
الاحتمالات والإحصاء
دمج البيانات
خطوط أنابيب البيانات
جودة البيانات
إدارة التكوين
تخزين البيانات
Apache Airflow
Data Architecture

ابدأ التعلم الآن