مقدمة في نماذج الترانسفورمر لمعالجة اللغة الطبيعية

تقدّم هذه الدورة تعليمًا عمليًا حول هياكل الترانسفورمر مثل BERT وGPT وT5، حيث يكتسب المشاركون معرفة عميقة في آليات الانتباه، التعلم بالنقل، وضبط النماذج. يتم دعم التعلم من خلال تمارين برمجية ودراسات حالة تركز على بناء وتحسين نماذج معالجة اللغة الطبيعية لتطبيقات متنوعة. في ختام الدورة، يصبح المتعلمون قادرين على تطوير نماذج متقدمة وتطبيق استراتيجيات النشر وإدارة دورة حياة النماذج، مما يمكنهم من تقديم حلول NLP فعّالة وقابلة للتشغيل في سياقات حقيقية.

• إتقان المفاهيم الرياضية والأساسية لنماذج الترانسفورمر بما يشمل آليات الانتباه والتضمينات
• الحصول على خبرة في ضبط ونشر نماذج BERT وGPT وT5 للمهام كالتصنيف، الإجابة على الأسئلة، وتوليد النصوص
• تطبيق التعلم بالنقل، إدارة عمليات التعلم الآلي واستراتيجيات النشر لخلق حلول NLP متينة وقابلة للتشغيل

• فهم أساسي للمفاهيم والمصطلحات المرتبطة
• الاستعداد للتطبيق من خلال تمارين أو مشاريع عملية