بناء بحث متعدد الوسائط وأنظمة RAG

في هذا المشروع، ستتعلم بناء أنظمة بحث متعددة الوسائط وأنظمة RAG (البحث المدعوم بالاستخلاص) التي تعزز نماذج اللغة الكبيرة عبر ضم بيانات ملائمة في سياق الأسئلة. يركز المشروع على تضمين أنواع متعددة من الوسائط مثل النصوص، الصور، الصوت، والفيديو. ستبدأ بفهم كيفية تدريب النماذج متعددة الوسائط باستخدام التعلم التبايني، ثم بناء بحث متعدد الوسائط لاسترجاع السياقات المناسبة عبر أنواع بيانات مختلفة. بعد ذلك، ستتعلم تدريب نماذج اللغة لفهم البيانات متعددة الوسائط عبر تعديل التعليمات المرئية واستخدامها في أمثلة التفكير البصري. أخيرًا، ستنشئ نظام RAG متكامل يحلل سياقات البحث متعددة الوسائط لتوليد إجابات دقيقة ومفيدة. هذا المشروع موجه للمتعلمين ذوي المعرفة المتوسطة في علوم الكمبيوتر والتحليل البرمجي.

• فهم التعلم التبايني لإنشاء تضمينات مستقلة عن نوع البيانات
• بناء أنظمة RAG متعددة الوسائط لاسترجاع وتحليل السياق
• تنفيذ تطبيقات البحث متعددة الوسائط وأنظمة التوصية متعددة المتجهات

• معرفة أساسية بالبرنامج أو سير العمل المستخدم في المشروع
• القدرة على متابعة التعليمات خطوة بخطوة باللغة الإنجليزية