متوسط
عمليات نماذج اللغة الكبيرة وتقييم الذكاء الاصطناعي: المراقبة والجودة في الإنتاج
أتقن عمليات نماذج اللغة الكبيرة على مستوى الإنتاج وأطر التقييم. تعلم قياس جودة الذكاء الاصطناعي باستخدام LangSmith و MLflow و W&B Weave. ابنِ خطوط أنابيب التقييم، ونفّذ المراقبة، وضمن موثوقية أنظمة الذكاء الاصطناعي في الإنتاج.
٧٢ دقيقة٢٤ درسًا٦ وحداتالذكاء الاصطناعي
ماذا ستتعلم
- تصميم أطر تقييم شاملة لنماذج اللغة الكبيرة لأنظمة الإنتاج
- تنفيذ خطوط أنابيب المراقبة باستخدام LangSmith و MLflow و W&B Weave
- إنشاء مقاييس تقييم مخصصة لتطبيقات الذكاء الاصطناعي المتخصصة
- بناء خطوط أنابيب اختبار آلية لضمان جودة الذكاء الاصطناعي المستمرة
- تصحيح وتحسين أداء نماذج اللغة الكبيرة باستخدام التتبع والتحليلات
محتوى الدورة
مقدمة في عمليات نماذج اللغة الكبيرة
٤ دروس · ١٢ دقيقة- ما هي عمليات نماذج اللغة الكبيرة؟بدون تسجيل٣ دقائق
- مقفل حتى تسجّل في الدورةدورة حياة نماذج اللغة الكبيرة في الإنتاج٣ دقائق
- مقفل حتى تسجّل في الدورةالمقاييس الرئيسية لجودة نماذج اللغة الكبيرة٣ دقائق
- مقفل حتى تسجّل في الدورةالتطوير القائم على التقييم٣ دقائق
- اختبار: الوحدة ١: مقدمة في عمليات نماذج اللغة الكبيرة
أساسيات تقييم نماذج اللغة الكبيرة
٤ دروس · ١٢ دقيقة- مقفل حتى تسجّل في الدورةتقييم استخدام LLM كحكم٣ دقائق
- مقفل حتى تسجّل في الدورةالتقييم المرجعي مقابل التقييم غير المرجعي٣ دقائق
- مقفل حتى تسجّل في الدورةالتقييم البشري والتعليقات التوضيحية٣ دقائق
- مقفل حتى تسجّل في الدورةتصميم مجموعات بيانات التقييم٣ دقائق
- اختبار: الوحدة ٢: أساسيات تقييم نماذج اللغة الكبيرة
التعمق في LangSmith
٤ دروس · ١٢ دقيقة- مقفل حتى تسجّل في الدورةإعداد LangSmith والتتبع٣ دقائق
- مقفل حتى تسجّل في الدورةوكيل الرؤى والتحليلات٣ دقائق
- مقفل حتى تسجّل في الدورةتقييم المحادثات متعددة الأدوار٣ دقائق
- مقفل حتى تسجّل في الدورةالمقيّمون المخصصون ومجموعات البيانات٣ دقائق
- اختبار: الوحدة ٣: التعمق في LangSmith
MLflow لتقييم LLM
٤ دروس · ١٢ دقيقة- مقفل حتى تسجّل في الدورةإعداد MLflow GenAI٣ دقائق
- مقفل حتى تسجّل في الدورةمسجلو LLM المدمجون٣ دقائق
- مقفل حتى تسجّل في الدورةالحكام المخصصون مع make_judge٣ دقائق
- مقفل حتى تسجّل في الدورةتكامل DeepEval وRAGAS٣ دقائق
- اختبار: الوحدة ٤: MLflow لتقييم LLM
W&B Weave للتقييم
٤ دروس · ١٢ دقيقة- مقفل حتى تسجّل في الدورةمقدمة W&B Weave٣ دقائق
- مقفل حتى تسجّل في الدورةإعداد خطوط أنابيب التقييم٣ دقائق
- مقفل حتى تسجّل في الدورةمقارنة التجارب٣ دقائق
- مقفل حتى تسجّل في الدورةLLM-as-Judge في Weave٣ دقائق
- اختبار: الوحدة ٥: W&B Weave للتقييم
مراقبة الإنتاج والخطوات التالية
٤ دروس · ١٢ دقيقة- مقفل حتى تسجّل في الدورةالتنبيهات واتفاقيات مستوى الخدمة٣ دقائق
- مقفل حتى تسجّل في الدورةتتبع التكلفة والتحسين٣ دقائق
- مقفل حتى تسجّل في الدورةCI/CD لجودة LLM٣ دقائق
- مقفل حتى تسجّل في الدورةالخطوات التالية ورحلتك في LLMOps٣ دقائق
- اختبار: الوحدة ٦: مراقبة الإنتاج والخطوات التالية