دوره آموزشی راهنمای کامل ارزیابی مدل‌های زبان بزرگ (LLMها)

تو این دوره جامع، سینان اوزدمیر، کارشناس خبره در هوش مصنوعی و مدل‌های زبانی بزرگ (LLM)، همه چیز رو درباره ارزیابی عملکرد این مدل‌ها بهت آموزش می‌ده. از آشنایی کامل با فرآیند ارزیابی مدل‌های زبانی بزرگ، هوش مصنوعی چندرسانه‌ای (Multimodal AI)، و برنامه‌های هوشمند مبتنی بر AI مثل ایجنت‌ها و RAG (تولید با بازیابی) گرفته تا روش‌های دقیق و حرفه‌ای برای سنجش و بهبود این ابزارهای قدرتمند اما پیچیده. با یادگیری این دوره، می‌تونی مطمئن بشی که مدل‌ها و برنامه‌های هوش مصنوعی که استفاده می‌کنی، بهترین عملکرد و کیفیت رو تو دنیای واقعی دارن.

با این مهارت‌ها، آماده می‌شی تا مدل‌های زبانی بزرگ رو به درستی ارزیابی و بهینه کنی و بهترین برنامه‌های هوش مصنوعی روز رو بسازی.

اهداف یادگیری:
تفاوت بین کارهای تولید محتوا و درک متن رو بفهمی
با معیارهای مهم ارزیابی برای انواع وظایف آشنا بشی
یاد بگیری چطور آزمون‌های چندگزینه‌ای (multiple-choice) رو ارزیابی کنی
بتونی پاسخ‌های متنی آزاد (free text) رو سنجش کنی
ارزیابی وظایف جاسازی (embedding) رو انجام بدی
کارهای دسته‌بندی (classification) رو ارزیابی کنی
با استفاده از BERT و ChatGPT یک دسته‌بند (classifier) مدل بسازی
مدل‌ها رو با بنچمارک‌ها (benchmark) بسنجی
مدل‌های زبانی رو به صورت عمیق بررسی کنی (probe)
تکنیک‌های تنظیم دقیق (fine-tuning) مدل‌ها رو یاد بگیری
داده‌ها رو برای کیفیت بهتر پاکسازی و ارزیابی کنی
عملکرد ایجنت‌های هوشمند رو بسنجی
سیستم‌های تولید همراه با بازیابی (RAG) رو ارزیابی کنی
موتورهای پیشنهاددهی (recommendation engines) رو بررسی کنی
با استفاده از ارزیابی، پدیده کاهش کیفیت AI یا AI drift رو کنترل کنی