دوره آموزشی هماهنگسازی هوش مصنوعی: اعتبارسنجی، بازخورد کاربران و معیارهای عملکرد
2 ساعت 2 دقیقهمتوسط2025-04-07
مدرسین
Janani Ravi
Certified Google Cloud Architect and Data Engineer
جزئیات دوره
آیا آمادهاید تا با جدیدترین و پیشرفتهترین روندهای اورکستراسیون هوش مصنوعی آشنا شوید؟ در این دوره، مدرس جانانی راوی یک بررسی جامع از نحوه ارزیابی و ادغام مؤثر بازخورد کاربران در مدلهای هوش مصنوعی ارائه میدهد. این دوره به شما کمک میکند تا با اصول و مفاهیم کلیدی در زمینه مدلهای سنتی و مدلهای زبان بزرگ (LLMs) آشنا شوید و یاد بگیرید چگونه میتوانید بازخورد کاربران را در مدلهای خود بگنجانید تا عملکرد بهتری داشته باشند.
جانانی مفاهیم اساسی مانند تکنیکهای اعتبارسنجی، معیارهای عملکرد، مکانیزمهای بازخورد کاربران و بسیاری موارد دیگر را معرفی میکند. در این دوره به طور عملی با روشهای اعتبارسنجی مدلها از جمله اعتبارسنجی متقاطع (Cross-validation) و اعتبارسنجی با استفاده از K-fold آشنا میشوید. همچنین یاد خواهید گرفت که چگونه از معیارهای عملکرد مانند دقت (accuracy)، دقت (precision)، بازیابی (recall)، و همچنین استفاده از یادگیری تقویتی (reinforcement learning) برای بازخورد انسانها و همچنین ارزیابی مدلهای زبان بزرگ از طریق امتیازهایی چون BLEU، ROUGE، و METEOR استفاده کنید.
این دوره به شما کمک میکند تا درک عمیقی از نحوه ارزیابی و بهبود مدلهای هوش مصنوعی داشته باشید و از این ابزارها برای توسعه و بهینهسازی سیستمهای هوش مصنوعی خود بهرهبرداری کنید.
اهداف یادگیری:
درک اصول ارزیابی و ادغام بازخورد کاربران در مدلهای هوش مصنوعی.
آشنایی با روشهای اعتبارسنجی مدلها مانند Cross-validation و K-fold cross-validation.
استفاده از معیارهای مختلف عملکرد برای ارزیابی دقت، دقت، بازیابی و سایر ویژگیها.
کاربرد یادگیری تقویتی برای بهبود بازخورد انسانها در فرایندهای یادگیری.
ارزیابی مدلهای زبان بزرگ (LLMs) با استفاده از معیارهایی مانند BLEU، ROUGE، METEOR.
یادگیری نحوه بهینهسازی مدلها و افزایش دقت آنها با استفاده از بازخوردهای کاربر.
جانانی مفاهیم اساسی مانند تکنیکهای اعتبارسنجی، معیارهای عملکرد، مکانیزمهای بازخورد کاربران و بسیاری موارد دیگر را معرفی میکند. در این دوره به طور عملی با روشهای اعتبارسنجی مدلها از جمله اعتبارسنجی متقاطع (Cross-validation) و اعتبارسنجی با استفاده از K-fold آشنا میشوید. همچنین یاد خواهید گرفت که چگونه از معیارهای عملکرد مانند دقت (accuracy)، دقت (precision)، بازیابی (recall)، و همچنین استفاده از یادگیری تقویتی (reinforcement learning) برای بازخورد انسانها و همچنین ارزیابی مدلهای زبان بزرگ از طریق امتیازهایی چون BLEU، ROUGE، و METEOR استفاده کنید.
این دوره به شما کمک میکند تا درک عمیقی از نحوه ارزیابی و بهبود مدلهای هوش مصنوعی داشته باشید و از این ابزارها برای توسعه و بهینهسازی سیستمهای هوش مصنوعی خود بهرهبرداری کنید.
اهداف یادگیری:
درک اصول ارزیابی و ادغام بازخورد کاربران در مدلهای هوش مصنوعی.
آشنایی با روشهای اعتبارسنجی مدلها مانند Cross-validation و K-fold cross-validation.
استفاده از معیارهای مختلف عملکرد برای ارزیابی دقت، دقت، بازیابی و سایر ویژگیها.
کاربرد یادگیری تقویتی برای بهبود بازخورد انسانها در فرایندهای یادگیری.
ارزیابی مدلهای زبان بزرگ (LLMs) با استفاده از معیارهایی مانند BLEU، ROUGE، METEOR.
یادگیری نحوه بهینهسازی مدلها و افزایش دقت آنها با استفاده از بازخوردهای کاربر.
مهارت ها
Natural Language Processing (NLP)Artificial Intelligence (AI)One-Off
سرفصل ها
0. مقدمه
- 01 - پیش نیازها
- 02 - مروری سریع بر این دوره
1. اعتبارسنجی مدلهای ML و LLM
- 03 - اعتبار سنجی در گردش کار ML
- 04 - انواع اعتبارسنجی متقاطع
- 05 - اعتبار سنجی متقاطع منظم و k-برابر
- 06 - اعتبار سنجی متقاطع طبقه ای و اعتبار متقاطع تو در تو
- 07 - اعتبار سنجی متقاطع K-fold
- 08 - اعتبار سنجی LLM
- 09 - اعتبار سنجی آفلاین
- 10 - مجموعه دادههای طلایی
- 11 - محک زدن
- 12 - AI اعتبار AI
2. ارزیابی مدلهای ML و LLM
- 13 - ارزیابی مدلها با استفاده از معیارها
- 14 - ارزیابی مدلهای رگرسیونی
- 15 - ارزیابی مدلهای طبقه بندی
- 16 - ارزیابی مدلهای خوشه بندی
- 17 - دقت فراخوانی دقیق
- 18 - ارزیابی مدلهای زبان بزرگ (LLM)
- 19 - ارزیابی انسانی
- 20 - روشهای آماری ارزیابی LLM
- 21 - امتیاز ROUGE
- 22 - امتیاز BLEU
- 23 - امتیاز METEOR
- 24 - گیجی
- 25 - روشهای مبتنی بر مدل برای ارزیابی LLM
- 26 - استنتاج زبان طبیعی
- 27 - BLEURT
- 28 - مدلهای داوری
- 29 - ارزیابی LLM
3. جمعآوری و استفاده از بازخورد کاربر در LLM
- 30 - بازخورد کاربران در LLM
- 31 - بازخورد ضمنی و صریح
- 32 - یادگیری تقویتی
- 33 - تقویت یادگیری از بازخورد انسان
نتیجه گیری
- 34 - خلاصه و مراحل بعدی
دوره های مرتبط
- دوره آموزشی RAG، اپهای هوش مصنوعی و عوامل هوش مصنوعی برای امنیت سایبری و شبکهها
- دوره آموزشی ساخت چتباتهای سفارشی با n8n
- دوره آموزشی هوش مصنوعی عملی: ساخت اولین چتبات مکالمهای خودت
- دوره آموزشی ساخت برنامههای ارزیابی LLM با LangChain
- دوره آموزشی یادگیری اصولی GraphRAG
- دوره آموزشی راهنمای کامل ارزیابی مدلهای زبان بزرگ (LLMها)
- دوره آموزشی هوش مصنوعی عملی: ساخت چتبات هوش مصنوعی با GPT-4o و Next.js
- دوره آموزشی هوش مصنوعی عملی: ساخت GPT اختصاصی خودتان