دوره آموزشی ریسکهای امنیتی در هوش مصنوعی و یادگیری ماشین: دستهبندی حملات و حالتهای خطا
1 ساعت 46 دقیقهمتوسط2025-11-07
مدرسین
Diana Kelley
CTO and Cofounder of SecurityCurve
جزئیات دوره
مثل هر نرمافزار یا فرآیند دیگه، ماشین لرنینگ (ML) هم میتونه مورد حمله قرار بگیره. برای اینکه چیزی رو درست محافظت کنی، اول باید بفهمی که سیستم چطور و کجا آسیبپذیره. توی این دوره، دیانا کلی به متخصصان تهدید و امنیت نشون میده که ML چطور ریسکهاش رو از نظر تأثیر و حجم عظیم دادهای که نیاز داره تغییر میده.
یاد میگیری که سیستمهای ML چطور میتونن وقتی تحت حمله قرار میگیرن، شکست بخورن و اینکه خطاهای طراحی هم میتونن باعث مشکلات عملیاتی، نشت دادهها، و ریسکهای امنیتی و حریم خصوصی بشن. همچنین با روشها و تکنیکهای مؤثر برای ساختن ML مقاوم و پایدار آشنا میشی تا بتونی سیستمهای هوش مصنوعی رو امنتر و قابل اعتمادتر بسازی.
اهداف یادگیری
درک میکنی که حالتهای شکست (حملات مخرب و خطاهای ناخواسته) چرا مهم هستن و چطور امنیت ML/AI رو تحت تأثیر قرار میدن.
با انواع حالتهای شکست، علتهاشون و مثالهای واقعی آشنا میشی.
یاد میگیری چطور حالتهای شکست رو وارد مدلسازی تهدید، تستها و اجرای کنترلهای امنیتی کنی.
یاد میگیری که سیستمهای ML چطور میتونن وقتی تحت حمله قرار میگیرن، شکست بخورن و اینکه خطاهای طراحی هم میتونن باعث مشکلات عملیاتی، نشت دادهها، و ریسکهای امنیتی و حریم خصوصی بشن. همچنین با روشها و تکنیکهای مؤثر برای ساختن ML مقاوم و پایدار آشنا میشی تا بتونی سیستمهای هوش مصنوعی رو امنتر و قابل اعتمادتر بسازی.
اهداف یادگیری
درک میکنی که حالتهای شکست (حملات مخرب و خطاهای ناخواسته) چرا مهم هستن و چطور امنیت ML/AI رو تحت تأثیر قرار میدن.
با انواع حالتهای شکست، علتهاشون و مثالهای واقعی آشنا میشی.
یاد میگیری چطور حالتهای شکست رو وارد مدلسازی تهدید، تستها و اجرای کنترلهای امنیتی کنی.
سرفصل ها
مقدمه
- نگرانیهای امنیتی یادگیری ماشین
مبانی هوش مصنوعی
- چگونه سیستمهای هوش مصنوعی میتوانند از کار بیفتند و چگونه میتوان از آنها محافظت کرد
- چرا امنیت هوش مصنوعی اهمیت دارد
- حملات در مقابل حالتهای خرابی غیرعمدی
- چارچوبهای امنیتی یادگیری ماشینی
- اهداف امنیتی برای یادگیری ماشینی - سازمان سیا
حالتها و حملات خرابی عمدی
- حملات اختلال و ورودیهای مخرب
- حملات مسمومیت
- برنامهریزی مجدد
- حوزه فیزیکی - اشیاء متخاصم سهبعدی
- حملات زنجیره تأمین
- وارونگی مدل
- دستکاری سیستم
- استنتاج عضویت و سرقت مدل
- درهای پشتی و اکسپلویتهای موجود
حالتهای خرابی غیرعمدی و نقصهای ذاتی طراحی
- هک پاداشی
- عوارض جانبی و ناهماهنگی
- تغییرات توزیعی و آزمایش ناقص
- بیشبرازش و کمبرازش
- ملاحظات سوگیری دادهها
ساخت هوش مصنوعی مقاوم
- تکنیکهای مؤثر برای ایجاد تابآوری در هوش مصنوعی
- هوش مصنوعی مدلسازی تهدید
- مدل تهدید مجموعه دادهها
- تست تخاصمی و تیم قرمز
- دسترسی به API و پشتیبانی از کامپوننتها
- زنجیره تامین
نتیجهگیری
- گامهای بعدی در مسیر امنیت هوش مصنوعی شما
دوره های مرتبط
- دوره آموزشی خطرات امنیتی در هوش مصنوعی و یادگیری ماشینی: دسته بندی حملات و حالت های شکست (2022)
- دوره آموزشی چطور مسیرهای رشد درآمد رو شناسایی و ازشون بهرهبرداری کنی
- دوره آموزشی محافظت از دادهها برای تحلیل و یادگیری ماشین
- دوره آموزشی امنیت محصولات هوش مصنوعی: تست، اعتبارسنجی و نگهداری
- دوره آموزشی هوش مصنوعی برای امنیت سایبری (2020)
- دوره آموزشی استفاده از هوش مصنوعی برای رشد کسبوکارهای کوچک و متوسط
- دوره آموزشی چارچوب هوش مصنوعی مسئولانه برای محصول هوش مصنوعی سازمانی شما
- دوره آموزشی نکات هوش مصنوعی Azure برای توسعه دهندگان: امنیت داده های شما