دوره آموزشی آمادگی گواهینامه مهندسی داده مایکروسافت آژور (DP-203): بخش 4 نظارت و بهینه سازی ذخیره سازی داده ها و پردازش داده ها
34 دقیقهمتوسط2022-12-15
مدرسین
Noah Gift
MLOps Expert | Solopreneur | Author | Adjunct Professor | CTO
جزئیات دوره
آیا برای آزمون Microsoft Azure Data Engineering (DP-203) آماده می شوید یا به دنبال درک بهتری از نحوه طراحی و توسعه پردازش داده هستید؟ این دوره، چهارمین دوره از یک سری، می تواند به شما کمک کند. نوح گیفت، بنیانگذار Pragmatic A.I. آزمایشگاه ها و یکی از همکاران بنیاد نرم افزار پایتون، نحوه نظارت و بهینه سازی ذخیره سازی داده ها و پردازش داده ها را پوشش می دهد. نوح ابتدا نحوه نظارت بر ذخیره سازی داده ها و پردازش داده ها را پوشش می دهد و نحوه اجرای logging مورد استفاده توسط Azure Monitor را نشان می دهد. پیکربندی خدمات نظارت؛ اندازه گیری عملکرد پرس و جو؛ و بیشتر. او سپس موضوعات مربوط به بهینه سازی و عیب یابی ذخیره سازی و پردازش داده ها را شرح می دهد، از جمله چگونگی: بازنویسی توابع تعریف شده توسط کاربر. تنظیم نمایش داده شد با استفاده از نمایه ساز و حافظه پنهان. کنترل انحراف در داده ها و نشت داده ها. عیب یابی شکست Spark job و اجرای خط لوله.
مهارت ها
Cloud StorageData EngineeringAzureNetwork AdministrationCloud PlatformsCert PrepNetwork and System AdministrationCloud ComputingData ScienceMicrosoft
سرفصل ها
0. مقدمه
- 01 - معرفی دوره
1. نظارت بر ذخیره سازی داده ها و پردازش داده ها
- 02 - اجرای لاگ مورد استفاده توسط Azure Monitor
- 03 - خدمات مانیتورینگ را پیکربندی کنید
- 04 - اندازه گیری عملکرد حرکت داده ها
- 05 - نظارت بر عملکرد خوشه خط لوله سیستم داده
- 06 - عملکرد پرس و جو را اندازه گیری کنید
- 07 - برنامه ریزی و نظارت بر آزمایشات خط لوله
- 08 - یک نمودار غیر چرخه ای جهت دار جرقه را تفسیر کنید (DAG)
2. بهینه سازی و عیب یابی ذخیره سازی داده ها و پردازش داده ها
- 09 - بازنویسی توابع تعریف شده توسط کاربر (UDF)
- 10 - کنترل انحراف در داده ها و نشت داده ها
- 11 - خطوط لوله پارتیشن ها را تنظیم کنید
- 12 - مدیریت منابع را بهینه کنید
- 13 - کوئری ها را با استفاده از نمایه سازها و کش تنظیم کنید
- 14 - عیب یابی شکست Spark job و اجرای خط لوله
نتیجه
- 15 - خلاصه و مراحل بعدی
دوره های مرتبط
- دوره آموزشی آموزش عملی پیشرفته SQL Server: استراتژیها و تکنیکها
- دوره آموزشی ساخت اپلیکیشنهای هوش مصنوعی تولیدی برای گفتگو با دادههای شما
- دوره آموزشی مهندسی داده پیشرفته با اسنوفلیک (Snowflake)
- دوره آموزشی برنامهریزی داده، استراتژی و رعایت قوانین برای پروژههای هوش مصنوعی
- دوره آموزشی استراتژی داده در هوش مصنوعی: تهیه و ذخیرهسازی دادهها
- دوره آموزشی مقدمهای بر مهندسی داده مدرن با Snowflake
- دوره آموزشی مقدمهای بر هوش مصنوعی نسل جدید (Gen AI) با Snowflake
- دوره آموزشی مقدمهای بر Snowflake برای توسعهدهندگان، دانشمندان داده و مهندسان داده