دوره آموزشی پروژه مهندسی داده دنیای واقعی از ابتدا تا انتها با استفاده از Databricks
1 ساعت 40 دقیقهمتوسط2024-10-04
مدرسین

Deepak Goyal
جزئیات دوره
این دوره جامع رویکردی عملی و کاربردی برای ساخت یک پایپلاین داده مدرن با استفاده از Databricks ارائه میدهد. همراه با مدرس دیپاک گویال، در یک پروژه مهندسی داده واقعی شرکت کنید که در آن دریاچه دادهها به یک راهحل تحلیلی کارآمد تبدیل میشود با استفاده از اکوسیستم Databricks. بیاموزید که چگونه یک پروژه انتها به انتها در Databricks کار میکند، چگونه معماری سهلایه مدالیون (برنز، نقره، و طلا) را پیادهسازی کنید و چگونه از Spark SQL در یک پروژه داده واقعی استفاده کنید. این دوره برای مهندسین داده حرفهای و همچنین تحلیلگران داده ایدهآل است و میتواند به شما کمک کند مهارتهای فنی خود را به سطح بعدی برسانید و شما را در موقعیت بهتری برای بهدست آوردن نقش دادهای که همیشه آرزویش را داشتهاید، قرار دهد.
اهداف یادگیری:
یادگیری نحوه ساخت پایپلاین داده مدرن با استفاده از Databricks.
درک نحوه پیادهسازی معماری سهلایه مدالیون (برنز، نقره، طلا).
استفاده از Spark SQL در پروژههای داده واقعی.
یادگیری چگونگی تبدیل دریاچه دادهها به راهحلهای تحلیلی کارآمد.
ارتقای مهارتهای فنی و آمادهسازی برای نقشهای دادهای پیچیدهتر.
اهداف یادگیری:
یادگیری نحوه ساخت پایپلاین داده مدرن با استفاده از Databricks.
درک نحوه پیادهسازی معماری سهلایه مدالیون (برنز، نقره، طلا).
استفاده از Spark SQL در پروژههای داده واقعی.
یادگیری چگونگی تبدیل دریاچه دادهها به راهحلهای تحلیلی کارآمد.
ارتقای مهارتهای فنی و آمادهسازی برای نقشهای دادهای پیچیدهتر.
مهارت ها
DatabricksCloud DevelopmentData EngineeringAzureCloud ComputingData ScienceMicrosoftOne-Off
سرفصل ها
0. مقدمه
- 01 - شروع پروژه - مهندسی داده با Databricks
- 02 - آنچه باید بدانید
1. Databricks جزئیات پروژه در دنیای واقعی
- 03 - مطالعه موردی Databricks - بررسی اجمالی
- 04 - Data Lakehouse - راه حل سطح بالا
- 05 - نمودار معماری پروژه Databricks
2. راهاندازی پروژه Databricks
- 06 - ایجاد حساب Databricks
- 07 - ایجاد پوشه اولیه
- 08 - بارگذاری دادههای نمونه
3. اجرای لایه برنزی Databricks
- 09 - پایگاه داده لایه برنز را ایجاد کنید
- 10 - یک دفترچه یادداشت Databricks برای بارگذاری یک فایل CSV در جدول دلتا مشتری ایجاد کنید
- 11 - یک دفترچه یادداشت Databricks برای بارگذاری یک فایل JSON در جدول دلتای محصول ایجاد کنید
- 12 - یک دفترچه یادداشت Databricks برای بارگذاری فایل Parquet در جدول دلتای سفارش ایجاد کنید
4. اجرای لایه نقره ای Databricks
- 13 - پایگاه داده لایه نقره ای را ایجاد کنید
- 14 - یک دفترچه یادداشت Databricks برای بارگذاری لایه نقره ای - جدول دلتا مشتری ایجاد کنید
- 15 - یک دفترچه Databricks برای بارگذاری لایه نقره ای - جدول دلتا محصول ایجاد کنید
- 16 - یک دفترچه Databricks برای بارگذاری لایه نقره ای ایجاد کنید - جدول دلتا را سفارش دهید
5. اجرای لایه طلایی Databricks
- 17 - پایگاه داده لایه طلا را ایجاد کنید
- 18 - یک دفترچه Databricks برای بارگذاری جدول طلا ایجاد کنید - قسمت 1
- 19 - یک دفترچه Databricks برای بارگذاری جدول طلا ایجاد کنید - قسمت 2
6. Databricks و PowerBI Data Visualization
- 20 - PowerBI Desktop را نصب کنید
- 21 - Databricks و PowerBI را یکپارچه کنید
- 22 - داشبورد PowerBI را از Databricks ایجاد کنید
نتیجه گیری
- 23 - مراحل بعدی
دوره های مرتبط
- دوره آموزشی یادگیری Databricks GenAI
- دوره آموزشی راهنمای کامل Databricks برای مهندسی دادهها
- دوره آموزشی بهرهگیری از هوش مصنوعی و مهندسی داده برای راهحلهای پایدار
- دوره آموزشی MLOps با Databricks
- دوره آموزشی آمادگی گواهینامه Databricks Certified Data Engineer Associate: بخش پنجم حاکمیت داده ها
- دوره آموزشی آمادگی گواهینامه Databricks Certified Data Engineer Associate: بخش ششم دسترسی به داده ها با Unity Catalog
- دوره آموزشی آمادگی گواهینامه Databricks Certified Data Engineer Associate: بخش سوم پردازش اطلاعات افزایشی
- دوره آموزشی آمادگی گواهینامه Databricks Certified Data Engineer Associate: بخش چهارم خطوط لوله تولید