دوره آموزشی پروژه مهندسی داده دنیای واقعی از ابتدا تا انتها با استفاده از Databricks

دوره آموزشی پروژه مهندسی داده دنیای واقعی از ابتدا تا انتها با استفاده از Databricks

1 ساعت 41 دقیقهمتوسط2024-10-04

مدرسین

Deepak Goyal

Deepak Goyal

جزئیات دوره

این دوره جامع رویکردی عملی و کاربردی برای ساخت یک پایپلاین داده مدرن با استفاده از Databricks ارائه می‌دهد. همراه با مدرس دیپاک گویال، در یک پروژه مهندسی داده واقعی شرکت کنید که در آن دریاچه داده‌ها به یک راه‌حل تحلیلی کارآمد تبدیل می‌شود با استفاده از اکوسیستم Databricks. بیاموزید که چگونه یک پروژه انتها به انتها در Databricks کار می‌کند، چگونه معماری سه‌لایه مدالیون (برنز، نقره، و طلا) را پیاده‌سازی کنید و چگونه از Spark SQL در یک پروژه داده واقعی استفاده کنید. این دوره برای مهندسین داده حرفه‌ای و همچنین تحلیلگران داده ایده‌آل است و می‌تواند به شما کمک کند مهارت‌های فنی خود را به سطح بعدی برسانید و شما را در موقعیت بهتری برای به‌دست آوردن نقش داده‌ای که همیشه آرزویش را داشته‌اید، قرار دهد.

اهداف یادگیری:
یادگیری نحوه ساخت پایپلاین داده مدرن با استفاده از Databricks.
درک نحوه پیاده‌سازی معماری سه‌لایه مدالیون (برنز، نقره، طلا).
استفاده از Spark SQL در پروژه‌های داده واقعی.
یادگیری چگونگی تبدیل دریاچه داده‌ها به راه‌حل‌های تحلیلی کارآمد.
ارتقای مهارت‌های فنی و آماده‌سازی برای نقش‌های داده‌ای پیچیده‌تر.

مهارت ها

DatabricksCloud DevelopmentData EngineeringAzureCloud ComputingData ScienceMicrosoftOne-Off

سرفصل ها

مقدمه

  • شروع پروژه - مهندسی داده با Databricks
  • آنچه باید بدانید

Databricks جزئیات پروژه در دنیای واقعی

  • مطالعه موردی Databricks - بررسی اجمالی
  • Data Lakehouse - راه حل سطح بالا
  • نمودار معماری پروژه Databricks

راه‌اندازی پروژه Databricks

  • ایجاد حساب Databricks
  • ایجاد پوشه اولیه
  • بارگذاری داده‌های نمونه

اجرای لایه برنزی Databricks

  • پایگاه داده لایه برنز را ایجاد کنید
  • یک دفترچه یادداشت Databricks برای بارگذاری یک فایل CSV در جدول دلتا مشتری ایجاد کنید
  • یک دفترچه یادداشت Databricks برای بارگذاری یک فایل JSON در جدول دلتای محصول ایجاد کنید
  • یک دفترچه یادداشت Databricks برای بارگذاری فایل Parquet در جدول دلتای سفارش ایجاد کنید

اجرای لایه نقره ای Databricks

  • پایگاه داده لایه نقره ای را ایجاد کنید
  • یک دفترچه یادداشت Databricks برای بارگذاری لایه نقره ای - جدول دلتا مشتری ایجاد کنید
  • یک دفترچه Databricks برای بارگذاری لایه نقره ای - جدول دلتا محصول ایجاد کنید
  • یک دفترچه Databricks برای بارگذاری لایه نقره ای ایجاد کنید - جدول دلتا را سفارش دهید

اجرای لایه طلایی Databricks

  • پایگاه داده لایه طلا را ایجاد کنید
  • یک دفترچه Databricks برای بارگذاری جدول طلا ایجاد کنید - قسمت 1
  • یک دفترچه Databricks برای بارگذاری جدول طلا ایجاد کنید - قسمت 2

Databricks و Power‌BI Data Visualization

  • Power‌BI Desktop را نصب کنید
  • Databricks و Power‌BI را یکپارچه کنید
  • داشبورد Power‌BI را از Databricks ایجاد کنید

نتیجه گیری

  • مراحل بعدی
۴۰,۰۰۰ تومان