دوره آموزشی مدیریت و بهینه‌سازی داده‌های کلان با Apache Iceberg

دوره آموزشی مدیریت و بهینه‌سازی داده‌های کلان با Apache Iceberg

1 ساعت 24 دقیقهمتوسط2024-08-16

مدرسین

Deepak Goyal

Deepak Goyal

جزئیات دوره

کلان داده تنها در حال بزرگتر شدن است و Apache Iceberg به یکی از محبوب ترین فرمت ها برای مدیریت پیشرفته مجموعه داده های بزرگ تبدیل شده است. در این دوره، دیپک گویال معماری، مدیریت طرح‌واره و عملیات جدول Iceberg را پوشش می‌دهد و شما را به مهارت‌هایی برای مدیریت کارآمد دریاچه‌های داده مقیاس‌پذیر، اطمینان از یکپارچگی داده‌ها و بهینه‌سازی عملکرد پرس و جو مجهز می‌کند. این دوره همچنین شامل مثال‌های عملی و جلسات نمایشی است تا بتوانید تجربه عملی داشته باشید و مهارت‌های داده خود را به سطح بعدی ببرید.

مهارت ها

Data Resource ManagementSQLData EngineeringDatabase ManagementData AnalysisData ScienceBusiness Analysis and StrategyBusiness Software and ToolsOpen SourceOne-Off

سرفصل ها

مقدمه

  • کوه یخ آپاچی و داده‌های بزرگ
  • آنچه باید بدانید

شروع به کار با Apache Iceberg

  • معرفی کوه یخ آپاچی
  • نقش کوه یخ در معماری داده‌های مدرن
  • ویژگی‌ها و مزایای کلیدی
  • محیط Iceberg خود را بر روی Databricks تنظیم کنید
  • ایجاد اولین میز کوه یخ خود - عملی
  • چالش - یک جدول کوه یخ ایجاد کنید
  • راه حل - یک جدول کوه یخ ایجاد کنید

فرو رفتن عمیق در مفاهیم اصلی کوه یخ

  • ساختار جدول کوه یخ و ابرداده
  • مدیریت و تکامل طرحواره
  • اعمال تغییرات طرحواره
  • پارتیشن بندی در کوه یخ
  • پیاده‌سازی پارتیشن بندی
  • چالش - تغییر طرح جدول
  • راه حل - تغییر طرح جدول

مدیریت پیشرفته داده با Apache Iceberg

  • مدیریت سفر در زمان و عکس فوری
  • اجرای سفر در زمان
  • عملیات داده‌های تراکنش و کنترل همزمان

بهینه‌سازی و مقیاس گذاری با Apache Iceberg

  • بهینه‌سازی طرح و اندازه فایل برای عملکرد
  • ادغام کاتالوگ پیشرفته
  • استراتژی‌های تنظیم عملکرد
  • جایگزین‌های کوه یخ

نتیجه گیری

  • مراحل بعدی
۴۰,۰۰۰ تومان