دوره آموزشی یادگیری جریان داده گوگل
2 ساعت 2 دقیقهپیشرفته2022-08-23
مدرسین

Kishan Iyer
Content Engineer, DevOps Expert, and Google Cloud Platform Power User
جزئیات دوره
آیا می خواهید بدانید با Google Dataflow چه کاری می توانید انجام دهید؟ در این دوره، Kishan Iyer یک نمای کلی از Google Dataflow را به شما ارائه می دهد، شما را از طریق سرویس Dataflow راهنمایی می کند، راه های پیکربندی و نظارت بر خطوط لوله را بررسی می کند، و نحوه استفاده از قالب های Dataflow را به شما نشان می دهد. کیشان توضیح می دهد که چگونه گزینه های خود را برای خط لوله پرتو آپاچی تعریف کنید، سپس به شما نشان می دهد که چگونه یک برنامه پرتو آپاچی را اجرا کنید، یک مرحله تبدیل خط لوله را تعریف کنید و یک خط لوله پرتو آپاچی بسازید. او نحوه راه اندازی سرویس Dataflow و اجرای آن را برای اجرای خط لوله Apache Beam مراحل می دهد. کیشان محاسبه یک مقدار متوسط از داده ها، پیکربندی تعداد کارگران، انجام یک محاسبات سراسری و موارد دیگر را پوشش می دهد. به علاوه، او در مورد چگونگی کنار هم قرار دادن قطعات برای یک الگوی Dataflow، تعریف و اجرای یک کار با استفاده از یک الگوی از پیش ساخته شده Dataflow، و اجرای خطوط لوله Apache Beam با استفاده از Dataflow Prime بحث می کند.
مهارت ها
DataflowData EngineeringAdvancedGoogleData Science
سرفصل ها
0. مقدمه
- 01 - مروری بر Dataflow
1. مروری سریع از Dataflow
- 02 - راه اندازی یک پروژه Google Cloud برای Dataflow
- 03 - ایجاد اعتبار برای خط لوله پردازش داده
- 04 - درک پرتو آپاچی
- 05 - نقش Dataflow
- 06 - ایجاد یک پروژه Apache Beam با Maven
- 07 - تعریف گزینه های خط لوله
- 08 - اجرای یک برنامه Apache Beam
- 09 - تعریف مرحله تبدیل خط لوله
- 10 - ساخت و اجرای خط لوله Apache Beam
2. سرویس Dataflow
- 11 - راه اندازی سطل ذخیره سازی ابری
- 12 - کار با فایل ها در پرتو آپاچی
- 13 - اجرای کار پردازش فایل
- 14 - اجرای خط لوله با Dataflow
- 15 - مشاهده فایل های تولید شده توسط یک کار Dataflow
- 16 - تجمیع مقادیر در خط لوله
- 17 - اجرا و تایید یک کار تجمیع
3. پیکربندی و نظارت بر خطوط لوله
- 18 - محاسبه یک مقدار متوسط از داده ها
- 19 - تنظیم تعداد کارگران
- 20 - انجام محاسبات سراسری
- 21 - تغذیه یک ورودی جانبی به یک پله خط لوله
- 22 - بررسی اجرای خط لوله ورودی جانبی
4. استفاده از الگوهای جریان داده
- 23 - کنار هم قرار دادن قطعات برای قالب Dataflow
- 24 - تعریف و اجرای کار با قالب Dataflow
5. استفاده از Dataflow Prime
- 25 - کار با Dataflow Prime
نتیجه
- 26 - خلاصه و مراحل بعدی