دوره آموزشی مهارتهای بنیادی مهندسی داده
1 ساعت 29 دقیقهمبتدی2023-04-28
مدرسین

Vinoo Ganesh
CEO and founder of Stealth Startup
جزئیات دوره
📌 در دنیای امروز که مملو از داده است، سازمانها و شرکتها به دنبال اتخاذ تصمیمهای مبتنی بر داده هستند. اما بسیاری از متخصصان جدید داده، آموزش رسمی در زمینه ساخت پایپلاینهای دادهای پایدار و مقیاسپذیر ندیدهاند.
💡 در این دوره، "وینو گانش" اصول و ابزارهای کلیدی مهندسی داده را آموزش میدهد تا بتوانید مشکلات پیچیده دادهای را بهصورت کارآمد و در مقیاس بزرگ حل کنید.
📖 آنچه در این دوره یاد میگیرید:
✅ مبانی و ابزارهای اصلی مهندسی داده
✅ درک اصول ELT، OLTP/OLAP و مدیریت داده
✅ مقدمهای بر ارکستراسیون داده و DAGs
✅ راهاندازی Apache Airflow بهصورت محلی
✅ ساخت پایپلاینهای ETL در مقیاس صنعتی
✅ کاربرد مهندسی داده در سناریوهای واقعی
🎯 پس از این دوره، شما قادر خواهید بود دادههای سازمانی را به شیوهای بهینه پردازش کنید و پایپلاینهای دادهای پایدار بسازید.
💡 در این دوره، "وینو گانش" اصول و ابزارهای کلیدی مهندسی داده را آموزش میدهد تا بتوانید مشکلات پیچیده دادهای را بهصورت کارآمد و در مقیاس بزرگ حل کنید.
📖 آنچه در این دوره یاد میگیرید:
✅ مبانی و ابزارهای اصلی مهندسی داده
✅ درک اصول ELT، OLTP/OLAP و مدیریت داده
✅ مقدمهای بر ارکستراسیون داده و DAGs
✅ راهاندازی Apache Airflow بهصورت محلی
✅ ساخت پایپلاینهای ETL در مقیاس صنعتی
✅ کاربرد مهندسی داده در سناریوهای واقعی
🎯 پس از این دوره، شما قادر خواهید بود دادههای سازمانی را به شیوهای بهینه پردازش کنید و پایپلاینهای دادهای پایدار بسازید.
مهارت ها
Data EngineeringData ScienceOne-Off
سرفصل ها
0. مقدمه
- 01 - مهندسی داده عملی
- 02 - دانش پیشینه
- 03 - تاریخچه دادهها در شرکت
- 04 - نحوه استفاده از GitHub Codespace با این دوره
1. دریافت بلبرینگ
- 05 - مهندسی داده و خطوط لوله داده
- 06 - ارکستراسیون - به معنای امروزی
- 07 - استخراج، تبدیل، بارگذاری (ETL)
- 08 - وظایف، DAGها و وابستگی ها
2. معرفی جریان هوا
- 09 - مقدمه ای بر جریان هوا
- 10 - نصب جریان هوا
- 11 - اجرای وب سرور و زمانبندی Airflow
- 12 - تنظیم تنظیمات پیکربندی جریان هوا
- 13 - یک DAG 1 Task بسازید
- 14 - یک DAG 2 Task بسازید
3. ETL پایه در جریان هوا
- 15 - ETL در جریان هوا
- 16 - یک کار مهندسی داده در دنیای واقعی
- 17 - استخراج دادهها به صورت دستی
- 18 - استخراج دادهها با Airflow
- 19 - تبدیل دادهها به صورت دستی
- 20 - تبدیل دادهها با جریان هوا
- 21 - بارگذاری اطلاعات به صورت دستی
- 22 - بارگذاری دادهها با جریان هوا
- 23 - ساخت ETL DAG با جریان هوا
- 24 - چالش - سؤالات ETL را مرور کنید
- 25 - راه حل - راه حل سؤالات ETL
نتیجه
- 26 - آینده مهندسی داده
دوره های مرتبط
- دوره آموزشی کلانداده در عصر هوش مصنوعی
- دوره آموزشی راهنمای کامل مهندسی تحلیل دادهها
- دوره آموزشی مهندسی تحلیل پیشرفته: تمرینهای دنیای واقعی
- دوره آموزشی راهنمای کامل Google BigQuery برای مهندسان داده و یادگیری ماشین
- دوره آموزشی یادگیری اصولی PySpark: معرفی ساخت خطوط پردازش داده
- دوره آموزشی پاکسازی دادهها برای علم داده مؤثر: واردکردن دادهها، تشخیص ناهنجاری، پرکردن مقادیر گمشده و مهندسی ویژگیها
- دوره آموزشی یادگیری جامع اسکالا برای علوم داده
- دوره آموزشی SPSS: آمادهسازی، مصورسازی و مدلسازی دادهها