مهندس داده ETL با Databricks در سال 2023: از مبتدی تا متخصص
✅ سرفصل و جزئیات آموزش
آنچه یاد خواهید گرفت:
- تخصصی مشابه مهندسان داده خط مقدم که سالانه بیش از 200,000 دلار درآمد دارند، به دست آورید.
- توانایی حل مسائل پیچیده ETL مانند مشکلات پایداری یا عملکرد را به عنوان یک متخصص کسب کنید.
- از زمان آزاد بیشتری که با استفاده از فریمورکها و ابزارهای اتوماسیون آماده به دست میآید، لذت ببرید.
- جایگاه شغلی تزلزلناپذیر خود را با قابلیتهای پیشرفته ETL و استراتژی تست، مستحکم کنید.
- تجربه یک پروژه ETL واقعی در حوزه بانکداری باز را از ابتدا به دست آورید.
- فرصتهای خود برای ورود به حوزه مهندسی داده را به حداکثر برسانید.
توضیحات دوره
آیا به دنبال کسب درآمد بالاتر و بلندمدت با یک دوره آموزشی کوتاه هستید؟ پس به جای درستی آمدهاید. همانطور که میدانید، هوش مصنوعی و دادههای بزرگ نیروهای محرک صنعت 4.0 هستند. مهندس داده یک نقش پردرآمد است. با ادامه کمبود مهندسان داده، تقاضا برای مهندسان داده ماهر به شدت در حال افزایش است. ورود به حوزه مهندسی داده یکی از بهترین گزینهها برای شغل شماست که میتواند حقوق بالاتر، قراردادهای بلندمدت و فشار کاری کمتری به همراه داشته باشد. با پیوستن به این دوره، خواهید آموخت که مهندسان داده خط مقدم چگونه یک پروژه ETL واقعی در حوزه بانکداری باز را از ابتدا اجرا میکنند، و یک فریمورک ETL آماده، کاربردی و قدرتمند و همچنین استراتژی تست ISTQB را دریافت خواهید کرد. بنابراین، احتمال قبولی شما در مصاحبه شغلی بسیار بالا خواهد بود، زیرا پس از این دوره، شما واقعاً تواناییهای مشابهی با مهندسان دادهای که سالانه بیش از 200,000 دلار درآمد دارند، کسب کرده و قادر به حل مسائل پیچیده ETL به تنهایی خواهید بود.
اگر در حال حاضر یک مهندس داده هستید، این دوره مهارتهای ETL شما را تقویت خواهد کرد. این دوره میتواند با صرفهجویی در زمان و هزینه محاسباتی هنگفت در طول فرآیند ETL، شما را آزاد کند. مهمتر از آن، شما توانایی حل مسائل پیچیده از نظر عملکرد، پایداری و قابلیت اطمینان را به دست خواهید آورد. شما از زمان آزاد بیشتری لذت خواهید برد و کارهای سخت را به فریمورک و اسکریپتهای ETL خواهید سپرد.
با 6 بخش و حدود 5 ساعت محتوای با کیفیت بالا، شما موضوعات زیر را به طور عمیق یاد خواهید گرفت:
بخش 1: ارزشهایی که ما برای شما به ارمغان میآوریم
- شما درک خواهید کرد که چه قابلیتهای ارزشمندی را پس از این دوره به دست میآورید و چه منابع زنده و رایگان اضافی برای ادامه یادگیری در اختیار خواهید داشت.
بخش 2: راهاندازی Azure Databricks و Cosmos DB
- شما قادر خواهید بود Azure Databricks و Cosmos DB را راهاندازی کرده و به تنهایی آنها را به هم متصل کنید.
بخش 3: راهاندازی اولیه پروژه ETL
- تجربه یک پروژه تجاری واقعی در حوزه بانکداری باز را از ابتدا شامل درک نیازمندیهای کسبوکار، تبدیل آن به نیازمندیهای فنی، طراحی راهکار و پیادهسازی آن کسب کنید.
بخش 4: هدف کسب و کار ETL و تست و استراتژی تست
- اهداف کسب و کار که قصد دستیابی به آنها را داریم، شناسایی کرده و استراتژیهای تست مناسب را اتخاذ کنید و برای تست استاتیک و رویکرد تست شیفت-به-چپ برنامهریزی نمایید.
بخش 5: استخراج و تبدیل داده
- عملکردهای استخراج و تبدیل داده را پیادهسازی کرده و یک مکانیزم هوشمند برای تشخیص تغییر دادهها با هزینه کمتر از نظر زمان و کارایی ایجاد کنید.
بخش 6: جمعآوری داده پایدار و سریع
- مسائل پیچیده ETL از نظر عملکرد، پایداری، قابلیت اطمینان و غیره را به عنوان یک متخصص حل کنید و فریمورک و اسکریپتهای قدرتمندی را دریافت کرده، آنها را سفارشیسازی و در پروژههای خود اعمال کنید.
این دوره برای چه کسانی مناسب است؟
- فارغالتحصیلانی که میخواهند به عنوان مهندس داده یا تستر داده استخدام شوند.
- مهندسان دادهای که میخواهند مهارتهای خود را تقویت کنند.
- تحلیلگران تست یا توسعهدهندگانی که میخواهند وارد حوزه مهندسی داده شوند.
مهندس داده ETL با Databricks در سال 2023: از مبتدی تا متخصص
-
آنچه از این دوره به دست خواهید آورد 04:49
-
فرآیند ETL و تست 03:00
-
مجموعه ابزارهای ETL 02:18
-
منابع بیشتر برای یادگیری ابزارها 03:03
-
پیشنیازهای ETL 02:35
-
راهاندازی Azure Databricks 15:28
-
تنظیم Azure Cosmos DB 09:08
-
اتصال Cosmos DB از طریق Databricks 13:30
-
درج داده در Cosmos DB 06:57
-
بررسی نیازهای کسبوکار 04:28
-
تحلیل جداول داده قدیمی 04:40
-
طراحی سطح بالا 06:12
-
شناسایی نیازمندیهای فنی 10:41
-
بارگذاری داده نمونه در جداول دلتا 11:27
-
استراتژی تست تعریف شده 05:43
-
تست استاتیک 11:25
-
برنامهریزی رویکرد تست اتوماسیون شیفت-به-چپ 06:10
-
استخراج داده از سیستم منبع 12:32
-
افزودن پیشوند برای دیتافریم جدول 19:56
-
تبدیل داده - بخش 1 21:11
-
تبدیل داده - بخش 2 17:51
-
افزودن هش اعتبارسنجی 07:54
-
مرتبسازی رکوردها 05:04
-
بازآرایی کد 12:10
-
دریافت رکوردهای جدید برای بارگذاری 15:35
-
دریافت رکوردهای اصلاح شده 09:02
-
دریافت رکوردهای نیازمند حذف 08:06
-
رفع مسئله پایداری 05:35
-
رفع مشکل عملکرد 14:00
-
درک مسیرهای جدول 13:01
-
حذف دادههای نمونه 05:10
-
جمع آوری داده به Cosmos 06:19
-
بروزرسانی پویای جدول کلون شده Cosmos 07:38
-
افزایش قابلیت اطمینان 07:05
مشخصات آموزش
مهندس داده ETL با Databricks در سال 2023: از مبتدی تا متخصص
- تاریخ به روز رسانی: 1404/06/21
- سطح دوره:متوسط
- تعداد درس:34
- مدت زمان :05:09:43
- حجم :3.51GB
- زبان:دوبله زبان فارسی
- دوره آموزشی:AI Academy