آموزش DP-700 - پیادهسازی راهحلهای مهندسی داده و فابریک - بخش 1
✅ سرفصل و جزئیات آموزش
آنچه یاد خواهید گرفت:
- پیادهسازی و مدیریت راهحل تحلیل
- پیکربندی امنیت و حاکمیت
- تبدیل و جذب داده
- نظارت و بهینهسازی راهحل تحلیل
پیشنیازهای دوره
- شما باید با تمام الزامات آزمون DP-600 مایکروسافت آشنا باشید.
- این دوره شامل SQL و KQL میشود.
توضیحات دوره
این دوره شامل محتوای اضافی مورد نیاز برای آزمون گواهینامه DP-700 Fabric Data Engineer Engineer Associate certification است و بر پایه دانش قبلی شما از آزمون DP-600 بنا شده است.
این دوره همچنین برای مهارتهای کاربردی مایکروسافت مفید است:
- APL-3008 - پیادهسازی راهحل هوش بلادرنگ با مایکروسافت فابریک
- APL-3009 - پیادهسازی lakehouse در مایکروسافت فابریک
- APL-3010 - پیادهسازی انبار داده در مایکروسافت فابریک
لطفاً توجه داشته باشید - این دوره وابسته به مایکروسافت نیست، توسط آن تأیید شده یا حمایت نمیشود.
- ابتدا نگاهی سریع به فابریک خواهیم داشت،
- سپس به بررسی استفاده از پایپلاینهای داده خواهیم پرداخت - جذب و کپی داده، و زمانبندی و نظارت بر اجرای پایپلاینهای داده
- اکثر این دوره بخش 1 درباره دستکاری داده با استفاده از PySpark و SQL است.
- ما به بررسی بارگذاری و ذخیره داده با استفاده از نوتبوکها خواهیم پرداخت.
- سپس به دستکاری دیتافریمها خواهیم پرداخت و انتخاب خواهیم کرد که کدام ستونها و سطرها نمایش داده شوند.
- سپس تایپهای داده را تبدیل کرده و داده را تجمیع و مرتبسازی خواهیم کرد.
- سپس داده را در یک lakehouse تبدیل، ادغام و جوین خواهیم کرد، همراه با شناسایی داده گمشده یا مقادیر null
- سپس آبجکتهایی مانند میانبرها و پارتیشنبندی فایل ایجاد خواهیم کرد.
- عملکرد را در جریانهای داده و نوتبوکها بهینه خواهیم کرد.
- سرانجام، به مباحث دیگر فابریک خواهیم پرداخت، از جمله تنظیمات توصیه شده در پورتال ادمین فابریک
تجربه پیشین در همه مباحث آزمون DP-600 فرض شده است. این محتوا در «DP-600 - پیادهسازی راهحلهای تحلیل با استفاده از مایکروسافت فابریک» موجود است، که در یودمی در دسترس است.
پس از اتمام دوره، شما دانش خوبی از استفاده از نوتبوکها برای دستکاری داده با استفاده از PySpark خواهید داشت. و با کمی تمرین و دانش در برخی مباحث اضافی، شما حتی میتوانید برای گواهینامه رسمی مایکروسافت یعنی DP-700 اقدام کنید. آیا گواهینامه Microsoft Certified: Fabric Data Engineer Associate certification در رزومه شما خوب نخواهد بود؟
امیدواریم در دوره شما را ببینیم.
این دوره برای چه کسانی مناسب است؟
- کسی که میخواهد از مایکروسافت فابریک، راهحلهای مهندسی داده را پیاده کنید.
- میتوانید از PySpark برای کوئری داده استریمینگ استفاده کنید.
- در پایان دوره، پس از ورود به آزمونهای تمرینی رسمی، میتوانید وارد آزمون رسمی مایکروسافت یعنی DP-700 شوید.
- آیا «پیادهسازی راهحلهای مهندسی داده» با استفاده از گواهینامه مایکروسافت فابریک، روی رزومه شما خوب نخواهد بود؟
آموزش DP-700 - پیادهسازی راهحلهای مهندسی داده و فابریک - بخش 1
-
مقدمه 01:59
-
رابط یودمی 03:05
-
برنامه آموزشی 03:12
-
ایجاد ظرفیت فابریک و پیکربندی تنظیمات فضای کار فعال شده فابریک 07:07
-
شناسایی الزامات برای راهحل فابریک و مدیریت ظرفیت فابریک 07:03
-
بررسی سریع در فابریک 08:00
-
نگاهی به فابریک None
-
جذب داده با استفاده از یک پایپلاین داده و افزودن فعالیتهای دیگر 07:05
-
کپی داده با استفاده از پایپلاین داده 09:29
-
زمانبندی پایپلاینهای داده و نظارت بر اجرای آنها 04:27
-
استفاده از پایپلاینهای داده و جریانهای داده None
-
جذب داده در lakehouse با استفاده از آپلود محلی 05:37
-
انتخاب روش مناسب برای کپی به یک lakehouse یا انبار داده 03:03
-
جذب داده با استفاده از یک نوتبوک و کپی به یک جدول 09:00
-
ذخیره داده در فایل یا جدول Lakehouse 06:42
-
بارگذاری داده از جدول در PySpark و SQL و دستکاری نتایج 07:17
-
فعالیت تمرینی شماره 2 - راهحل 03:34
-
بارگذاری و ذخیره داده با استفاده از نوتبوکها None
-
کاهش تعداد ستونهای نمایش داده شده 06:02
-
فیلترینگ داده با where و limit و tail 07:14
-
غنیسازی داده با افزودن ستونهای جدید 03:07
-
استفاده از توابع 07:41
-
فیلترینگ پیشرفتهتر 07:28
-
تبدیل تایپهای داده 06:09
-
ایمپورت داده با استفاده از ساختار داده explicit 03:58
-
فرمتبندی تاریخها به عنوان رشتهها 06:42
-
تجمیع و فیلترینگ مجدد داده 04:37
-
مرتبسازی نتایج 05:52
-
استفاده از تمامی 6 SQL Clauses 04:49
-
تبدیل تایپهای داده، تجمیع و مرتبسازی دیتافریمها None
-
ادغام داده 08:21
-
شناسایی و رفع داده داپلیکیت 05:11
-
جوین کردن داده با استفاده از Inner join 06:32
-
جوین کردن داده با استفاده از other joins 06:44
-
شناسایی داده گمشده یا مقادیر null 07:33
-
فعالیت تمرینی شماره 3 - راهحل 03:02
-
زمانبندی نوتبوکها 02:40
-
تبدیل داده در یک lakehouse None
-
پیادهسازی تغییر آهسته ابعاد نوع 1 و نوع 2 - تئوری 07:06
-
پیادهسازی تغییر آهسته ابعاد نوع 0 - مثال تمرین 04:57
-
پیادهسازی تغییر آهسته ابعاد نوع 1 و نوع 2 - مثال عملی 07:29
-
تبدیل داده در انبار داده None
-
ایجاد و مدیریت میانبرها 05:41
-
پیادهسازی پارتیشنبندی فایل برای حجمهای کاری تحلیل با استفاده از یک پایپلاین 08:25
-
پیادهسازی پارتیشنبندی فایل برای حجمهای کاری تحلیل - داده در lakehouse 03:10
-
ایجاد آبجکتها None
-
شناسایی و حل گلوگاههای عملکرد بارگذاری داده در جریانهای داده 02:51
-
پیادهسازی بهبودهای عملکرد در جریانهای داده 03:46
-
شناسایی و رفع گلوگاههای عملکرد بارگذاری داده در نوتبوکها 03:11
-
پیادهسازی بهبودهای عملکرد در نوتبوکها از جمله V-Order 03:54
-
شناسایی و رفع مشکلات مربوط به فایل جدول دلتا - نوشتنهای بهینه شده 02:42
-
بهینهسازی عملکرد None
-
تنظیمات توصیه شده در پورتال ادمین فابریک 04:13
-
پیادهسازی فضای کاری و کنترلهای دسترسی سطح آیتم برای آیتمهای فابریک 05:09
-
نصب اپلیکیشن متریکهای ظرفیت مایکروسافت فابریک 03:56
-
استفاده از اپلیکیشن متریکهای ظرفیت مایکروسافت فابریک - مدیریت ظرفیت فابریک 07:14
-
دیگر مباحث فابریک None
-
آزمون تمرینی فابریک None
-
گام بعدی چیست؟ 01:13
-
تبریک به خاطر تکمیل دوره 00:58
مشخصات آموزش
آموزش DP-700 - پیادهسازی راهحلهای مهندسی داده و فابریک - بخش 1
- تاریخ به روز رسانی: 1404/06/21
- سطح دوره:متوسط
- تعداد درس:60
- مدت زمان :05:01:45
- حجم :1.59GB
- زبان:دوبله زبان فارسی
- دوره آموزشی:AI Academy