مسترکلاس Microsoft Fabric: مهندسی داده بلادرنگ
✅ سرفصل و جزئیات آموزش
آنچه یاد خواهید گرفت:
- درک معماری، کامپوننت ها و سرویسهای اصلی Microsoft Fabric.
- ساخت پایپلاینهای داده End-to-End برای جذب داده ابری و درونسازمانی
- انجام بارگذاریهای افزایشی و دستهای با استفاده از SQL DB ADLS ،SFTP ،REST API و Excel
- طراحی چارچوبهای قابل استفاده مجدد برای جذب داده با قابلیتهای همزمانی، وابستگیها و زمانبندی
- استفاده از Dataflow Gen2 برای پروفایلسازی، پاکسازی و تبدیل مجموعهداده بزرگ
- پیادهسازی پایپلاینهای دادهی بلادرنگ با Eventstreams Event Hubs و KQL
- اعمال بهترین شیوه های در Fabric برای مهندسی داده، ذخیرهسازی و حاکمیت داده
پیشنیازهای دوره
- نیازی به تجربه قبلی با Microsoft Fabric نیست. این دوره از مبانی شروع میشود.
- آشنایی با کوئریهای SQL برای تمرینهای عملی مفید خواهد بود.
- درک اولیه از مفاهیم داده (پایگاهداده، فایلها، پایپلاینها) توصیه میشود.
- یک حساب آزمایشی فعال Microsoft Fabric (یا حساب سازمانی) برای تمرین
- یک کامپیوتر با اتصال به اینترنت برای انجام آزمایشگاهها و تمرینها
توضیحات دوره
با این مسترکلاس عملی که برای مهندسین داده، تحلیلگران و معماران طراحی شده است، پتانسیل کامل Microsoft Fabric را آزاد کنید. این دوره دانشجویان را گامبهگام از طریق سناریوهای دنیای واقعی راهنمایی میکند تا پایپلاینها را بسازند، داده را جذب و تبدیل کنند، با Dataflows Gen2 کار کنند، داده بلادرنگ را استریم کرده و با KQL کوئری بزنند.
مدرس کار را با مبانی معماری Microsoft Fabric شروع میکند و به تکنیکهای پیشرفتهی مهندسی داده مانند بارگذاری افزایشی، Mirror کردن پایگاهداده، ساخت چارچوبهای قابل استفاده مجدد برای جذب داده و تنظیم وابستگیهای چندعاملی میپردازد.
از طریق 34 درس عملی و مبتنی بر پروژه، یاد خواهید گرفت که چگونه:
- به منابع دادهی متنوع (SQL ،Snowflake ،REST API ،SFTP Blob Storage ،Excel) متصل شوید.
- پایپلاینها را برای کارایی، موازیسازی و بارگذاری افزایشی طراحی و بهینهسازی کنید.
- با Lakehouse و Warehouse برای داده ساختاریافته و بدون ساختار کار کنید.
- با استفاده از Dataflows Gen2، بررسی کیفیت داده، پروفایلسازی و پاکسازی انجام دهید.
- داده بلادرنگ را از Event Hubs به Fabric Eventhouse و پایگاهداده KQL استریم کنید.
- بهترین شیوه ها را برای زمانبندی، ارکستراسیون و مانیتورینگ پایپلاینها پیادهسازی کنید.
در پایان این دوره، دانشجویان یک پورتفولیو از پروژههای End-to-End مایکروسافت فابریک خواهند ساخت که آنها را برای حل چالشهای دادهای دنیای واقعی در مقیاس بزرگ آماده میکند.
چه یک مبتدی باشید که میخواهد Microsoft Fabric را کشف کند و چه یک حرفهای که به دنبال ارتقاء مهارتهای خود در مهندسی داده مدرن است، این دوره اعتماد به نفس و تخصص لازم را برای طراحی و ارائه راهحلهای دادهای با استفاده از Microsoft Fabric به شما میدهد.
این دوره برای چه کسانی مناسب است؟
- مهندسین داده که میخواهند پایپلاینهای داده مدرن را در Microsoft Fabric طراحی و بسازند.
- تحلیلگران داده و توسعهدهندگان BI که میخواهند از قابلیتهای Lakehouse ،Warehouse و ادغام Power BI در Fabric استفاده کنند.
- متخصصان ابری که قصد مهاجرت از Azure Synapse Databricks یا ابزارهای سنتی ETL به Fabric را دارند.
- دانشجویان و مبتدیانی که میخواهند مهندسی داده بلادرنگ را بدون تجربه قبلی با Fabric یاد بگیرند.
- تیمهای سازمانی که میخواهند Microsoft Fabric را برای مدیریت و تحلیل داده End-to-End به کار گیرند.
مسترکلاس Microsoft Fabric: مهندسی داده بلادرنگ
-
تمرین عملی: مقدمهای بر Microsoft Fabric: معماری و کامپوننت ها 01:01:58
-
تمرین عملی: کپی چندین پوشه از ADLS Gen2 به Lakehouse 01:00:10
-
تمرین عملی: استفاده از Lookup و ForEach برای جذب موازی با قابلیت تلاش مجدد (Retries) 01:08:25
-
تمرین عملی: کپی چندین جدول SQL به Warehouse و آرشیو در Lakehouse 01:01:49
-
تمرین عملی: بارگذاری افزایشی داده از پایگاهداده SQL به Lakehouse 01:03:43
-
تمرین عملی: کپی داده SQL با استفاده از جداول، کوئریها و Stored Procedures 01:01:00
-
تمرین عملی: بارگذاری افزایشی چندین جدول SQL به Lakehouse 01:05:16
-
تمرین عملی: استخراج و ذخیرهسازی لاگهای پایپلاین در Fabric Warehouse 01:08:38
-
تمرین عملی: جذب داده SQL درونسازمانی با استفاده از Data Gateway 59:44
-
تمرین عملی: جذب فایلها از سیستم فایل درونسازمانی به Lakehouse 59:39
-
تمرین عملی: جذب فایلهای افزایشی از SFTP به Lakehouse 01:48:16
-
تمرین عملی: جذب فایلهای افزایشی از ADLS Gen2 به Lakehouse 58:26
-
تمرین عملی: جذب داده از Snowflake به Fabric Warehouse 01:16:33
-
تمرین عملی: جذب داده REST API با توکنهای Bearer پویا 55:12
-
تمرین عملی: جذب داده Excel چندصفحهای به جداول یکپارچه 01:11:36
-
تمرین عملی: تبدیل شیتهای Excel به جداول با استفاده از ایندکس شیت پویا 58:41
-
تمرین عملی: ساخت یک پایپلاین فریمورک جذب داده قابل استفاده مجدد 01:03:16
-
تمرین عملی: منطق زمانبندی برای پایپلاینهای جذب داده 01:06:29
-
تمرین عملی: کنترل همزمانی پایپلاین با جداول کنترل 01:09:31
-
تمرین عملی: وابستگی چندعاملی برای پایپلاینها 55:25
-
تمرین عملی: استفاده از فعالیت Invoke Pipeline برای اجرای چندعاملی 01:14:17
-
تمرین عملی: حذف خودکار فایلهای قدیمی یا کوچک از فضای ذخیرهسازی 01:00:21
-
تمرین عملی: صفحهبندی در REST API برای بارگذاریهای بزرگ داده 01:09:47
-
تمرین عملی: Mirror کردن پایگاهداده Azure SQL در Fabric 01:14:37
-
تمرین عملی: Mirror کردن سرورهای SQL درونسازمانی در Fabric 01:12:58
-
تمرین عملی: استفاده از میانبرها و مهاجرت پایگاهداده در Fabric 01:29:47
-
تمرین عملی: مقدمهای بر Dataflow Gen2 و اتصالات 01:04:55
-
تمرین عملی: پروفایلسازی ستونها و پاکسازی رکوردهای نامعتبر با توابع متنی 01:07:05
-
تمرین عملی: اتصال Blob Storage و توابع عددی با گروهبندی 01:09:40
-
تمرین عملی: فعالیت کپی با تبدیلات Dataflow Gen2 و زمانبندی 01:27:50
-
تمرین عملی: استریم داده به Lakehouse و Eventhouse از طریق Eventstreams 51:53
-
تمرین عملی: استریم داده از Event Hubs به پایگاهداده KQL 01:05:19
-
تمرین عملی: کوئرینویسی KQL: تجمیعها، Joins و منطق شرطی 50:38
-
تمرین عملی: سناریوهای پیشرفتهی Eventstreams در Fabric 41:41
مشخصات آموزش
مسترکلاس Microsoft Fabric: مهندسی داده بلادرنگ
- تاریخ به روز رسانی: 1404/12/10
- سطح دوره:همه سطوح
- تعداد درس:34
- مدت زمان :37:34:35
- حجم :15.56GB
- زبان:دوبله زبان فارسی
- دوره آموزشی:AI Academy