ساخت و اجرای پایپلاینهای ETL در Databricks
✅ سرفصل و جزئیات آموزش
آنچه یاد خواهید گرفت:
سازمانهای مدرن با چالشهای مانند سیلوهای داده غیرمتمرکز و فرآیندهای ETL کند و پر از خطا مواجه هستند.
در این دوره، ساخت و اجرای پایپلاینهای ETL در Databricks، توانایی طراحی پایپلاینهای دادهای قوی را به دست می آورید که ذخیرهسازی را یکپارچه کرده و آنالیز را تسهیل میکنند. ابتدا، بررسی می کنید که چگونه Databricks و Delta Lake چالشهای ETL را حل میکنند.
سپس یاد می گیرد که چگونه با نوت بوک ها پایپلاینها را بسازید؛ دادهها را استخراج کنید، آنها را تبدیل و در Delta Lake بارگذاری کنید. در نهایت، یاد خواهید گرفت که چگونه عملکرد را بهینهسازی کرده و گردش کار را با استفاده از Databricks Jobs خودکار کنید. با اتمام این دوره مهارتها و دانش لازم در ETL مجهز به Databricks برای یکپارچهسازی data lakes و data warehouses و ارائه پایپلاینهای مقیاسپذیر و خودکار را خواهید داشت.
ساخت و اجرای پایپلاینهای ETL در Databricks
-
مقدمهای بر ETL و Databricks 4m 41s
-
توضیح معماری Lakehouse 4m 55s
-
ETL دستهای در مقابل ETL استریمی 3m 24s
-
تکنیکهای استخراج داده 4m 47s
-
تبدیلات با اسپارک 3m 34s
-
بارگذاری در تارگت ها 2m 6s
-
بهترین شیوهها برای نوت بوک ها 2m 12s
-
پارتیشن بندی و کشینگ 5m 55s
-
تیون کردن Delta Lake 2m 44s
-
رفع اشکال در گردشهای کاری 6m 35s
-
تنظیمات Databricks Jobs 3m 38s
-
نظارت و هشدارها 2m 54s
-
ادغام CI:CD 4m 53s
-
منابع بیشتر 14s
مشخصات آموزش
ساخت و اجرای پایپلاینهای ETL در Databricks
- تاریخ به روز رسانی: 1404/06/21
- سطح دوره:مقدماتی
- تعداد درس:14
- مدت زمان :00:52:36
- حجم :152.0MB
- زبان:دوبله زبان فارسی
- دوره آموزشی:AI Academy