یادگیری تست ETL و اصول انبار داده

آنچه یاد خواهید گرفت:

• درک اصول ETL و انبار داده با مثال‌های واقعی از یوزکیس‌های کسب‌وکار
• ساخت یک پایپ‌لاین ETL کامل با استفاده از ابزار Pentaho Data Integration (PDI)
• طراحی سناریوهای تست ETL مؤثر با استفاده از کوئری‌های SQL برای اعتبارسنجی کیفیت داده
• درک دامنه تست ETL در هر لایه پایپ‌لاین با مثال‌های عملی
• یادگیری تغییر آهسته ابعاد و نحوه تست آنها در گردش‌کارهای ETL
• بررسی معماری‌های ETL در مقابل ELT و زمان مناسب برای استفاده از هر کدام در استک‌های داده مدرن
• کشف اینکه چرا تست کیفیت داده قبل از استفاده برای آموزش LLM و مدل‌های هوش مصنوعی ضروری است.

پیش‌نیازهای دوره

• دانش اولیه SQL مفید خواهد بود.

توضیحات دوره

یک آموزش عملی که از ابتدا آغاز می‌شود و درک جامعی از مفاهیم انبار داده و تست ETL ارائه می‌دهد.

آنچه در دوره یاد خواهید گرفت؟

• یادگیری اینکه چرا و کجا ETL نیاز است همراه با مثالی از مشکل واقعی یک کسب‌وکار
• درک اصول انبار داده و مدل‌های داده رایج مانند اسکیمای ستاره‌ای
• یک بررسی کامل از معماری نحوه کارکرد ETL با انبار داده
• یک بررسی کامل از ابزارهای ETL پرکاربرد در صنعت
• ساخت پروژه ETL بلادرنگ از ابتدا با استفاده از ابزار Pentaho Data Integration (PDI)
• درک محدوده تست ETL در هر لایه پایپ‌لاین با مثال‌های عملی
• یادگیری نحوه ساخت سناریوهای تست ETL و اعتبارسنجی آنها با کوئری‌های SQL
• نوشتن موارد تست برای مفاهیم پیشرفته مانند تغییر آهسته ابعاد (SCDs)
• بررسی انبارهای داده ابری و جایگاه ETL و ELT در استک‌های داده مدرن
• درک تفاوت‌های بین ETL در مقابل ELT و زمان مناسب برای استفاده از هر کدام
• کشف نقش حیاتی تست کیفیت داده ETL در آموزش مدل‌های زبانی بزرگ (LLMs) - اطمینان از پایپ‌لاین‌های داده قابل اعتماد و دقیق، پایه‌ای کلیدی برای هر سیستم یادگیری ماشین و هوش مصنوعی است.
• یادگیری اینکه کیفیت داده نامطلوب می‌تواند باعث حواس‌پرتی، سوگیری و نتایج نادرست در خروجی LLM شود و چرا تست قوی ETL قبل از جذب مدل ضروری است.

پیش‌نیازهای دوره:

• دانش اولیه SQL (درج، بروزرسانی و حذف)
• مفاهیم اصلی SQL مانند جوین‌ها، Group By و کوئری‌های فرعی اغلب در سناریوهای تست ETL استفاده می‌شوند.
• یک بازبینی دوباره مباحث SQL در بخش آخر دوره موجود است. برای کسانی که نیاز دارند توصیه می‌شود.

این دوره برای چه کسانی مناسب است؟

• تست‌کنندگان نرم‌افزار
• مهندسان داده
• تست‌کنندگان ETL
• حرفه‌ای‌های هوش تجاری (BI)