دوره آموزشی
دوبله زبان فارسی
تسلط به یکپارچهسازی داده (ETL) با IBM DataStage
✅ سرفصل و جزئیات آموزش
آنچه یاد خواهید گرفت:
- اصول یکپارچهسازی داده: درک مفاهیم اساسی و انواع یکپارچهسازی داده و بررسی مثالهای واقعی
- ناوبری IBM Information Server: آشنایی با کامپوننتهای IBM Information Server و نقش آن در یکپارچهسازی داده
- مدیریت IBM Information Server: یادگیری ناوبری کنسول مدیریت IBM Information Server و تمرین تسکهای مدیریتی ضروری
- بررسی IBM DataStage: بررسی معماری IBM DataStage، کامپوننتهای کلیدی و کاربردهای عملی آن
- توسعه در IBM DataStage: کار عملی در DataStage، ایجاد پروژهها، بررسی انواع Jobها و استفاده از عناصر طراحی برای پردازش موازی
- مدیریت DataStage: کسب مهارتهای عملی در مدیریت DataStage، از جمله مدیریت کاربر، مجوزها و متغیرهای محیطی
- مدیریت متادیتا: تمرین مدیریت متادیتا با DataStage Designer، ایمپورت و اکسپورت کامپوننتها
- ایجاد Jobهای موازی: شرکت در جلسات عملی برای ایجاد Jobهای موازی، تعریف پارامترها و مستند کردن Jobها به صورت مؤثر
- دسترسی به داده ترتیبی: تجربه عملی در مدیریت داده ترتیبی، استفاده از استیج فایل ترتیبی و مدیریت لینکهای رد شدن
- پیادهسازی الگوریتمهای پارتیشنبندی و جمعآوری: کسب بینشهای کاربردی دربارهی موازی بودن پارتیشن، الگوریتمهای پارتیشنبندی و استراتژیهای جمعآوری
- ترکیب داده با استیجها: کار با استیجهای Lookup، جوین، ادغام و قیف و تمرین روی کاربردهای آنها در سناریوهای واقعی
- پردازش گروهی استیجها: یادگیری مرتبسازی موثر داده، حذف تکراریها و استفاده از استیجهای Aggregator در تمرینهای عملی
- تبدیل داده: تمرین با استیج ترنسفورمر، محدودیتها و تکنیکهای اشکالزدایی برای تبدیل داده
- توابع مخزن: بررسی جنبههای عملی استفاده از مخزن، پیدا کردن تفاوتها بین jobها و انجام تحلیلهای تاثیر
- کار با داده رابطهای: تعامل در فعالیتهای عملی شامل استیجهای کانکتور، خواندن و نوشتن در جداول پایگاه داده و استفاده از اتصال داده
- کنترل توالی Job: کسب تجربه عملی در ایجاد توالیهای Job، تعریف تریگرها و مدیریت فعالیتهای Job از طریق استیجهای مختلف
- تمرین واقعی - یکپارچهسازی AWS Cloud: مهارتهای خود را برای یکپارچهسازی داده با سرویسهای AWS Cloud در سناریوهای واقعی اعمال کنید.
- تمرین واقعی - یکپارچهسازی Data Vault نسخه 1.0 و 2.0: تمرینهای عملی در یکپارچهسازی مفاهیم Data Vault در پروژههای یکپارچهسازی داده
توضیحات دوره
قدرت یکپارچهسازی داده با IBM DataStage، ابزار ETL (استخراج، تبدیل، بارگذاری) پیشرو در صنعت را آنلاک کنید. در این دوره جامع، شما سفری از مبانی یکپارچهسازی داده تا تکنیکهای پیشرفته را آغاز خواهید کرد که به شما این امکان را میدهد که از تمام پتانسیل داده خود بهرهبرداری کنید.
این دوره برای چه کسانی مناسب است؟
- متخصصان داده
- متخصصان فناوری اطلاعات
- تحلیلگران کسبوکار
- دانشجویان و فارغالتحصیلان
- کاربران IBM DataStage
- هر کسی که به یکپارچهسازی داده علاقهمند است.
تسلط به یکپارچهسازی داده (ETL) با IBM DataStage
-
معرفی 02:52
-
طرح کلی دوره 07:11
-
دستور کار این جلسه 02:20
-
یکپارچهسازی داده در مدیریت داده 02:12
-
برخی مفاهیم و انواع یکپارچهسازی داده 04:59
-
یکپارچهسازی داده چگونه به نظر میرسد؟ 03:15
-
دستور کار این جلسه 01:04
-
آشنایی با IBM Information Server 03:44
-
آشنایی با IBM Information Server (ادامه) 03:35
-
کامپوننتهای کلیدی IBM Information Server 04:35
-
توپولوژی IBM Information Server 03:36
-
توپولوژی IBM Information Server (ادامه) 03:44
-
دستور کار این جلسه 02:51
-
کنسول مدیریت IBM Information Server 00:51
-
کنسول مدیریت IBM Information Server (ادامه) 01:31
-
تمرین واقعی 1 - کنسول مدیریت IBM Information Server 00:44
-
دستور کار این جلسه 02:31
-
معماری DataStage 01:23
-
مدیر DataStage 01:38
-
طراح DataStage 01:58
-
کارگردان DataStage 00:56
-
دستور کار این جلسه 02:20
-
توسعه در DataStage 01:17
-
مخزن پروژه DataStage 02:16
-
انواع Jobهای DataStage 02:11
-
عناصر طراحی Jobهای موازی 03:19
-
موازی بودن پارتیشن 01:42
-
پارتیشنبندی چند گرهای 01:41
-
طراحی Job در مقابل اجرای Job 01:20
-
فایل پیکربندی 00:53
-
فایل پیکربندی (ادامه) 00:54
-
چکپوینت - توسعه در IBM DataStage و ویژگیها None
-
خلاصه - توسعه در IBM DataStage و ویژگیها 01:31
-
دستور کار این جلسه 01:57
-
اهداف واحد - مدیریت DataStage 01:07
-
کنسول وب سرور اطلاعات - مدیریت 01:45
-
پنجره لاگین در کنسول وب 01:37
-
مدیریت کاربران و گروهها 02:14
-
ایجاد یک شناسه کاربری DataStage 00:57
-
تخصیص نقشهای DataStage 00:47
-
اعتبارنامههای DataStage 01:50
-
نگاشت پیشفرض اعتبارنامههای DataStage 01:10
-
لاگین مدیر DataStage 00:52
-
مدیریت InforSphere DataStage 01:23
-
تبهای مدیر DataStage 00:38
-
متغیرهای محیطی 01:11
-
متغیرهای محیطی گزارشدهی 00:51
-
تب مجوزهای مدیر DataStage 01:03
-
اضافه کردن کاربران و گروهها 00:30
-
تعیین نقش DataStage 01:08
-
تب لاگهای مدیر DataStage 00:47
-
تب موازی مدیر DataStage 01:41
-
چکپوینت - مدیریت DataStage None
-
تمرین واقعی 2 - تسک 1 - مدیریت سرور اطلاعات - کاربر و گروه 02:31
-
تمرین واقعی 2 - تسک 2 - ویژگیهای پروژه - عمومی 00:50
-
تمرین واقعی 2 - تسک 3 - ویژگیهای پروژه - محیط 00:57
-
تمرین واقعی 2 - تسک 4 - ویژگیهای پروژه - کاربر و گروه 00:26
-
خلاصه - مدیریت DataStage 02:05
-
دستور کار این جلسه 02:36
-
اهداف واحد - کار با متادیتا 00:32
-
لاگین طراح DataStage 01:12
-
طراح DataStage 01:37
-
مخزن پروژه DataStage 01:19
-
ایمپورت و اکسپورت 01:04
-
اکسپورت کامپوننتهای DataStage 01:23
-
اکسپورت آبجکتها 00:40
-
ایمپورت رویه 01:10
-
ایمپورت آبجکتها 00:51
-
چکپوینت - کار با متادیتا None
-
تمرین واقعی 3 - اکسپورت و ایمپورت کامپوننتهای DataStage 02:06
-
خلاصه - کار با متادیتا 00:24
-
دستور کار این جلسه 03:01
-
اهداف واحد - ایجاد Jobهای موازی 00:41
-
Job موازی چیست؟ 01:36
-
پالت ابزارها 00:42
-
ایجاد یک Job موازی جدید 00:46
-
کشیدن استیجها و لینکها از پالت 00:23
-
تغییر نام لینکها و استیجها 00:49
-
ویژگیهای اتصال 01:05
-
پارامترهای Job 01:14
-
تعریف یک پارامتر Job 00:49
-
استفاده از پارامتر Job در یک استیج 00:27
-
اضافه کردن مستندات Job 00:24
-
مستندات پنجره ویژگیهای Job 00:34
-
کامپایل و اجرای یک Job 00:45
-
کامپایل، خطاها یا پیام موفقیت 00:28
-
کارگردان DataStage 01:01
-
گزینههای اجرا 00:33
-
آمار عملکرد 00:43
-
View وضعیت کارگردان 00:28
-
لاگ Job، مشاهده شده از طراح 00:46
-
سایر توابع لاگ Job 00:50
-
نظارت کارگردان 00:25
-
اجرای Jobها از خط فرمان 00:44
-
مجموعههای پارامتر 01:06
-
ایجاد یک مجموعه پارامتر 00:11
-
تعریف پارامترها 00:45
-
تعریف فایلهای مقادیر 00:48
-
بارگذاری یک مجموعه پارامتر در یک Job 00:35
-
استفاده از پارامترهای مجموعه پارامتر 00:26
-
اجراي Jobها با پارامترهای مجموعه پارامتر 00:33
-
چکپوینت - ایجاد Jobهای موازی None
-
تمرین واقعی 4 - تسک 1 - پایگاه داده به ترنسفورمر به پایگاه داده 02:35
-
تمرین واقعی 4 - تسک 2 - پایگاه داده به ترنسفورمر به پایگاه داده با پارامتر 02:25
-
خلاصه - ایجاد Jobهای موازی 02:02
-
دستور کار این جلسه 02:28
-
اهداف واحد - دسترسی به داده ترتیبی 01:16
-
چگونه داده ترتیبی را مدیریت کنیم؟ 01:23
-
ویژگیهای استیج فایل ترتیبی 00:58
-
طراحی Job با استیجهای فایل ترتیبی 01:03
-
ویژگیهای استیج فایل ترتیبی 01:20
-
تب فرمت 01:03
-
چند خواننده 01:17
-
نوشتن در یک فایل ترتیبی 01:22
-
لینکهای رد 01:04
-
لینکهای رد منبع و هدف 00:42
-
تنظیم ویژگی حالت رد شدن 00:30
-
چکپوینت - دسترسی به داده ترتیبی None
-
تمرین واقعی 5 - تسک 1 - فایل به ترنسفورمر به فایل 02:33
-
تمرین واقعی 5 - تسک 2 - فایل به ترنسفورمر به مجموعه داده با پارامتر 01:59
-
تمرین واقعی 6 - فایل به ترنسفورمر به مجموعه داده 01:42
-
خلاصه - دسترسی به داده ترتیبی 01:57
-
دستور کار این جلسه 01:55
-
اهداف واحد - الگوریتمهای پارتیشنبندی و جمعآوری 01:11
-
موازی بودن پارتیشن 01:54
-
پارتیشنبندی استیج 00:37
-
محیطهای سختافزاری DataStage 00:50
-
الگوریتمهای پارتیشنبندی 02:02
-
جمعآوری 01:20
-
جمعآوری (ادامه) 00:47
-
الگوریتمهای جمعآوری 01:28
-
الگوریتمهای پارتیشنبندی بدون کلید در مقابل با کلید 02:27
-
پارتیشنبندی راند رابین و تصادفی 01:04
-
پارتیشنبندی کامل 00:36
-
پارتیشنبندی هش 01:40
-
پارتیشنبندی پیمانهای 00:24
-
پارتیشنبندی خودکار 01:06
-
آیکونهای لینک پارتیشنبندی و جمعآوری 00:45
-
آیکونهای دیگر پارتیشنبندی 00:49
-
تعیین یک الگوریتم پارتیشنبندی 00:59
-
تعیین یک الگوریتم جمعآوری 00:23
-
فایل پیکربندی 00:58
-
فایل پیکربندی نمونه 00:48
-
اضافه کردن $APT_CONFIG_FILE به عنوان یک پارامتر Job 00:32
-
ویرایش فایلهای پیکربندی 00:58
-
چکپوینت - الگوریتمهای پارتیشنبندی و جمعآوری None
-
خلاصه - الگوریتمهای پارتیشنبندی و جمعآوری 01:18
-
دستور کار این جلسه 01:49
-
اهداف واحد - ترکیب داده 01:15
-
ترکیب داده 01:59
-
استیجهای Lookup، جوین و ادغام 02:05
-
ویژگیهای استیج Lookup 02:18
-
انواع Lookup 01:58
-
مثال استیج Match Lookup 00:59
-
استیج Lookup با تطابق برابر 01:20
-
تعریف کلید Lookup 00:50
-
تعیین ستونهای خروجی 00:58
-
اکشنهای شکست Lookup 02:10
-
تعیین اکشنهای شکست Lookup 00:57
-
استیج Lookup با لینک رد 00:35
-
تمرین واقعی 7 - تسک 1 - ترکیب داده با استیج Lookup 08:58
-
استیج جوین 03:13
-
Job با استیج جوین 00:44
-
ویژگیهای استیج جوین 01:15
-
تب نگاشت خروجی 00:20
-
استیج ادغام 02:43
-
Job استیج ادغام 00:14
-
ویژگیهای استیج ادغام 00:32
-
استیج قیف 03:08
-
مثال استیج قیف 00:32
-
ویژگیهای استیج قیف 00:26
-
چکپوینت - ترکیب داده None
-
تمرین واقعی 7 - تسک 2 - ترکیب داده با استیج جوین 03:52
-
تمرین واقعی 7 - تسک 3 - ترکیب داده با استیج ادغام 03:32
-
تمرین واقعی 7 - تسک 4 - ترکیب داده با استیج قیف 03:24
-
خلاصه - ترکیب داده 00:55
-
دستور کار این جلسه 02:13
-
اهداف واحد - استیجهای پردازش گروهی 00:49
-
استیجهای پردازش گروهی 00:43
-
مرتبسازی داده 01:54
-
جایگزینهای مرتبسازی 00:26
-
مرتبسازی در استیج 01:04
-
تب ویژگیهای استیج مرتبسازی 00:26
-
تعیین کلیدهای مرتبسازی 00:29
-
مرتبسازی پارتیشن 00:41
-
استیج تجمیعکننده 02:18
-
Job با استیج تجمیعکننده 00:44
-
انواع تجمیع 02:01
-
انواع تجمیع (ادامه) 01:13
-
تب نگاشت خروجی 00:41
-
تب ستونهای خروجی 00:18
-
نوع تجمیع محاسبه 00:41
-
روشهای گروهبندی 02:17
-
حذف تکراریها 02:06
-
Job استیج حذف تکراریها 00:15
-
ویژگیهای استیج حذف تکراریها 00:49
-
طراحی فورک و جوین Job 00:25
-
چکپوینت - استیجهای پردازش گروهی None
-
تمرین واقعی 8 - فایل به ترنسفورمر به مجموعه داده به تجمیعکننده به فایل 06:31
-
خلاصه - استیجهای پردازش گروهی 00:33
-
دستور کار این جلسه 01:24
-
اهداف واحد - استیج ترنسفورمر 01:15
-
استیج ترنسفورمر 02:08
-
Job با استیج ترنسفورمر 00:29
-
داخل استیج ترنسفورمر 00:52
-
عناصر استیج ترنسفورمر 02:31
-
عناصر استیج ترنسفورمر 02:33
-
محدودیتها 01:43
-
مثال محدودیتها 00:48
-
تعریف یک محدودیت 00:35
-
استفاده از ویرایشگر عبارات 01:12
-
لینکهای دیگر برای یکپارچگی داده 00:52
-
تمرین واقعی 9 - فایل به ترنسفورمر به فایل 03:47
-
debugger برای Job موازی 02:37
-
تنظیم نقاط شکست 00:42
-
ویرایش نقاط شکست 00:40
-
اجرای یک Job موازی در debugger 00:41
-
اضافه کردن ستونها به واچلیست 00:53
-
چکپوینت - استیج ترنسفورمر None
-
چکپوینت - استیج ترنسفورمر 00:54
-
دستور کار این جلسه 01:19
-
اهداف واحد - توابع مخزن 00:27
-
جستجوی سریع 00:51
-
نتایج پیدا شده 00:29
-
پنجره Find پیشرفته 00:30
-
گزینههای Find پیشرفته 01:31
-
استفاده از نتایج پیدا شده 00:32
-
انجام تحلیل تأثیر 01:25
-
شروع یک تحلیل تأثیر 00:50
-
نتایج به فرمت متنی 00:16
-
نتایج به فرمت گرافیکی 00:56
-
نمایش گراف وابستگی 00:48
-
نمایش مسیر وابستگی 00:34
-
مشاهده جریان داده سطح ستون 01:25
-
یافتن منبع یک ستون 00:34
-
نتایج نمایش داده شده 00:18
-
یافتن تفاوت بین دو Job 00:56
-
شروع مقایسه 00:18
-
نتایج مقایسه 00:38
-
ذخیره در یک فایل اچ تی ام ال 00:19
-
چکپوینت - توابع مخزن None
-
خلاصه - توابع مخزن 00:33
-
دستور کار این جلسه 03:31
-
اهداف واحد - کار با داده رابطهای 02:07
-
استیجهای کانکتور 01:43
-
خواندن از جداول پایگاه داده 00:19
-
رابط کاربری گرافیکی استیج کانکتور 00:44
-
پنل ناوبری 01:17
-
ویژگیهای اتصال 02:12
-
ویژگیهای کاربرد - سشن و قبل و بعد از اس کیوال 02:36
-
نوشتن در جداول پایگاه داده 00:18
-
رابط کاربری گرافیکی DB2 Connector 00:25
-
ویژگیهای نویسنده کانکتور 02:48
-
آبجکتهای اتصال داده 02:25
-
آبجکتهای اتصال داده 00:14
-
ایجاد یک آبجکت اتصال داده جدید 00:22
-
تمرین واقعی 11 - پایگاه داده رابطهای به ترنسفورمر به فایل 02:36
-
خلاصه - کار با داده رابطهای 02:45
-
دستور کار این جلسه 06:03
-
اهداف واحد - کنترل توالی Job 02:58
-
یک توالی Job چیست؟ 03:16
-
مبانی ایجاد یک توالی Job 02:34
-
استیجهای توالی Job 03:43
-
مثال توالی Job 00:44
-
ویژگیهای استیج فعالیت Job 01:05
-
تریگر فعالیت Job 01:01
-
استیج اجرای فرمان 00:37
-
استیج فعالیت نوتیفیکیشن 00:37
-
استیج متغیرهای کاربر 00:33
-
صبر برای استیج فایل 00:33
-
استیج توالیدهنده 00:46
-
استیج شرط تودرتو 00:31
-
استیجهای حلقه 00:51
-
چکپوینت - کنترل Job None
-
خلاصه - کنترل Job 01:12
-
دستور کار این جلسه 06:52
-
تمرین واقعی 12 - یکپارچهسازی داده AWS Cloud با IBM DataStage S3 Connector 04:54
-
معرفی Data Vault 03:49
-
یکپارچهسازی Data Vault با IBM DataStage 10:56
-
تمرین واقعی 13 - پروژه کوچک 1 - Data Vault 1.0 DWH با IBM DataStage 31:43
-
تمرین واقعی 13 - پروژه کوچک 2 - Data Vault 2.0 DWH با IBM DataStage 34:57
-
آنچه یاد گرفتیم 04:51
مشخصات آموزش
تسلط به یکپارچهسازی داده (ETL) با IBM DataStage
- تاریخ به روز رسانی: 1404/06/14
- سطح دوره:همه سطوح
- تعداد درس:282
- مدت زمان :07:58:28
- حجم :3.23GB
- زبان:دوبله زبان فارسی
- دوره آموزشی:AI Academy