تحلیل داده‌ بلادرنگ با Apache Pinot و Apache Flink

آنچه یاد خواهید گرفت:

• درک نحوه انجام تحلیل بلادرنگ برای یک کیس کسب‌وکار واقعی در شرکت خدمات تاکسی آنلاین
• درک نحوه استفاده از Apache Flink برای پردازش داده‌ بلادرنگ
• درک نحوه اتصال چندین استریم در Apache Flink 
• یادگیری نحوه جستجوی داده‌ در Apache Flink از دیتااستورهای خارجی
• یادگیری نحوه استفاده از Apache Pinot برای اجرای کوئری‌های تحلیلی بلادرنگ
• یادگیری نحوه ایجاد Upserts بلادرنگ در Apache Pinot
• یادگیری نحوه عملکرد آپاچی کافکا به عنوان لایه اتصال بین کامپوننت‌های مختلف در سیستم تحلیل بلادرنگ
• یادگیری نحوه ایجاد داشبوردها برای داده‌ بلادرنگ در Apache Superset
• همه مطالب دوره بر اساس یوزکیس است تا بتوانید مستقیماً آن را در یک پروژه واقعی اعمال کنید

پیش‌نیازهای دوره

• داشتن دانش قبلی در مورد جاوا و SQL مفید است اما اجباری نیست.
• همه چیز در خود دوره در نظر گرفته شده است، بنابراین هیچ پیش‌زمینه قبلی لازم نیست.

توضیحات دوره

در محیط کسب‌وکار پرشتاب امروزی، توانایی استخراج بینش‌های کاربردی از داده‌ به‌صورت بلادرنگ اهمیت بسیار زیادی دارد. تحلیل داده‌ بلادرنگ می‌تواند به عنوان عامل تمایز بین شرکت‌های مختلف عمل کند.

دانستن نحوه انجام تحلیل داده‌ بلادرنگ، مهارتی حیاتی است که اکنون و در آینده به آن نیاز خواهد بود.

در این دوره، نحوه انجام تحلیل داده‌ بلادرنگ با استفاده از Apache Pinot و Apache Flink، با کمک یوزکیس واقعی صنعت، آموزش داده شده است. شما می‌آموزید چگونه تحلیل داده‌ بلادرنگ را برای یک شرکت خدمات تاکسی آنلاین انجام دهید.

فقط دانستن تئوری کافی نیست، بلکه باید کارهای عملی نیز انجام دهید. بنابراین این دوره شامل جلسات فراوان عملی است که به شما نشان می‌دهد چگونه می‌توان مفاهیم را پیاده‌سازی کرد. همچنین در هر مرحله تمرکز روی حل مسئله واقعی کسب‌وکار است.

این دوره مباحث زیر را پوشش می‌دهد:

• درک دلیل نیاز به تحلیل داده‌ بلادرنگ
• شناخت جایگاه تحلیل داده‌ بلادرنگ در یک یوزکیس مانند شرکت خدمات تاکسی آنلاین
• معماری سیستم تحلیل داده‌ بلادرنگ
• آشنایی با آپاچی کافکا و نحوه ارتباط بین کامپوننت‌های مختلف سیستم تحلیل داده‌ بلادرنگ توسط کافکا
• مفاهیم اولیه Apache Flink
• جداول پویا و جداول نسخه‌دار در Flink
• مفاهیمی مثل چک‌پوینت‌ها و واترمارک‌ها در Apache Flink
• انواع مختلف جوین‌ها در Apache Flink مانند جوین معمولی و جوین موقت
• جذب داده بلادرنگ و upserts داده‌ در Apache Pinot
• اجرای کوئری‌های تحلیلی در Apache Pinot
• ساخت داشبوردهای داده بلادرنگ در Apache Superset

در پایان دوره، شما یک سیستم تحلیل داده‌ بلادرنگ کاربردی را روی سیستم محلی خود برای یک شرکت خدمات تاکسی آنلاین خواهید داشت.

این دوره برای چه کسانی مناسب است؟

• توسعه‌دهندگانی که می‌خواهند یاد بگیرند که تحلیل‌های بلادرنگ چگونه در دنیای واقعی اتفاق می‌افتد.
•  تکنسین‌های کنجکاو که در مورد نحوه عملکرد فناوری‌های کلان داده کنجکاو هستند.
• مهندسان داده که علاقه‌مند به یادگیری نحوه قرارگیری Pinot و Flink در یک اکوسیستم بزرگتر هستند.
• کسی که می‌خواهد تحلیل‌های بلادرنگ را برای پروژه‌هایی که در حال حاضر روی آنها کار می‌کند، به کار گیرد.
• کسی که می‌خواهد نقش جدیدی را در جایی که می‌خواهد تحلیل‌های بلادرنگ کار کند، بر عهده بگیرد