پردازش دادههای بلادرنگ با Azure Databricks
✅ سرفصل و جزئیات آموزش
آنچه یاد خواهید گرفت
اپلیکیشن های مدرن نیازمند بینش فوری از دادهها نه ساعت یا روز بعد هستند. اما پردازش دادههای بلادرنگ در ابر میتواند دشوار باشد تا بهدرستی راهاندازی و مقیاسپذیر شود.
در این دوره، پردازش دادهی بلادرنگ با Azure Databricks، شما قادر خواهید بود پایپ لاین مقیاسپذیر و بلادرنگ داده را با ابزارهای نیتیو Azure طراحی و بسازید.
ابتدا، اصول استریمینگ بلادرنگ و نحوهی امکانپذیر کردن Azure Event Hub برای جذب دادهها با سرعت بالا و بلادرنگ را بررسی میکنید.
سپس، یاد میگیرید چگونه Azure Databricks را برای پردازش بلادرنگ با استریمینگ ساختاریافته راهاندازی کنید، نحوهی مدیریت تحول اسکیما و پیادهسازی تشخیص انحراف با مدلهای ML را بیاموزید.
در پایان، میآموزید چگونه با استفاده از checkpointing ،autoscaling و ابزارهای نظارت نیتیو Azure، بارهای کاری استریمینگ خود را نظارت، بهینه و مقیاسپذیر کنید. پس از پایان این دوره، مهارتها و دانش لازم برای ساخت پایپ لاین های قدرتمند داده بلادرنگ در محیط آماده تولید را خواهید داشت.
پردازش دادههای بلادرنگ با Azure Databricks
-
پردازش دستهای در مقابل پردازش بلادرنگ 3m 29s
-
Azure Event Hub: مفاهیم اصلی و معماری 2m 41s
-
موارد استفاده از استریمینگ بلادرنگ در Azure 3m 3s
-
مقایسه Event Hub و Kafka 3m 5s
-
اتصال Azure Databricks به Azure Event Hub 5m 18s
-
مقدمهای بر Structured Streaming 2m 56s
-
مدیریت تحول اسکیما و دادههای دیررس 3m
-
Checkpointing و تحمل خطا 2m 23s
-
تجمیعهای پنجرهای در جریانهای بلادرنگ 3m 3s
-
پردازش Stateful در Structured Streaming 2m 59s
-
تشخیص انحراف بلادرنگ 3m 21s
-
غنی سازی دادههای استریمینگ 1m 39s
-
Autoscaling برای بهینهسازی استریم 2m 37s
-
نظارت بر جاب های استریمینگ در Databricks 2m 45s
-
عیبیابی تأخیر و از دست رفتن داده 2m 48s
-
استراتژیهای بهینهسازی هزینه 2m 52s
مشخصات آموزش
پردازش دادههای بلادرنگ با Azure Databricks
- تاریخ به روز رسانی: 1405/04/02
- سطح دوره:متوسط
- تعداد درس:16
- مدت زمان :00:48:06
- حجم :147.0MB
- زبان:دوبله زبان فارسی
- دوره آموزشی:AI Academy