مایکروسافت فابریک - آپاچی اسپارک و نوت‌بوک‌ها

آنچه یاد خواهید گرفت:

• یکپارچه‌سازی آپاچی اسپارک و نوت‌بوک‌ در مایکروسافت فابریک
• بررسی محیط نوت‌بوک‌های مایکروسافت فابریک
• مبانی دیتافریم
• عملیات‌های رایج بر روی دیتافریم‌ها
• فیلترینگ داده‌ با استفاده از دیتافریم‌ها
• تجمیع داده‌ با استفاده از دیتافریم‌ها
• جوین کردن دیتافریم‌ها
• کتابخانه‌های اسپارک
• کار با تاریخ‌ها
• دستورات SQL و اسپارک
• پیکربندی و تیونینگ اسپارک
• تمرین‌ها و سوالات برای تمرین

توضیحات دوره

این دوره شما را با تجربه‌ آپاچی اسپارک و نوت‌بوک‌ها در مایکروسافت فابریک آشنا می‌کند، جایی که قدرت رایانش توزیع‌ شده با سادگی و جذابیت کدنویسی تعاملی در زبان‌های پایتون و R و اسکالا یا SQL ترکیب شده است.

در این دوره جامع، با کتابخانه pyspark در اسپارک آشنا می‌شوید که به شما امکان می‌دهد تا به راحتی به مشکلات رایج داده‌ رسیدگی کنید. شما داده‌ را در دیتافریم‌های pandas مدیریت خواهید کرد و با رایج‌ترین عملیات‌ها روی دیتافریم‌ها آشنا خواهید شد. به طور خلاصه، مهارت‌های لازم برای دستکاری داده‌ به روش‌های مختلف را خواهید آموخت.

هر چه بیشتر به اسپارک تسلط پیدا می‌کنید، هنر فیلترینگ داده‌، جوین کردن دیتافریم‌ها و مدیریت تاریخ و زمان را به راحتی خواهید آموخت. همچنین با استفاده از SQL در اسپارک آشنا می‌شوید که به وسیله آن می‌توانید از طریق کوئری‌های SQL، داده‌ را از فایل‌های Delta Parquet استخراج کرده و در دیتافریم‌ها ذخیره کنید.

این دوره همچنین دانش لازم برای بهینه‌سازی عملکرد اسپارک از طریق پیکربندی موثر و تیونینگ خودکار را به شما می‌آموزد. شما خواهید دید که برای بهینه‌سازی کامل محیط اسپارک که نوت‌بوک‌های شما در آن اجرا می‌شوند، کار زیادی لازم نیست انجام دهید.

دوره شامل بیش از 30 جلسه آموزشی است که با تمرین‌های عملی همراه شده‌اند. این تمرین‌ها دانش شما را به چالش می‌کشند و شاید توانایی تحقیقات شما را نیز محک بزنند. در پایان دوره، شما یک کاربر ماهر و با اعتمادبه‌نفس نوت‌بوک‌های اسپارک خواهید بود که می‌تواند از قدرت عظیم آن برای حل سناریوهای واقعی داده‌ بهره ببرد.

برخی از مزایای برجسته‌ که از دوره به دست می‌آورید عبارتند از:

• تسلط به اصول کتابخانه‌های اسپارک، دیتافریم‌ها و SQL
• یاد می‌گیرید چگونه داده را با استفاده از دیتافریم‌ها فیلتر، تجمیع و جوین کنید.
• کسب مهارت در مدیریت تاریخ‌ها و زمان‌ها
• آماده‌سازی داده
• یاد می‌گیرید چگونه عملکرد اسپارک را از طریق پیکربندی و تیونینگ خودکار بهینه کنید.
• حل سناریوهای واقعی داده‌ با نوت‌بوک‌های اسپارک
• ارتقای رزومه خود با مهارت‌های پرتقاضای نوت‌بوک‌ اسپارک در فابریک
• آمادگی برای موفقیت در حوزه رو به رشد کلان داده

اگر آماده‌اید تا مهارت‌های داده‌ خود را به سطح بعدی ببرید، همین امروز در دوره شرکت کنید و بیاموزید چگونه می‌توانید آپاچی اسپارک و نوت‌بوک‌ها را که در مایکروسافت فابریک یکپارچه شده‌اند در کار روزانه خود به کار ببرید.

این دوره برای چه کسانی مناسب است؟

• کسی که می‌خواهد بداند چگونه آپاچی اسپارک و نوت‌بوک‌ها در مایکروسافت فابریک یکپارچه شده‌اند.