پاکسازی داده با PySpark
✅ سرفصل و جزئیات آموزش
کار با داده چالشبرانگیز است و کار با میلیونها یا حتی میلیاردها ردیف داده، چالشبرانگیزتر. آیا تا به حال کدی برای پردازش داده دریافت کردهاید که روی یک لپتاپ و با داده نسبتاً تمیز نوشته شده باشد؟ به احتمال زیاد مسئول انتقال یک فرایند ساده پردازش داده از مرحله نمونه اولیه به محیط عملیاتی شدهاید.
ممکن است با مجموعهداده واقعی کار کرده باشید؛ داده با فیلدهای مفقود، قالببندیهای عجیب و حجمی چندین برابر بزرگتر. حتی اگر همه این موارد برای شما جدید باشد، این دوره به شما کمک میکند آنچه برای آمادهسازی فرایندهای داده با استفاده از Python و Apache Spark نیاز است را بیاموزید. در این مسیر با اصطلاحات، روشها و مجموعهای از بهترین شیوهها آشنا میشوید تا یک بستر پردازش داده با کارایی بالا، قابل نگهداری و قابل درک ایجاد کنید.
پاکسازی داده با PySpark
-
مقدمهای بر پاکسازی داده با Apache Spark None
-
تغییرناپذیری و پردازش تنبل None
-
آشنایی با Parquet None
-
عملیات روی ستونهای DataFrame None
-
عملیات شرطی روی ستونهای DataFrame None
-
توابع تعریفشده توسط کاربر (UDF) None
-
پارتیشنبندی و پردازش تنبل None
-
Caching None
-
بهبود کارایی بارگذاری داده None
-
پیکربندی کلاستر None
-
بهبودهای کارایی None
-
مقدمهای بر Data Pipelineها None
-
تکنیکهای مدیریت داده None
-
اعتبارسنجی داده None
-
تحلیل نهایی و تحویل None
-
تبریک و گامهای بعدی None
مشخصات آموزش
پاکسازی داده با PySpark
- تاریخ به روز رسانی: 1404/12/10
- سطح دوره:پیشرفته
- تعداد درس:16
- مدت زمان :4:00:00
- حجم :188.0MB
- زبان:دوبله زبان فارسی
- دوره آموزشی:AI Academy