تبدیل دادهها با استفاده از PySpark
✅ سرفصل و جزئیات آموزش
آنچه یاد خواهید گرفت
دستکاری کارآمد دادهها برای پردازش مؤثر مجموعههای داده با مقیاس بزرگ حیاتی است.
در این دوره، تبدل دادهها با استفاده از PySpark، شما توانایی دستکاری، پاکسازی و تحلیل مجموعههای داده بزرگ را با استفاده از PySpark خواهید آموخت.
ابتدا، شما بررسی میکنید که چگونه دادهها را با استفاده از فرمتهای مختلف با مشخصات اسکیما بخوانید و بنویسید.
سپس، شما کشف خواهید کرد که چگونه تحولات پیشرفتهای از جمله گروهبندی، جوینها و توابع پنجرهای را انجام دهید و همچنین کارهای پاکسازی دادهها را از جمله مدیریت مقادیر گمشده، null و Duplicate مدیریت کنید.
در نهایت، شما یاد خواهید گرفت چگونه توابع سفارشی، از جمله UDFها، UDTFها و UDFهای برداری شده را ایجاد کنید تا قابلیتهای PySpark را برای نیازهای تحلیلی خاص گسترش دهید.
وقتی دوره را به پایان رساندید، شما مهارتها و دانش لازم در مورد PySpark را خواهید داشت تا گردشکارهای مؤثر و قابل استفاده مجددی برای هر چالش دادهمحور ایجاد کنید.
تبدیل دادهها با استفاده از PySpark
-
دستکاری دادهها در PySpark 0:03:00
-
نمونه: خواندن و نوشتن دادهها با مشخصات اسکیما 0:04:00
-
نمونه: انتخاب و فیلتر کردن دادهها 0:03:00
-
نمونه: افزودن، تغییر و حذف ستونها 0:02:00
-
نمونه: گروهبندی و تجمیع دادهها 0:03:00
-
نمونه: انجام عملیات جوین 0:04:00
-
نمونه: انجام عملیات مجموعه در PySpark 0:03:00
-
نمونه: استفاده از توابع پنجرهای در PySpark 0:03:00
-
نمونه: مدیریت دادههای گمشده در PySpark 0:03:00
-
نمونه: مدیریت دادههای null در PySpark 0:04:00
-
نمونه: مدیریت دادههای Duplicate در PySpark 0:02:00
-
نمونه: نوشتن و استفاده از UDFها در PySpark 0:03:00
-
نمونه: استفاده از UDTFها برای تحولات پیشرفته 0:03:00
-
نمونه: ایجاد و استفاده از UDFهای برداری شده 0:03:00
مشخصات آموزش
تبدیل دادهها با استفاده از PySpark
- تاریخ به روز رسانی: 1404/12/10
- سطح دوره:متوسط
- تعداد درس:14
- مدت زمان :0:43:35
- حجم :109.0MB
- زبان:دوبله زبان فارسی
- دوره آموزشی:AI Academy