تحلیل کلان داده با هدوپ و آپاچی اسپارک
✅ سرفصل و جزئیات آموزش
یاد بگیرید که چگونه از هدوپ و آپاچی اسپارک برای ساخت پایپ لاین های تحلیل داده بهینه و مقیاس پذیر لستفاده کنید.
آپاچی هدوپ که پیش از این در دنیای فناوری های کلان داده پیشگام بود، همچنان در ذخیره سازی کلان داده های سازمانی پیشتاز است. آپاچی اسپارک برترین موتور پردازش کلان داده است و مجموعه ای چشمگیر از ویژگی ها و قابلیت ها را ارائه می دهد. وقتی این دو ابزار، فایل سیستم توزیع شده هدوپ (HDFS) و اسپارک در کنار یکدیگر استفاده می شوند، تنظیمات مقیاس پذیری را برای تحلیل کلان داده ارائه می دهند.
در این دوره، کارشناس تحلیلگر داده Kumaran Ponnambalam به شما نشان می دهد که چگونه از این دو فناوری برای ساخت پایپ لاین های تحلیل داده مقیاس پذیر و بهینه استفاده کنید. در ادامه روش های بهینه کردن مدل سازی و ذخیره سازی داده در HDFS را بررسی کنید، در مورد جذب و استخراج داده های مقیاس پذیر با استفاده از اسپارک بحث کنید و نکات عملیاتی برای بهینه سازی پردازش داده در اسپارک را مرور کنید. بعلاوه یک پروژه مورد استفاده را تکمیل کنید که به شما امکان می دهد تکنیک های جدید خود را تمرین کنید.
تحلیل کلان داده با هدوپ و آپاچی اسپارک
-
قدرت ترکیبی اسپارک و فایل سیستم توزیع شده هدوپ (HDFS) 0:00:42
-
بررسی آپاچی هدوپ 0:01:50
-
بررسی آپاچی اسپارک 0:00:45
-
ادغام اسپارک و هدوپ 0:01:19
-
استفاده از فایل های تمرینی 0:03:36
-
فرمت های ذخیره سازی 0:02:20
-
فشرده سازی 0:02:05
-
پارتیشن بندی 0:02:02
-
Bucketing 0:01:17
-
بهترین شیوه ها برای ذخیره سازی داده 0:01:19
-
خواندن فایل های خارجی در اسپارک 0:01:46
-
نوشتن در HDFS 0:01:26
-
نوشتن موازی با پارتیشن بندی 0:01:12
-
نوشتن موازی با bucketing 0:01:17
-
بهترین شیوه ها برای جذب 0:00:55
-
اسپارک چگونه کار می کند؟ 0:02:59
-
خواندن فایل های HDFS با اسکیما 0:01:18
-
خواندن داده پارتیشن بندی شده 0:01:25
-
خواندن bucketed data 0:00:55
-
بهترین شیوه ها برای استخراج داده 0:01:08
-
push down کردن پروجکشن ها 0:01:45
-
push down کردن فیلترها 0:01:52
-
مدیریت پارتیشن ها 0:02:32
-
بهبود join ها 0:01:59
-
ذخیره سازی نتایج میانی 0:02:00
-
بهترین شیوه ها برای پردازش داده 0:02:39
-
تعریف مسئله 0:01:57
-
بارگذاری داده 0:01:38
-
تحلیل امتیاز کل 0:01:02
-
تحلیل امتیاز میانگین 0:00:59
-
تحلیل دانشجوی نمونه 0:01:12
-
ادامه یادگیری با تحلیل کلان داده 0:00:44
مشخصات آموزش
تحلیل کلان داده با هدوپ و آپاچی اسپارک
- تاریخ به روز رسانی: 1404/06/14
- سطح دوره:متوسط
- تعداد درس:32
- مدت زمان :0:51:55
- حجم :119.0MB
- زبان:دوبله زبان فارسی
- دوره آموزشی:AI Academy
آموزش های مرتبط
- زمان: 05:14:59
- تعداد درس: 30
-
سطح دوره:
-
زبان: دوبله فارسی
- زمان: 03:37:21
- تعداد درس: 57
-
سطح دوره:
-
زبان: دوبله فارسی
- زمان: 05:29:46
- تعداد درس: 50
-
سطح دوره:
-
زبان: دوبله فارسی
![آموزش AWS DynamoDB - یک بررسی جامع [جدید]](/media/courses/images/aws-dynamodb.jpg)
- زمان: 03:27:39
- تعداد درس: 60
-
سطح دوره:
-
زبان: دوبله فارسی
- زمان: 45:15
- تعداد درس: 18
-
سطح دوره:
-
زبان: دوبله فارسی
- زمان: 19:11:34
- تعداد درس: 203
-
سطح دوره:
-
زبان: دوبله فارسی
- زمان: 50:18
- تعداد درس: 18
-
سطح دوره:
-
زبان: دوبله فارسی
- زمان: 02:01:30
- تعداد درس: 32
-
سطح دوره:
-
زبان: دوبله فارسی
- زمان: 18:23:18
- تعداد درس: 103
-
سطح دوره:
-
زبان: دوبله فارسی