برنامه نویسی

تفاوت بین گره های اصلی، هسته و وظیفه در خوشه آمازون EMR

تفاوت های کلیدی بین گره های اولیه، هسته و وظیفه در یک خوشه آمازون EMR عبارتند از:

گره اولیه (همچنین به عنوان گره اصلی شناخته می شود):

  • گره اولیه مسئول هماهنگی خوشه و مدیریت اجرای کارها است.
  • سرویس های اصلی Hadoop مانند JobTracker، NameNode و ResourceManager را اجرا می کند.
  • تنها یک گره اولیه در یک خوشه EMR وجود دارد.
  • گره اولیه را نمی توان در طول عمر خوشه خاتمه داد، زیرا برای عملکرد خوشه ضروری است.

گره های اصلی:

  • گره های هسته میزبان سیستم فایل توزیع شده هادوپ (HDFS) هستند و سرویس های DataNode و TaskTracker را اجرا می کنند.
  • آنها مسئول ذخیره و پردازش داده ها در خوشه هستند.
  • گره های اصلی را نمی توان بدون خطر از دست دادن داده ها از خوشه حذف کرد، زیرا آنها حاوی داده های پایدار در HDFS هستند.
  • شما باید گره های اصلی را برای ظرفیت مورد نیاز تا زمانی که خوشه شما کامل شود رزرو کنید.

گره های وظیفه:

  • گره های وظیفه برای اجرای وظایف استفاده می شوند و HDFS را میزبانی نمی کنند. می‌توان آن‌ها را در صورت نیاز، بدون خطر از دست دادن داده، اضافه یا از خوشه حذف کرد.
  • Task Node برای مدیریت بارهای کاری موقت یا انفجاری ایده آل است، زیرا می توانید ناوگان نمونه کار را در Spot Instance راه اندازی کنید تا ظرفیت را افزایش دهید و هزینه ها را به حداقل برسانید.
  • این خوشه هرگز کمتر از حداقل محدودیت‌های تعیین‌شده در خط‌مشی مقیاس‌بندی مدیریت‌شده مقیاس نخواهد شد.

در اینجا جدولی است که تفاوت های اصلی را خلاصه می کند:

خلاصه گره های EMR


جزئیات بیشتر در مورد،

  1. انتخاب و استقرار یک خوشه آمازون EMR: اینجا را کلیک کنید
  2. تخمین ظرفیت خوشه آمازون EMR: اینجا را کلیک کنید

نوشته های مشابه

دیدگاهتان را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

دکمه بازگشت به بالا