Какво представлява планирането на работа Hadoop?
Какво представлява планирането на работа Hadoop?

Видео: Какво представлява планирането на работа Hadoop?

Видео: Какво представлява планирането на работа Hadoop?
Видео: Поднимаем Hadoop-кластер локально | Скринкасты | Ok #1 2024, Април
Anonim

Планиране на работа . Можеш да използваш планиране на работа за да дадете приоритет на MapReduce работни места и YARN приложения, които работят на вашия MapR клъстер. По подразбиране график за работа е панаирът Планировчик , който е проектиран за производствена среда с множество потребители или групи, които се конкурират за клъстерни ресурси.

От това какво е планировчик на Hadoop?

Въведение в щепселото планировчик рамка Hadoop е система с общо предназначение, която позволява високопроизводителна обработка на данни върху набор от разпределени възли. До 2008 г. Hadoop поддържа сингъл планировчик която беше смесена с логиката на JobTracker.

Второ, как правите график на работа? Започнете с 10-те съвета, изброени по-долу.

  1. Познайте своя екип.
  2. Изградете промени около най-добрите си служители.
  3. Създайте метод за комуникация в целия екип.
  4. Изтеглете графика бързо.
  5. Уважавайте доколкото е възможно предпочитанията за работа и исканията за отпуск.
  6. Накарайте служителите да свършат част от работния график.
  7. Позволете на служителите да намерят свои собствени заместители.

По този начин как да планирам работа на Hadoop?

Как да график на работни места в hadoop - Quora. Най-простият начин е да увиете кода си в шел скрипт и график го като cron работа на крайния възел (възелът, където обикновено изпращате своя работни места ). Но обикновено пакетирането на кода в скрипт и изпълнението му като a работа е трудно за отстраняване на грешки. тествайте и поддържайте.

Как работи планировчикът на прежда?

Планиране в ПРЕЖДА ResourceManager (RM) проследява ресурси в клъстер и ги присвоява на приложения, които се нуждаят от тях. В планировчик е онази част от RM, която прави това съпоставяне, зачитайки организационните политики за споделяне на ресурси. Моля, имайте предвид, че: ПРЕЖДА използва опашки за споделяне на ресурси между множество наематели.

Препоръчано: