Трябва ли да уча Hadoop за Spark?
Трябва ли да уча Hadoop за Spark?

Видео: Трябва ли да уча Hadoop за Spark?

Видео: Трябва ли да уча Hadoop за Spark?
Видео: Култови немски лафове, които трябва да знаеш 2024, Може
Anonim

Не, не го правиш трябва да научите Hadoop да се научи Spark . Искра беше независим проект. Но след YARNand Hadoop 2.0, Искра стана популярен, защото Искра може да работи върху HDFS заедно с други Hadoop компоненти. Hadoop е рамка, в която пишете задачаMapReduce, като наследявате Java класове.

По същия начин, кое е по-добре да научите Spark или Hadoop?

Първата и основна разлика е капацитетът на RAM паметта и нейното използване. Искра използва Повече ▼ Памет с произволен достъп Hadoop , но той „изяжда“по-малко количество интернет или дискова памет, така че ако използвате Hadoop , това е По-добре да намерите мощна машина с голямо вътрешно съхранение.

Второ, лесен ли е за научаване Hadoop? Hadoop програмирането е по-лесно за хора с SQL умения - благодарение на Pig and Hive. Студенти или професионалисти без опит в програмирането, само с основни познания за SQL, могат да овладеят Hadoop чрез изчерпателно практически Hadoop обучение, ако имат усърдие и желание за това уча.

Също така попита колко време ще отнеме да научите Hadoop?

приблизително 3-4 месеца

Spark замества ли Hadoop?

Искра никога не може да бъде а замяна за Hadoop ! Искра е процесор, който функционира отгоре Hadoop екосистема. Както е показано в горната архитектура, Искра идва на мястото на MapReduce в Hadoop екосистема. Има и други компоненти в Hadoop архитектура за обработка на данни като Pig andHive.

Препоръчано: