AWS поддържа ли Hadoop?
AWS поддържа ли Hadoop?

Видео: AWS поддържа ли Hadoop?

Видео: AWS поддържа ли Hadoop?
Видео: Big Data in AWS | Building Big Data Application on AWS | AWS Tutorial for Beginners | Edureka 2024, Ноември
Anonim

Apache™ Hadoop ® е софтуерен проект с отворен код, който може да се използва за ефективно обработване на големи масиви от данни. Amazon EMR улеснява създаването и управлението на напълно конфигурирани еластични клъстери от Amazon EC2 работещи екземпляри Hadoop и други приложения в Hadoop екосистема.

Поради това AWS използва ли Hadoop?

Amazon Уеб услуги използва Apache с отворен код Hadoop разпределена изчислителна технология, за да се улесни достъпът до големи количества изчислителна мощност за изпълнение на задачи с интензивни данни. Hadoop , версията с отворен код на MapReduce на Google, вече се използва от компании като Yahoo и Facebook.

Второ, какво прави AWS EMR? Amazon Elastic MapReduce ( EMR ) е ан Amazon уеб услуги ( AWS ) инструмент за обработка и анализ на големи данни. Amazon EMR обработва големи данни в Hadoop клъстер от виртуални сървъри Amazon Elastic Compute Cloud ( EC2 ) и Amazon Опростена услуга за съхранение (S3).

По този начин каква е разликата между Hadoop и AWS?

Hadoop е рамка, която помага за обработката на големи набори от данни на множество компютри. Тя включва Map/Reduce (паралелна обработка) и HDFS (разпределена файлова система). AWS е хранилище за данни, изградено върху собствена технология, първоначално разработена от ParAccel. Какви са някои често срещани употреби на Apache Hadoop ?

AWS s3 Hadoop ли е?

S3 всъщност е безкрайно съхранение в облак, но HDFS не е. HDFS се хоства на физически машини, така че можете да изпълнявате всяка програма там. Не можете да изпълните нищо върху S3 тъй като е просто обектен магазин, а не FS.

Препоръчано: