Съдържание:

Как да разбера дали spark е инсталиран Linux?
Как да разбера дали spark е инсталиран Linux?

Видео: Как да разбера дали spark е инсталиран Linux?

Видео: Как да разбера дали spark е инсталиран Linux?
Видео: СТРАШНЫЕ ПРИЗРАКИ ПОКАЗАЛИ СВОЮ СИЛУ НОЧЬЮ В ТАИНСТВЕННОЙ УСАДЬБЕ / WHAT ARE GHOSTS CAPABLE OF? 2024, Ноември
Anonim

2 отговора

  1. Отвори Искра shell Terminal и въведете командата.
  2. sc.версия Or искра -изпратете --версия.
  3. Най-лесният начин е просто да стартирате “ искра -shell” в командния ред. Той ще покаже.
  4. текущата активна версия на Искра .

Също така трябва да знам как да разбера дали Spark е инсталиран Ubuntu?

Инсталиране на Spark на Ubuntu

  1. Изтеглете най-новата версия на Spark тук.
  2. Разопаковайте архива.
  3. Преместете получената папка и създайте символна връзка, така че да можете да имате инсталирани няколко версии на Spark.
  4. Тествайте обвивката на Spark.
  5. Може би Scala не е вашата чаша чай и бихте предпочели да използвате Python.

Второ, къде е инсталирана искра на EMR? От emr -4,0 0, всички приложения са включени EMR са в /usr/lib. Искра е в /usr/lib/ искра.

Следователно, как да настроите искра?

Стъпки за инсталиране на Spark

  1. Стъпка 1: Уверете се, че Java е инсталирана.
  2. Стъпка 2: Уверете се, че Scala е инсталирана.
  3. Стъпка 3: Изтеглете Scala.
  4. Стъпка 4: Инсталирайте Scala.
  5. Стъпка 5: Изтегляне на Apache Spark.
  6. Стъпка 6: Инсталиране на Spark.
  7. Стъпка 7: Проверете инсталирането на приложението Spark във вашата система.

Трябва ли да инсталирам Scala за spark?

Ти ще трябва да използвате съвместим Скала версия (2.10. x). Java е задължителна за Искра + много други преходни зависимости ( scala компилаторът е просто библиотека за JVM). PySpark просто се свързва дистанционно (чрез сокет) към JVM, използвайки Py4J (взаимодействие на Python-Java).

Препоръчано: