Файл start-mapred.sh отсутствует в Hadoop 2.7.0

Я установил Hadoop 2.7.0 на Ubuntu 14.04. start-dfs.sh,start-yarn.sh а также start-all.sh файлы находятся в каталоге sbin. Но start-mapred.sh нет в каталоге. в чем может быть проблема в моей установке?

Источник

1 ответ

Решение

Это не проблема с вашей установкой. Hadoop 2 использует инфраструктуру YARN, то есть MapReduce 2.0 (MRv2).
См. Hadoop Yarn для более подробной информации.

Так, start-mapred.sh не требуется. Чтобы запустить Hadoop, используйте start-all.sh или же start-dfs.sh а также start-yarn.sh,

Изначальная цель YARN состояла в том, чтобы разделить две основные обязанности JobTracker/TaskTracker на отдельные объекты:

  • глобальный ResourceManager
  • ApplicationMaster для каждого приложения
  • подчиненный узел NodeManager
  • Контейнер для приложения, работающий на NodeManager

Вы можете следовать учебным пособиям, объясняющим настройку Hadoop 1.

Apache Hadoop Yarn поможет вам.

Источник
Другие вопросы по тегам