Форум программистов, компьютерный форум, киберфорум
Наши страницы
Java EE (J2EE)
Войти
Регистрация
Восстановить пароль
 
Borsche
166 / 95 / 41
Регистрация: 03.07.2016
Сообщений: 415
1

Hadoop запуск на VM

08.06.2017, 13:20. Просмотров 282. Ответов 6
Метки нет (Все метки)

Здраствуйте.
Дело такое, на ноуте всего 8 Гб оперативки. И из за этого к примеру образ для VM hortonworks - вообще не стартовал(out of memory), bitnami - какието ошибки при запуске, рыскал в нете и так не розобрался, cloudera - стартовала, но express manager запустить не получилось т.к. опять теже 8 Гб требует через sudo /home/cloudera/cloudera-manager --express --force он типо запустился, но незаходил в браузере и когда проверил какие сервисы сейчас работают ну собственно все упали).
Так вот какие есть выходы из этой ситуации?
Как я понимаю самый простой оперативки докинуть, но пока нет возможности.
Или можно как то отключить ненужные для меня сервисы дабы уменьшить нагрузку?
Или может есть какие то ищё образы так сказать полегче?

Добавлено через 8 минут
И ищё, кто знает может и не нужно мне express manager запускать? Я просто хотел в нём перейти на jdk 1.8. А то по каким то причинам там 1.7
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
Similar
Эксперт
41792 / 34177 / 6122
Регистрация: 12.04.2006
Сообщений: 57,940
08.06.2017, 13:20
Ответы с готовыми решениями:

Hadoop, есть ли смысл изучать самостоятельно?
Вопрос такой. Если ли смысл изучать самостоятельно hadoop? Смущает меня то, что...

Автоматический запуск/запуск с клавиатуры или ПК живет своей жизнью =)
Всем привет и с наступающим! У меня такая беда, которая случилась где-то месяца...

Запуск в батнике - команды на запуск файла (из консоли с правами администратора)
Добрый день, форумчане. Помогите решить вопрос. Существует файл, которого...

Запуск студией и запуск самой виндой. Разница работы программы
Итак, проблема такова: есть проект, который замечательно работает при нажатии...

Запуск сначала одного видео, потом по событию - запуск второго видео
У меня при заходе на сайт, весь сайт немного затемняется и делается не активным...

6
xoraxax
1330 / 1275 / 375
Регистрация: 05.07.2013
Сообщений: 6,116
Завершенные тесты: 1
08.06.2017, 13:59 2
Цитата Сообщение от Borsche Посмотреть сообщение
вообще не стартовал
как именно ты его пытаешься запускать? Там вроде не надо много памяти. Что в настройках VM?
что такое express manager?
0
Borsche
166 / 95 / 41
Регистрация: 03.07.2016
Сообщений: 415
08.06.2017, 14:20  [ТС] 3
Ну hortonvorks, просто добавил образ в vm и запустил и получил в лицо HostMemoryLow(вроде так). В настройках vm дал сколько смог памати а точнее 6гб и все ядра отдал. Там на официально сайте в требования 8гб.

Cloudera express manager - я так понял интерфейс для управления всей экосистемой, там сервисы отключать там же и jdk можно на 1.8 перевести и хз что ищё. Так она вроде запустилась я по разным вкладкам в браузере полазил вроде как Name node запущен и есть одна data node. Yarn тоже запущен.
0
xoraxax
1330 / 1275 / 375
Регистрация: 05.07.2013
Сообщений: 6,116
Завершенные тесты: 1
08.06.2017, 14:33 4
насколько я помню на 4 запускал нормально, правда не помню, какой именно образ.
Но опять же, всю эту хрень можно спокойно запустить на венде без всяких виртуалок.
0
Borsche
166 / 95 / 41
Регистрация: 03.07.2016
Сообщений: 415
08.06.2017, 15:11  [ТС] 5
Только што пошарил архивные версии hortonworks sandbox, и да версии с 2.3.2 и ниже требую с от 4 гб, сейчас качаю и буду пробовать.
0
ntlinuxnt
$ su
1598 / 513 / 97
Регистрация: 18.11.2010
Сообщений: 2,805
Записей в блоге: 2
Завершенные тесты: 5
14.06.2017, 00:59 6
Borsche, попробуйте гугловское облако, они там прилично дают на год.
0
Borsche
166 / 95 / 41
Регистрация: 03.07.2016
Сообщений: 415
14.06.2017, 10:29  [ТС] 7
Облако? Я еле разобрался как эту ересь на кампутере запустить и заставить работать(т.к. в линуксе полный бублик). А вы предлагаете ище и облаках теперь розбираться)
Я он как устанавливал hortonworks так там инструкция была для установки в azure. Посмотрел, думаю ниче такого. Зарегестрировался, пошёл по инструкции и тут х**к 180 баксов ввыложите пжлст. Я чуть хлебом не подавился. Думаю ну вас... Потом через час-два смс приходит от microsoft типо спасибо что зарегестрировались и мы у вас то баксик заберём(так я лишился ищё двух булок хлеба). Потом они ищё и звонили мол а в каких целях регестрировались, мы поможем если что, заходи если что.
0
14.06.2017, 10:29
MoreAnswers
Эксперт
37091 / 29110 / 5898
Регистрация: 17.06.2006
Сообщений: 43,301
14.06.2017, 10:29

Запуск программы без создания окна. Запуск фоновой программы
Вопрос, как сделать, чтобы консольное приложение при запуске не создавало...

Запуск Qt Creator из суперпользователя или запуск в нем программ из суперпользователя
Нужен root в ubuntu. Либо, чтобы Qt запускался от рута, либо консоль или...

Запуск CGI вне cgi-bin и запуск index.cgi
Никак не получается сделать настройку 1) Запуск CGI-программ ВНЕ /cgi-bin/ ...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
7
Ответ Создать тему
Опции темы

КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin® Version 3.8.9
Copyright ©2000 - 2018, vBulletin Solutions, Inc.
Рейтинг@Mail.ru