Как распределить ПО изначально таким не являющееся распределенным?

@Knjagskij · Регистрация: 10.11.2008

Author24 — интернет-сервис помощи студентам

Имеется программа под Линукс, которая работает на одном компе, как сделать ее распределенной по n компам?
Может существуют какие-нибудь виртуальные машины.

@Shamil1 · 12.01.2016, 16:51

Программа рисует картинку, и нужно чтобы на каждом из компов она нарисовала часть картинки?

@Knjagskij · 12.01.2016, 18:00 **[ТС]**

Программа производит математические вычисления и отображает результат и нужно, что бы между компами распределялись мат. вычисления и на каждом выводился результат.

@Shamil1 · 12.01.2016, 20:30

Возможно, Вам нужно что-то типа MPI.

@Igor3D · 13.01.2016, 10:24

Для каких-то частных, специализированных случаев возможно и существуют накатанные решения, но в общем случае нет. Нужно передать "ноду" часть задачи (разумеется выделив ее), дождаться завершения (мониторинг) и забрать рез-т. Часто также добавляется работа: предусмотреть отказ нода и перераспределить нагрузку.

В общем, желание "проскочить на шару" вполне понятно - но вряд ли удастся

@Dmitriy_M · 13.01.2016, 11:20

Knjagskij, грид или кластер?

@Knjagskij · 13.01.2016, 11:59 **[ТС]**

Несколько обычных компьютеров (обычных рабочих мест) соединенных Ethernet. Если я правильно понял, что ЭВМы в гриде имеют большую степень связанности чем в кластере, то грид. Хотя , честно говоря, для меня различие между ними все-равно туманно...

Добавлено через 2 минуты

Сообщение от Shamil1

Возможно, Вам нужно что-то типа MPI.

Как я понимаю таким способом на шару не прокатит?) Нужно сделать такую систему, что бы она работала, как один супер-компьютер из нескольких, и все ПО запускалось, как на обычном компе.

@Shamil1 · 13.01.2016, 12:47

Сообщение от Knjagskij

Как я понимаю таким способом на шару не прокатит?) Нужно сделать такую систему, что бы она работала, как один супер-компьютер из нескольких, и все ПО запускалось, как на обычном компе.

Если написать программу (консольное приложение, выполняющие вычисления) на обычном языке программирования и запустить её на обычном компе, то она будет выполнятся в одном потоке одного процессора. На кластере (или в гриде) у Вас "на шару" будет такое же поведение.

@Knjagskij · 13.01.2016, 14:58 **[ТС]**

Ведь, если я пишу однопоточное приложение, а у меня на компьютере много ядер, то ОС, как-то распределяет нагрузку между ядрами сама, вроде как. Можно ли сделать также на нескольких компьютерах какими-нибудь средствами?

@Shamil1 · 13.01.2016, 16:37

Сообщение от Knjagskij

Ведь, если я пишу однопоточное приложение, а у меня на компьютере много ядер, то ОС, как-то распределяет нагрузку между ядрами сама, вроде как.

Нет. ОС грузит одно ядро, а остальные простаивают.

Добавлено через 7 минут
Задача распараллеливания не решается в общем виде. В некоторых случаях она вообще не решается. Например, если задача разбивается на мелкие шаги, каждый из которых требует на вход результат предыдущего шага, то задачу нельзя распараллелить.

Evg · 13.01.2016, 16:42

Сообщение от Knjagskij

как сделать ее распределенной по n компам?

Переписать исходник. По другому никак

@Igor3D · 14.01.2016, 08:58

Сообщение от Knjagskij

Ведь, если я пишу однопоточное приложение, а у меня на компьютере много ядер, то ОС, как-то распределяет нагрузку между ядрами сама, вроде как.

ОС распределяет нагрузку для нескольких/многих запущенных ниток. Но это Вы должны создать, запустить эти нитки и дать им работу. А по умолчанию за Вас это никто делать не будет, приложение выполняется в одной (главной) нитке.

Сообщение от Knjagskij

Можно ли сделать также на нескольких компьютерах какими-нибудь средствами?

Распараллеливание и распределенность - совершенно разные задачи. В конкретном случае обе могут оказаться нереализуемыми - ну вот не удается разбить задачу на части.

Поэтому вместо поисков "чудесного философского камня" лучше подумать как разбить, т.е. выделить часть вычислений скармливаемых одному ноду.

@Excalibur921 · 14.01.2016, 12:59

В двух словах что считать? Просто интересно.
1)гугл “параллельные вычисления Mathematica”
https://ru.wikipedia.org/wiki/GridMathematica
И поиск аналогов возможно в Mathcad и т.д.
2)неграфические на спец видеокарте быстрей грида?
3) Самодельный аппаратный решатель задачи на ПЛИС и подобном. Жесть и экзотика =).

@Knjagskij · 15.01.2016, 10:21 **[ТС]**

Excalibur921, просто гипотетическая задача)

@Knjagskij -2 / 8 / 2 Регистрация: 10.11.2008 Сообщений: 776
		1
	Как распределить ПО изначально таким не являющееся распределенным? 12.01.2016, 15:59. Показов 411. Ответов 13 Метки нет (Все метки) Имеется программа под Линукс, которая работает на одном компе, как сделать ее распределенной по n компам? Может существуют какие-нибудь виртуальные машины. 1

@Shamil1 Модератор 3051 / 2193 / 459 Регистрация: 26.03.2015 Сообщений: 8,469
	12.01.2016, 16:51	2
	Программа рисует картинку, и нужно чтобы на каждом из компов она нарисовала часть картинки? 1

@Knjagskij -2 / 8 / 2 Регистрация: 10.11.2008 Сообщений: 776
	12.01.2016, 18:00 [ТС]	3
	Программа производит математические вычисления и отображает результат и нужно, что бы между компами распределялись мат. вычисления и на каждом выводился результат. 0

@Shamil1 Модератор 3051 / 2193 / 459 Регистрация: 26.03.2015 Сообщений: 8,469
	12.01.2016, 20:30	4
	Возможно, Вам нужно что-то типа MPI. 0

@Igor3D 1824 / 732 / 99 Регистрация: 01.10.2012 Сообщений: 3,744
	13.01.2016, 10:24	5
	Для каких-то частных, специализированных случаев возможно и существуют накатанные решения, но в общем случае нет. Нужно передать "ноду" часть задачи (разумеется выделив ее), дождаться завершения (мониторинг) и забрать рез-т. Часто также добавляется работа: предусмотреть отказ нода и перераспределить нагрузку. В общем, желание "проскочить на шару" вполне понятно - но вряд ли удастся 0

@Dmitriy_M 1443 / 1326 / 131 Регистрация: 20.03.2009 Сообщений: 4,689 Записей в блоге: 11
	13.01.2016, 11:20	6
	Knjagskij, грид или кластер? 0

@Knjagskij -2 / 8 / 2 Регистрация: 10.11.2008 Сообщений: 776
	13.01.2016, 11:59 [ТС]	7
	Несколько обычных компьютеров (обычных рабочих мест) соединенных Ethernet. Если я правильно понял, что ЭВМы в гриде имеют большую степень связанности чем в кластере, то грид. Хотя , честно говоря, для меня различие между ними все-равно туманно... Добавлено через 2 минуты Сообщение от Shamil1 Возможно, Вам нужно что-то типа MPI. Как я понимаю таким способом на шару не прокатит?) Нужно сделать такую систему, что бы она работала, как один супер-компьютер из нескольких, и все ПО запускалось, как на обычном компе. 0

@Shamil1 Модератор 3051 / 2193 / 459 Регистрация: 26.03.2015 Сообщений: 8,469
	13.01.2016, 12:47	8
	Сообщение от Knjagskij Как я понимаю таким способом на шару не прокатит?) Нужно сделать такую систему, что бы она работала, как один супер-компьютер из нескольких, и все ПО запускалось, как на обычном компе. Если написать программу (консольное приложение, выполняющие вычисления) на обычном языке программирования и запустить её на обычном компе, то она будет выполнятся в одном потоке одного процессора. На кластере (или в гриде) у Вас "на шару" будет такое же поведение. 0

@Knjagskij -2 / 8 / 2 Регистрация: 10.11.2008 Сообщений: 776
	13.01.2016, 14:58 [ТС]	9
	Ведь, если я пишу однопоточное приложение, а у меня на компьютере много ядер, то ОС, как-то распределяет нагрузку между ядрами сама, вроде как. Можно ли сделать также на нескольких компьютерах какими-нибудь средствами? 0

@Shamil1 Модератор 3051 / 2193 / 459 Регистрация: 26.03.2015 Сообщений: 8,469
	13.01.2016, 16:37	10
	Сообщение от Knjagskij Ведь, если я пишу однопоточное приложение, а у меня на компьютере много ядер, то ОС, как-то распределяет нагрузку между ядрами сама, вроде как. Нет. ОС грузит одно ядро, а остальные простаивают. Добавлено через 7 минут Задача распараллеливания не решается в общем виде. В некоторых случаях она вообще не решается. Например, если задача разбивается на мелкие шаги, каждый из которых требует на вход результат предыдущего шага, то задачу нельзя распараллелить. 0

	15.01.2016, 10:21

Evg 21279 / 8301 / 637 Регистрация: 30.03.2009 Сообщений: 22,659 Записей в блоге: 30
	13.01.2016, 16:42	11
	Сообщение от Knjagskij как сделать ее распределенной по n компам? Переписать исходник. По другому никак 0

@Igor3D 1824 / 732 / 99 Регистрация: 01.10.2012 Сообщений: 3,744
	14.01.2016, 08:58	12
	Сообщение от Knjagskij Ведь, если я пишу однопоточное приложение, а у меня на компьютере много ядер, то ОС, как-то распределяет нагрузку между ядрами сама, вроде как. ОС распределяет нагрузку для нескольких/многих запущенных ниток. Но это Вы должны создать, запустить эти нитки и дать им работу. А по умолчанию за Вас это никто делать не будет, приложение выполняется в одной (главной) нитке. Сообщение от Knjagskij Можно ли сделать также на нескольких компьютерах какими-нибудь средствами? Распараллеливание и распределенность - совершенно разные задачи. В конкретном случае обе могут оказаться нереализуемыми - ну вот не удается разбить задачу на части. Поэтому вместо поисков "чудесного философского камня" лучше подумать как разбить, т.е. выделить часть вычислений скармливаемых одному ноду. 0

@Excalibur921 1471 / 826 / 140 Регистрация: 12.10.2013 Сообщений: 5,456
	14.01.2016, 12:59	13
	В двух словах что считать? Просто интересно. 1)гугл “параллельные вычисления Mathematica” https://ru.wikipedia.org/wiki/GridMathematica И поиск аналогов возможно в Mathcad и т.д. 2)неграфические на спец видеокарте быстрей грида? 3) Самодельный аппаратный решатель задачи на ПЛИС и подобном. Жесть и экзотика =). 0

@Knjagskij -2 / 8 / 2 Регистрация: 10.11.2008 Сообщений: 776
	15.01.2016, 10:21 [ТС]	14
	Excalibur921, просто гипотетическая задача) 0