Отдавать данные частями

@skarden · Регистрация: 19.11.2010

Студворк — интернет-сервис помощи студентам

Здравствуйте,
возможно ли такое на php (или python)?

js создаёт постоянное соединение с сервером типа websocket,

задача ставится так, js кидает какие-то параметры на сервер, на севере стартуют скажем 20 независимых потоков,
как только один поток отработал, он сразу передаёт данные клиенту и так все потоки поочереди (время исполнения может у них отличаться).

Спасибо.

@Fart83 · 14.05.2021, 19:18

Сообщение от skarden

стартуют скажем 20 независимых потоков

20 потоков это так к слову было...
может процессов?

Сообщение от skarden

возможно ли такое на php (или python)?
js создаёт постоянное соединение с сервером типа websocket

веб сокеты возможно

Сообщение от skarden

отдавать данные частями

биг-дата?

@skarden · 14.05.2021, 19:24 **[ТС]**

Сообщение от Fart83

20 потоков это так к слову было...
может процессов?

можно и процессов, но лучше потоков goroutines, процесс долго создаётся и регистрируется, а большой нагрузки на CPU вроде не намечается.

Сообщение от Fart83

биг-дата?

пойдут запросы на парсин различных сайтов, каждый поток отработает в своё время. Передачи большого набора данных не планируется.

@Fart83 · 14.05.2021, 19:30

Сообщение от skarden

но лучше потоков goroutines,

речь про го/голанг?

Сообщение от skarden

пойдут запросы на парсин различных сайтов

на php или pyhton делайте запросы и парсите если получите доступ. веб-сокет js зачем тогда нужен?

@skarden · 14.05.2021, 19:40 **[ТС]**

Сообщение от Fart83

речь про го/голанг?

ну можно и Go, не принципиально.

Задача такая, пользователь на моём сайте нажимет поиск, параметры поиска передаются серверу php/python/go
на сервере стартует параллельно парсинг 40 сайтов, по мере прогресса данные передаются асинхронно посетителю сайта.

Я конечно мог бы на уровне js передать параллельно 40 параметров одному серверному скрипту через Get запрос например, но я сомневаюсь что мне будет удобно это реализовывать на js.

@Para bellum · 14.05.2021, 20:09

Может так как-то:
1) Организуем websocket или SSE.
2) Пользователь отправляет запрос, в очередь пишется задание.
3) На сервере запущен daemon, слушающий очередь. При возникновении задания происходит парсинг и результаты, по мере работы, пишутся куда-либо (или, может быть, как-то между процессами пересылаются).
4) Мониторим, появились ли какие-то данные по этому заданию. Если появились -- отправляем клиенту через SSE.

Новые блоги и статьи Все статьи Все блоги /
Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT bedvit 28.01.2026 Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования. Часть библиотеки BedvitCOM Использованы. . .	Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 28.01.2026 Содержание блога SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .	Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL3_image 8Observer8 27.01.2026 Содержание блога SDL3_image - это библиотека для загрузки и работы с изображениями. Эта пошаговая инструкция покажет, как загрузить и вывести на экран смартфона картинку с альфа-каналом, то есть с. . .	Влияние грибов на сукцессию anaschu 26.01.2026 Бифуркационные изменения массы гриба происходят тогда, когда мы уменьшаем массу компоста в 10 раз, а скорость прироста биомассы уменьшаем в три раза. Скорость прироста биомассы может уменьшаться за. . .
Воспроизведение звукового файла с помощью SDL3_mixer при касании экрана Android 8Observer8 26.01.2026 Содержание блога SDL3_mixer - это библиотека я для воспроизведения аудио. В отличие от инструкции по добавлению текста код по проигрыванию звука уже содержится в шаблоне примера. Нужно только. . .	Установка Android SDK, NDK, JDK, CMake и т.д. 8Observer8 25.01.2026 Содержание блога Перейдите по ссылке: https:/ / developer. android. com/ studio и в самом низу страницы кликните по архиву "commandlinetools-win-xxxxxx_latest. zip" Извлеките архив и вы увидите. . .	Вывод текста со шрифтом TTF на Android с помощью библиотеки SDL3_ttf 8Observer8 25.01.2026 Содержание блога Если у вас не установлены Android SDK, NDK, JDK, и т. д. то сделайте это по следующей инструкции: Установка Android SDK, NDK, JDK, CMake и т. д. Сборка примера Скачайте. . .	Использование SDL3-callbacks вместо функции main() на Android, Desktop и WebAssembly 8Observer8 24.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .

@skarden 3 / 3 / 0 Регистрация: 19.11.2010 Сообщений: 148

	Отдавать данные частями 14.05.2021, 01:28. Показов 1987. Ответов 5 Метки нет (Все метки) Здравствуйте, возможно ли такое на php (или python)? js создаёт постоянное соединение с сервером типа websocket, задача ставится так, js кидает какие-то параметры на сервер, на севере стартуют скажем 20 независимых потоков, как только один поток отработал, он сразу передаёт данные клиенту и так все потоки поочереди (время исполнения может у них отличаться). Спасибо. 0

@Para bellum 5755 / 4134 / 1508 Регистрация: 06.01.2011 Сообщений: 11,276
	14.05.2021, 20:09
	Сообщение было отмечено skarden как решение Решение Может так как-то: 1) Организуем websocket или SSE. 2) Пользователь отправляет запрос, в очередь пишется задание. 3) На сервере запущен daemon, слушающий очередь. При возникновении задания происходит парсинг и результаты, по мере работы, пишутся куда-либо (или, может быть, как-то между процессами пересылаются). 4) Мониторим, появились ли какие-то данные по этому заданию. Если появились -- отправляем клиенту через SSE. 1

Отдавать данные частями

Решение