|
0 / 0 / 2
Регистрация: 27.11.2013
Сообщений: 78
|
||||||
Многозадачность с Nightmare js14.09.2017, 18:53. Показов 2672. Ответов 2
Я по примерам написал функцию, в которой Nightmare парсит страницу.
При отладке я запускал функцию с одним параметром, и все работало. Когда я делаю массив с данными и перебором запускаю функцию парсера, то мне кидает ошибку: (node:3056) Warning: Possible EventEmitter memory leak detected. 11 close listen ers added. Use emitter.setMaxListeners() to increase limit
Подскажите как правильно запустить многопоточность в моем случае? Или если Nightmare не работает с многопоточностью, то как без нее по очереди выполнять функции?
0
|
||||||
| 14.09.2017, 18:53 | |
|
Ответы с готовыми решениями:
2
Многозадачность |
|
186 / 61 / 4
Регистрация: 29.04.2011
Сообщений: 641
|
|
| 25.09.2017, 18:28 | |
|
После обработки первого запроса срабатывает nightmare.end(). Это закрывает твой объект Nightmare. Больше пользоваться им тв не можешь.
1 вариант: не использовать эту строку. Но тогда процесс node не будет сам завершаться. Надо будет обрабатывать событие закрытая процесса и там вызывать Nightmare.end(). Так же возникнет проблема с тем, что у тебя один объект, а действия надо выполнять одновременно. Получится, что команды к nightmare перемешаются. Может случится следующие: 1.перешел на страницу aaaa.ru 2. Что то нажал 3. Стал ждать результата 4. В этот момент пришёл новый запрос. Перейти по адресу bbbb.ru 5. Перешёл с адреса aaaa.ru на bbbb.ru. Естественно, потерялось то, что ждали в шаге 3. В ответ клиенту вернётся не связанная с ним информация. Что б ловить такие косяки, рекомендую после каждой строки действия с nightmare, в лог выводить, что сделал. Сразу станет понятно, чтотоеально происходит. Поэтому рекомендую вариант 2: для каждого создавать отдельный объект nightmare. Не забывай оператор new. То есть я предлагаю строку Const dream=Nightmare..... помесить в внутрь события beeline, и заменить на Const dream=new nightmare..... Не уверен что это совет правильный: каждый созданный объект nightmare, создаёт дочерний процесс electron, что жрет оперативку, процессор и тд. У меня на сервере начинаются проблемы при 30 одновременных процессах electron. Так что следи за общим количеством. Затормаживай создание новых объектов, когда их станет слишком много. Я, для ускорения процесса работы, создаю пул объектов при старте сервера. А потом пользуюсь свободными. Буду рад, если знающие люди подскажут, правильное ли это решение. Извиняюсь за отсутсвие оформления: пишу с телефона.
0
|
|
|
Coding is art
540 / 423 / 154
Регистрация: 04.09.2013
Сообщений: 1,066
|
|||||||||||||||||||||||||||||||||
| 26.09.2017, 01:52 | |||||||||||||||||||||||||||||||||
|
1.
обычно такое происходит когда делается что-то типо
По умолчанию это кол-во = 10, но можно перезаписать воспользовавшись функцией
Вы открываете соединение после того, как сделали запрос ?? как это работает и зачем ?
3. Как уже подметили в комментарии выше - используя .end() вы закрываете Nightmare, тут у вас есть возможность изменить вот так например:
и второй вариант который я вижу: сделать промис и выполнять его "последовательно" в отдельном экшене, что-то типо такого:
Не очень понятно конечно зачем вы используете EventEmitter, от тут вообще не нужен..
0
|
|||||||||||||||||||||||||||||||||
| 26.09.2017, 01:52 | |
|
Помогаю со студенческими работами здесь
3
Многозадачность в DOS Многозадачность RadioButton Многозадачность в Unix Многозадачность в Linux Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
SDL3 для Web (WebAssembly): Реализация движения на Box2D v3 - трение и коллизии с повёрнутыми стенами
8Observer8 20.02.2026
Содержание блога
Box2D позволяет легко создать главного героя, который не проходит сквозь стены и перемещается с заданным трением о препятствия, которые можно располагать под углом, как верхнее. . .
|
Конвертировать закладки radiotray-ng в m3u-плейлист
damix 19.02.2026
Это можно сделать скриптом для PowerShell. Использование
. \СonvertRadiotrayToM3U. ps1 <path_to_bookmarks. json>
Рядом с файлом bookmarks. json появится файл bookmarks. m3u с результатом.
# Check if. . .
|
Семь CDC на одном интерфейсе: 5 U[S]ARTов, 1 CAN и 1 SSI
Eddy_Em 18.02.2026
Постепенно допиливаю свою "многоинтерфейсную плату". Выглядит вот так:
https:/ / www. cyberforum. ru/ blog_attachment. php?attachmentid=11617&stc=1&d=1771445347
Основана на STM32F303RBT6.
На борту пять. . .
|
Камера Toupcam IUA500KMA
Eddy_Em 12.02.2026
Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .
|
|
И ясному Солнцу
zbw 12.02.2026
И ясному Солнцу,
и светлой Луне.
В мире
покоя нет
и люди
не могут жить в тишине.
А жить им немного лет.
|
«Знание-Сила»
zbw 12.02.2026
«Знание-Сила»
«Время-Деньги»
«Деньги -Пуля»
|
SDL3 для Web (WebAssembly): Подключение Box2D v3, физика и отрисовка коллайдеров
8Observer8 12.02.2026
Содержание блога
Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами и вызывать обработчики событий столкновения. . . .
|
SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL_LoadPNG (без SDL3_image)
8Observer8 11.02.2026
Содержание блога
Библиотека SDL3 содержит встроенные инструменты для базовой работы с изображениями - без использования библиотеки SDL3_image. Пошагово создадим проект для загрузки изображения. . .
|