|
0 / 0 / 0
Регистрация: 20.04.2012
Сообщений: 136
|
||||||
Парсинг гугл ссылок31.10.2018, 16:42. Показов 3914. Ответов 13
Метки нет (Все метки)
на просторах интернета нашел вот такой код.сначала выводило чисто 1 ссылку.сейчас ничего.помогите пожалуйста. вообще нужно будет мне дальше фильтроватьссылки по сайтам определенным,но это уже такое думал как то добавить в запрос site:mysite и выводить линку если найдена.если нет то не найдено помогите плиз пофиксить код,чтобхотя бывсе запросы выдавались
0
|
||||||
| 31.10.2018, 16:42 | |
|
Ответы с готовыми решениями:
13
Парсинг внутренних ссылок Парсинг ссылок с сайта |
|
0 / 0 / 0
Регистрация: 20.04.2012
Сообщений: 136
|
|
| 31.10.2018, 18:06 [ТС] | |
|
ну мне надо пока хоть так.дальше буду думать.как исправить ,чтоб он выдавал около ста ссылок хоть
Добавлено через 2 минуты этот код выдает мою ссылку с бразера последнюю.
0
|
|
|
177 / 151 / 31
Регистрация: 28.09.2018
Сообщений: 204
|
||||||
| 31.10.2018, 18:16 | ||||||
|
Sliponn,
у вас в коде
поэтому и не выдаёт похоже, хотя могут и другие ошибки, не вникал плотно...
1
|
||||||
|
0 / 0 / 0
Регистрация: 20.04.2012
Сообщений: 136
|
|
| 31.10.2018, 19:20 [ТС] | |
|
благодарность он нашего дома,вашему.буду разбираться)
0
|
|
|
601 / 485 / 185
Регистрация: 19.04.2016
Сообщений: 1,885
|
|||||||
| 31.10.2018, 20:08 | |||||||
|
К примеру, спрашиваю я у гугла картинки маленьких ёжиков, он мне выдает ссылки на картинки:
0
|
|||||||
|
814 / 561 / 240
Регистрация: 01.07.2018
Сообщений: 1,818
|
|
| 31.10.2018, 20:22 | |
|
EveKS, Что там еще и видео.
0
|
|
|
601 / 485 / 185
Регистрация: 19.04.2016
Сообщений: 1,885
|
||||||
| 31.10.2018, 20:30 | ||||||
|
PoPsa85, Это вижу ссылку, пишу видео, или это как-то проверено?
0
|
||||||
|
814 / 561 / 240
Регистрация: 01.07.2018
Сообщений: 1,818
|
|
| 31.10.2018, 20:34 | |
|
0
|
|
|
601 / 485 / 185
Регистрация: 19.04.2016
Сообщений: 1,885
|
|
| 31.10.2018, 20:40 | |
|
Сам лично, я парсил JSON'ны в выдачах, особо в разметку не всматривался, учитывая что там куча рекламы и тп
А на вопрос, как это сделать (автору), жмем в браузере f12. Смотрим что там, пишем пару регулярок или используем тот-же AngleSharp или ему подобное. И достаем нудные нам JSON'ны. А там все просто, и ссылки и куча инфы лишней. А как отправить запрос правильно, ищем документацию на запросы.
0
|
|
|
177 / 151 / 31
Регистрация: 28.09.2018
Сообщений: 204
|
|
| 31.10.2018, 21:07 | |
|
На всякий случай, напомню, что гугл (равно как и яндекс, и не только они) в случае множественных запросов банят ip, с которого идут такие запросы.
Так что если вам жизненно необходимо в 20 потоков каждую секунду запрашивать картинки ёжиков/зайчиков/котиков, то сразу продумывайте как всё это пускать через прокси.
1
|
|
|
601 / 485 / 185
Регистрация: 19.04.2016
Сообщений: 1,885
|
|
| 31.10.2018, 21:12 | |
|
griffon88, это является проблемой?) в том же гугле можно загуглить фрипрокси и вытащить от туда как можно больше. Автор вон какой код нарыл
. А если он не планирует всё это ставить на поток, то проще в том же браузере всё это сделать прямо в консоли. Да и вряд-ли синхронную кнопку получится нажимать 20 раз в секунду
0
|
|
|
177 / 151 / 31
Регистрация: 28.09.2018
Сообщений: 204
|
|
| 31.10.2018, 21:23 | |
|
EveKS, да не, проблемой не является, просто чтобы потом автор не удивлялся , почему вдруг ему перестали выдавать результаты поиска
1
|
|
|
управление сложностью
|
||
| 01.11.2018, 11:02 | ||
|
Т.е. если два разных человека в разных местах будут искать по фразе - купить кроссовки, выдача гугла им будет выдавать различные результаты.
0
|
||
| 01.11.2018, 11:02 | |
|
Помогаю со студенческими работами здесь
14
Парсинг ссылок из HTML документа
Парсинг html файла для поиска ссылок
Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
Программный контроль заполнения реквизита табличной части документа
Maks 02.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2.
Задача: реализовать контроль заполнения реквизита табличной части. . .
|
wmic не является внутренней или внешней командой
Maks 02.04.2026
Решение:
DISM / Online / Add-Capability / CapabilityName:WMIC~~~~
Отсюда: https:/ / winitpro. ru/ index. php/ 2025/ 02/ 14/ komanda-wmic-ne-naydena/
|
Программная установка даты и запрет ее изменения
Maks 02.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2.
Задача: при создании документов установить период списания автоматически. . .
|
Вывод данных в справочнике через динамический список
Maks 01.04.2026
Реализация из решения ниже выполнена на примере нетипового справочника "Спецтехника" разработанного в конфигурации КА2.
Задача: вывести данные из ТЧ нетипового документа. . .
|
|
Функция заполнения текстового поля в реквизите формы документа
Maks 01.04.2026
Алгоритм из решения ниже реализован на нетиповом документе "ВыдачаОборудованияНаСпецтехнику" разработанного в конфигурации КА2, в дополнении к предыдущему решению.
На форме документа создается. . .
|
К слову об оптимизации
kumehtar 01.04.2026
Вспоминаю начало 2000-х, университет, когда я писал на Delphi. Тогда среди программистов на форумах активно обсуждали аккуратную работу с памятью: нужно было следить за переменными, вовремя. . .
|
Идея фильтра интернета (сервер = слой+фильтр).
Hrethgir 31.03.2026
Суть идеи заключается в том, чтобы запустить свой сервер, о чём я если честно мечтал давно и давно приобрёл книгу как это сделать. Но не было причин его запускать. Очумелые учёные напечатали на. . .
|
Модель здравосоХранения 6. ESG-повестка и устойчивое развитие; углублённый анализ кадрового бренда
anaschu 31.03.2026
В прикрепленном документе раздумья о том, как можно поменять модель в будущем
|