|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
|
Парсинг сайта с javascript24.03.2017, 10:17. Показов 7321. Ответов 31
Метки нет (Все метки)
Всем доброго вечера. Есть сайт, который ведет поиск по запросу, если конкретно то по телефонному номеру. При просмотре кода не нашел строку запроса, только js. Как с помощью сишарпа написать запрос на такие сайты и обработать запрос?
а вот и сама ссылка ссылка Добавлено через 14 часов 14 минут Может что-то посоветуйте? Какие параметры и как отправляет данные поиска на этот сайт?
0
|
|
| 24.03.2017, 10:17 | |
|
Ответы с готовыми решениями:
31
Парсинг данных с сайта с javascript Парсинг сайта с JavaScript
|
|
14090 / 9308 / 1348
Регистрация: 21.01.2016
Сообщений: 34,959
|
|
| 24.03.2017, 10:26 | |
Сообщение было отмечено frech как решение
Решение
frech, открой окно разработчика в браузере (F12), отправь (руками) поисковой запрос какой-нибудь и посмотри на вкладке Network по какому адресу и с каким содержимым он ушёл. Вот это и нужно будет вопросизвести программно, без всяких JS.
1
|
|
|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
|
| 24.03.2017, 10:42 [ТС] | |
|
Usaga, вот первое что нашел
Request URL:http://www.magephonebook.com/search.php и заметил свои данные в этой графе Form Data int:90 number:500+006+0
0
|
|
|
14090 / 9308 / 1348
Регистрация: 21.01.2016
Сообщений: 34,959
|
|
| 24.03.2017, 10:43 | |
|
frech, вот туда параметры запроса и нужно отправлять. И пофиг тебе всякие JS.
1
|
|
|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
||||||
| 24.03.2017, 10:58 [ТС] | ||||||
|
Usaga,
0
|
||||||
|
14090 / 9308 / 1348
Регистрация: 21.01.2016
Сообщений: 34,959
|
|
| 24.03.2017, 11:00 | |
|
frech, тебе нужно отправить POST-запрос.
1
|
|
|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
|
| 24.03.2017, 11:05 [ТС] | |
|
0
|
|
|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
|
| 24.03.2017, 11:18 [ТС] | |
|
Usaga, просит авторизацию гуглакаунта. Поэтому ответ на запрос от гугла. Как сделать авторизацию на гугл до запроса поиска?
0
|
|
|
14090 / 9308 / 1348
Регистрация: 21.01.2016
Сообщений: 34,959
|
|
| 24.03.2017, 11:21 | |
|
frech, кто просит авторизацию? Целевой сайт? Значит нужно прикручивать авторизацию в виде куки как на скрине выше.
1
|
|
|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
|
| 24.03.2017, 11:26 [ТС] | |
|
Usaga, Так точно, сайт. Авторизуюсь, а дальше не требует определенное время. Потом опять требует авторизацию. Каждый раз куки прикручивать? Я так понял каждый раз создавать куки файл, а потом прикручивать?
0
|
|
|
14090 / 9308 / 1348
Регистрация: 21.01.2016
Сообщений: 34,959
|
|
| 24.03.2017, 11:29 | |
|
frech, куки к каждому запросу прикручиваются.
1
|
|
|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
||||||
| 24.03.2017, 11:39 [ТС] | ||||||
|
Usaga, эти данные куки не будут изменятся через определенное время?
Cookie:PHPSESSID=udg05eephb35n93831cg717 kk6; _ga=GA1.2.910075559.1490334802; _gat=1
0
|
||||||
|
14090 / 9308 / 1348
Регистрация: 21.01.2016
Сообщений: 34,959
|
|
| 24.03.2017, 11:40 | |
|
frech, сессия со временем протухнет и куки станет невалидным. Нужно будет заново авторизовываться.
0
|
|
|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
|
| 24.03.2017, 11:43 [ТС] | |
|
Usaga, вот и я об этом. Как решить эту проблему? Имеется логин и пароль, авторизация автоматически
0
|
|
|
14090 / 9308 / 1348
Регистрация: 21.01.2016
Сообщений: 34,959
|
|
| 24.03.2017, 11:44 | |
|
0
|
|
|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
|
| 24.03.2017, 12:11 [ТС] | |
|
При запросе до авторизации, мне выдает это:
https://accounts.google.com//o... rompt=auto Перед новой сессией клиентИД меняется. Чтобы вы посоветовали бы сделать? Как авторизироваться и получить куки для дальнейшего пользование
0
|
|
|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
|||||||||||
| 24.03.2017, 14:39 [ТС] | |||||||||||
|
Еще вопрос: Первый пост запросам отправил данные, но сервер мне возвращает вторым запросам результат.
как видно на фото, первый search.php это post запрос, а второй результат. Как отловить второй? С первым так работаю
Пытаясь обработать второй, получаю ошибку,
0
|
|||||||||||
|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
||||||
| 24.03.2017, 14:50 [ТС] | ||||||
|
исправил
0
|
||||||
|
14090 / 9308 / 1348
Регистрация: 21.01.2016
Сообщений: 34,959
|
|
| 24.03.2017, 14:55 | |
|
frech, Заработало?..
0
|
|
|
36 / 36 / 3
Регистрация: 17.07.2008
Сообщений: 581
|
|
| 24.03.2017, 16:18 [ТС] | |
|
Usaga, заработал, но в одном участке кода не могу сделать парсинг
<a href="#" tabindex="0" class="popular-names" role="button" data-placement="bottom" data-trigger="focus" data-content="<span>ИМЯ1</span><span>ИМЯ1A</span><span>ИМЯ2</span><span>ИМЯ3</span>"><i class="material-icons">arrow_drop_down</i></a> НАДО вытащить слова ИМЯ
0
|
|
| 24.03.2017, 16:18 | |
|
Помогаю со студенческими работами здесь
20
Парсинг html + javascript
Парсинг сайтов, написанных на javascript Парсинг сайта с JavaScript Парсинг данных с сайта или страницы сайта Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
||||
|
PhpStorm 2025.3: WSL Terminal всегда стартует в ~
and_y87 14.12.2025
PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта
Симптом:
После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .
|
Как объединить две одинаковые БД Access с разными данными
VikBal 11.12.2025
Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.
|
Новый ноутбук
volvo 07.12.2025
Всем привет.
По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне:
Ryzen 5 7533HS
64 Gb DDR5
1Tb NVMe
16" Full HD Display
Win11 Pro
|
Музыка, написанная Искусственным Интеллектом
volvo 04.12.2025
Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .
|
От async/await к виртуальным потокам в Python
IndentationError 23.11.2025
Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
|
|
Поиск "дружественных имён" СОМ портов
Argus19 22.11.2025
Поиск "дружественных имён" СОМ портов
На странице:
https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/
нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
|
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Programma_Boinc 20.11.2025
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов.
. . .
|
Ломающие изменения в C#.NStar Alpha
Etyuhibosecyu 20.11.2025
Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .
|
Мысли в слух
kumehtar 18.11.2025
Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .
|
Создание Single Page Application на фреймах
krapotkin 16.11.2025
Статья исключительно для начинающих. Подходы оригинальностью не блещут.
В век Веб все очень привыкли к дизайну Single-Page-Application .
Быстренько разберем подход "на фреймах".
Мы делаем одну. . .
|