|
6 / 6 / 1
Регистрация: 31.08.2012
Сообщений: 230
|
||||||
Парсер против регистрации01.08.2014, 20:11. Показов 1695. Ответов 18
Метки нет (Все метки)
Добрый день. Вот есть самый простой парсер на php с использованием библиотеки SimpleHTMLDOM (файл прикрепляю).
0
|
||||||
| 01.08.2014, 20:11 | |
|
Ответы с готовыми решениями:
18
Вывести форму регистрации для регистрации другого пользователя |
|
6 / 6 / 1
Регистрация: 31.08.2012
Сообщений: 230
|
|
| 02.08.2014, 19:55 [ТС] | |
|
Подскажите, кто шарит
0
|
|
|
55 / 55 / 25
Регистрация: 03.08.2014
Сообщений: 258
|
|
| 04.08.2014, 01:58 | |
|
Для начала - разобраться как обычно устроена регистрация и авторизация в ПХП.
Ну там - что такое сессия, что такое куки, каки оно всё связано, тыры-пыры. Дальше пойдет как по маслу
0
|
|
|
6 / 6 / 1
Регистрация: 31.08.2012
Сообщений: 230
|
|
| 04.08.2014, 08:13 [ТС] | |
|
С этим знаком. Второй день капаюсь в парсере, не могу понять почему не авторизуется. Переделал его через чистый curl
0
|
|
|
55 / 55 / 25
Регистрация: 03.08.2014
Сообщений: 258
|
|
| 04.08.2014, 12:25 | |
|
А в чем тогда проблема? Как авторизацию делаете?
0
|
|
|
15 / 15 / 8
Регистрация: 29.07.2014
Сообщений: 120
|
|||
| 04.08.2014, 22:34 | |||
|
Он должен уметь структуру документа разбирать.
0
|
|||
|
55 / 55 / 25
Регистрация: 03.08.2014
Сообщений: 258
|
|
| 04.08.2014, 22:45 | |
|
artnazarov, да ладно вам, называть парсером три строчки пхп кода
просто автор темы не в курсе этих нюансов
0
|
|
|
15 / 15 / 8
Регистрация: 29.07.2014
Сообщений: 120
|
|
| 05.08.2014, 00:00 | |
|
Greeezly, а Вы с одного IP их парсите? Проблем у источника данных с нагрузкой не возникнет, их ваш loadimpact не напрягает еще? )
Если это так сказать вопрос бизнеса, не проще договориться о доступе к данным на взаимовыгодных условиях? Может они Вам данные могут в XML, JSON отдавать как-то? Кликните здесь для просмотра всего текста
Так и будем table парсить, пока opendata, semantic schemas и микроформаты нормой не станут...
0
|
|
|
6 / 6 / 1
Регистрация: 31.08.2012
Сообщений: 230
|
|||||||
| 05.08.2014, 07:07 [ТС] | |||||||
|
Регистрацию сейчас делаю на cURL:
0
|
|||||||
|
15 / 15 / 8
Регистрация: 29.07.2014
Сообщений: 120
|
|||||||
| 05.08.2014, 08:46 | |||||||
|
Все понятно, вы пытаетесь авторизоваться, используете
Сравните со своим. Кликните здесь для просмотра всего текста
Массу полезного почерпнете по ссылкам, там все о том, как залогиниться на сайт и что делать дальше 1 и 2 Вы можете не использовать чистый cURL, а воспользоваться навороченными отлаженными обертками, вроде Snoopy или Shuber-curl. Обязательно посмотрите, ими для написания парсеров пользуются. Из того, что на слуху и хорошо документированы: Guzzle, Buzz, HttpFul, Zebra Curl
0
|
|||||||
|
6 / 6 / 1
Регистрация: 31.08.2012
Сообщений: 230
|
||||||||||||||||
| 08.08.2014, 09:32 [ТС] | ||||||||||||||||
|
Он логинится на сайт и сохранят куки в файл, но я не пойму как теперь сделать чтобы при редиректе сайта он куки отправил, потом что его выкидывает
Добавлено через 22 часа 10 минут Ура, сделал. Кому интересно, в результате код авторизации получился такой:
А если пытаюсь еще больше быть похожим на браузер, т.е. пишу
0
|
||||||||||||||||
|
0 / 0 / 0
Регистрация: 09.10.2014
Сообщений: 3
|
||
| 09.10.2014, 18:22 | ||
|
0
|
||
|
365 / 372 / 89
Регистрация: 01.12.2013
Сообщений: 1,629
|
||
| 09.10.2014, 18:38 | ||
|
Добавлено через 39 секунд зависит конечно от того что конкретно он парсит
0
|
||
|
6 / 6 / 1
Регистрация: 31.08.2012
Сообщений: 230
|
||
| 09.10.2014, 18:51 [ТС] | ||
|
krai,
Во-первых, я вам не дружище. Во-вторых, парсинг сам по себе никак не запрещен, как я получаю информацию не ваша забота. И в-третьих форум фантастов я выбрал исключительно случайным образом, мне был нужен любой форум, а на фантастах я уже имею аккаунт. Никакая информация мне там не нужна. Можете спать спокойно. Добавлено через 1 минуту
0
|
||
|
365 / 372 / 89
Регистрация: 01.12.2013
Сообщений: 1,629
|
|
| 09.10.2014, 18:53 | |
|
0
|
|
|
6 / 6 / 1
Регистрация: 31.08.2012
Сообщений: 230
|
|
| 09.10.2014, 18:59 [ТС] | |
|
ads,
весьма забавные советы по безопасности, если бы я собирался копировать все подряд, тогда бы да, сработало.
0
|
|
|
0 / 0 / 0
Регистрация: 09.10.2014
Сообщений: 3
|
|||
| 09.10.2014, 19:45 | |||
|
0
|
|||
|
6 / 6 / 1
Регистрация: 31.08.2012
Сообщений: 230
|
|
| 09.10.2014, 20:39 [ТС] | |
|
krai, встречный вопрос: Как вы здесь оказались? Как я вижу, вы специально зарегистрировались, чтобы написать мне.
0
|
|
|
0 / 0 / 0
Регистрация: 09.10.2014
Сообщений: 3
|
||
| 09.10.2014, 20:57 | ||
|
0
|
||
| 09.10.2014, 20:57 | |
|
Помогаю со студенческими работами здесь
19
Что за журнал регистрации в 1с8.3 есть, где все регистрации сохраняются в отдельными файлами в определенную папку Занести в БД дату регистрации и дату бесплатного доступа увеличенную на 30 дней от даты регистрации БС против ПФ? F-22 против Су-37 Ul против DIV Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
SDL3 для Web (WebAssembly): Подключение Box2D v3, физика и отрисовка коллайдеров
8Observer8 12.02.2026
Содержание блога
Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами и вызывать обработчики событий столкновения. . . .
|
SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL_LoadPNG (без SDL3_image)
8Observer8 11.02.2026
Содержание блога
Библиотека SDL3 содержит встроенные инструменты для базовой работы с изображениями - без использования библиотеки SDL3_image. Пошагово создадим проект для загрузки изображения. . .
|
SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL3_image
8Observer8 10.02.2026
Содержание блога
Библиотека SDL3_image содержит инструменты для расширенной работы с изображениями. Пошагово создадим проект для загрузки изображения формата PNG с альфа-каналом (с прозрачным. . .
|
Установка Qt-версии Lazarus IDE в Debian Trixie Xfce
volvo 10.02.2026
В общем, достали меня глюки IDE Лазаруса, собранной с использованием набора виджетов Gtk2 (конкретно: если набирать текст в редакторе и вызвать подсказку через Ctrl+Space, то после закрытия окошка. . .
|
|
SDL3 для Web (WebAssembly): Работа со звуком через SDL3_mixer
8Observer8 08.02.2026
Содержание блога
Пошагово создадим проект для загрузки звукового файла и воспроизведения звука с помощью библиотеки SDL3_mixer. Звук будет воспроизводиться по клику мышки по холсту на Desktop и по. . .
|
SDL3 для Web (WebAssembly): Основы отладки веб-приложений на SDL3 по USB и Wi-Fi, запущенных в браузере мобильных устройств
8Observer8 07.02.2026
Содержание блога
Браузер Chrome имеет средства для отладки мобильных веб-приложений по USB. В этой пошаговой инструкции ограничимся работой с консолью. Вывод в консоль - это часть процесса. . .
|
SDL3 для Web (WebAssembly): Обработчик клика мыши в браузере ПК и касания экрана в браузере на мобильном устройстве
8Observer8 02.02.2026
Содержание блога
Для начала пошагово создадим рабочий пример для подготовки к экспериментам в браузере ПК и в браузере мобильного устройства. Потом напишем обработчик клика мыши и обработчик. . .
|
Философия технологии
iceja 01.02.2026
На мой взгляд у человека в технических проектах остается роль генерального директора. Все остальное нейронки делают уже лучше человека. Они не могут нести предпринимательские риски, не могут. . .
|