Форум программистов, компьютерный форум, киберфорум
PHP: сети
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.67/9: Рейтинг темы: голосов - 9, средняя оценка - 4.67
-1 / 7 / 0
Регистрация: 03.02.2014
Сообщений: 100

Как получить уже изменённую скриптами страницу?

06.11.2015, 00:47. Показов 1832. Ответов 5
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
В продолжении прошлой темы. Хочу с помощью curl авторизоваться на fl.ru, но для авторизации нужен token, а он, как я понял, создаётся уже после загрузки страницы. Каким образом можно его получить?
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
06.11.2015, 00:47
Ответы с готовыми решениями:

Как получить страницу с уже выполненным JS?
Товарищи! Всем привет! Подскажите куда копать. У нас такая ситуация. Делаю парсер. Получаю код страницы через curl вот так $ch =...

как отоброзить изменённую web-страницу
Добрый ден. Кто подскажет, как вывести измененную web-страницу, т.е. например открываю в WebBrowser1 какой либо сайт, а открывается этот...

Есть персонаж уже со скриптами на ходьбу и прыжок (Unity3D)
Почему при нажатии на одну из стрелок ставится пауза? Посоветуйте что-нибудь

5
433 / 352 / 259
Регистрация: 29.11.2011
Сообщений: 628
07.11.2015, 02:43
Лучший ответ Сообщение было отмечено Altai90 как решение

Решение

Altai90, в данном случае, чтобы получить "token", не требуется "измененная страница скриптами", т.к. этот ключ изначально выдается сервером в исходном виде. Просто он находится в JS, а в скрытый <input> подставляется уже потом.

В общем вот скрипт авторизации и последующих действий
PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
<?php
define("SITE", 'https://www.fl.ru');
define("LOGIN", '');
define("PASSWORD", '');
 
/* получаем сессию */
$result = getURL(SITE); 
$cookie = $result['set_cookie'];
/* формируем post запрос */
$post = array(
    'autologin' => '1',
    'login' => LOGIN,
    'passwd' => PASSWORD,
    'u_token_key' => preg_replace('/(^.+TOKEN_KEY = \')(\w+)(\'.+$)/s', '$2', $result['content']) // получаем TOKEN_KEY
);
/* авторизуемся */
$result = getURL(SITE . '/login/', $cookie, $post); 
/* сохраняем полученные куки, для последующих запросов на сайт... */
$cookie = $result['set_cookie'];
 
/* для наглядности успешной авторизации - выводим в браузер страницу с проектами */
echo iconv('CP1251', 'UTF-8', $result['content']); // [можно убрать]
 
 
function getURL($url, $cookie = false, $post = false, $timeout = 30, $maxRedirs = 3)
{
    $ch = curl_init();
    $header[] = "Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8";
    $header[] = "Connection: keep-alive";
    $header[] = "Keep-Alive: 300";
    $header[] = "Accept-Language: ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3";
    $header[] = "Pragma: "; 
    curl_setopt($ch, CURLOPT_USERAGENT, "Mozilla/5.0 (Windows NT 6.3; WOW64; rv:35.0) Gecko/20100101 Firefox/35.0");
    curl_setopt($ch, CURLOPT_URL, $url);
    curl_setopt($ch, CURLOPT_HTTPHEADER, $header); 
    if ($cookie) {
        if (is_array($cookie)) {
            foreach($cookie as $key => $value ) {
              $cookieString[] = "{$key}={$value}";
            };
            $cookie = implode('; ', $cookieString);
        }
        curl_setopt($ch, CURLOPT_COOKIE, $cookie);
    }
    if ($post){  
        curl_setopt($ch, CURLOPT_POST, true);  
        curl_setopt($ch, CURLOPT_POSTFIELDS, $post);  
    }
    curl_setopt($ch, CURLOPT_HEADER, true);
    curl_setopt($ch, CURLOPT_ENCODING, 'gzip, deflate');
    curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
    curl_setopt($ch, CURLOPT_AUTOREFERER, true);
    curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false);
    curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, $timeout);
    curl_setopt($ch, CURLOPT_TIMEOUT, $timeout);
    $content = curl_exec($ch);
    $response = curl_getinfo($ch);
    curl_close ($ch); 
    if ($content) {
        preg_match_all('/^Set-Cookie:\s*([^;]*)/mi', $content, $match);
        $setCookie = array();
        if ($match[1]) {
            foreach($match[1] as $setCookieString) {
                parse_str($setCookieString, $setCookieUnit);
                $setCookie = array_merge($setCookie, $setCookieUnit);
            }
            $cookie = is_array($cookie) ? array_merge($cookie, $setCookie) : $setCookie;
        }
    }
    if (($response['http_code'] == 301 || $response['http_code'] == 302) AND $maxRedirs)
        if ($response['redirect_url'])
            return getURL($response['redirect_url'], $cookie, $post, $timeout, --$maxRedirs);
    if ($content) {
        return array(
            'set_cookie' => $cookie,
            'response' => $response,
            'content' => $content
        );
    } else 
        return false;
}
?>
Миниатюры
Как получить уже изменённую скриптами страницу?  
1
-1 / 7 / 0
Регистрация: 03.02.2014
Сообщений: 100
07.11.2015, 11:46  [ТС]
Да, о том как получить токен, уже сам догадался Но всё-равно интересно, можно ли как-то получить страницу с отработанными скриптами, в таком виде как она показывается в firebug например.
А за скрипт авторизации - огромное спасибо! А то мой даже с token-ом почему-то всё-равно не работал
0
433 / 352 / 259
Регистрация: 29.11.2011
Сообщений: 628
07.11.2015, 19:08
Лучший ответ Сообщение было отмечено Altai90 как решение

Решение

Altai90, обычно если какой-нибудь 'token' на сайтах генерировался специальным JS скриптом, то я просто "вырывал" этот скрипт и исполнял его на стороне сервера, c помощью библиотеки J4P5 (интерпретатор JS, на PHP)
PHP
1
2
include "js.php";
js::run($code);
А вот, чтобы получить уже полностью измененную скриптами страницу, одной библиотекой не обойтись. Можно например установить phantomJS (консольный Webkit), и с помощью функции shell_exec() делать к нему запросы и получать "уже изменённую скриптами страницу"
Вот неплохая статья как всем этим пользоваться... http://blog.luchnikov.ru/programming/phantomjs/
1
-1 / 7 / 0
Регистрация: 03.02.2014
Сообщений: 100
07.11.2015, 19:40  [ТС]
Vadim_Lasso, ух-ты, очень интересно! Спасибо большое за помощь!
0
-1 / 7 / 0
Регистрация: 03.02.2014
Сообщений: 100
09.05.2016, 18:08  [ТС]
Vadim_Lasso, Добрый день! Скажите пожалуйста, получается ли у вас сейчас авторизовываться на fl.ru с помощью curl? А то я пол года не пользовался парсером fl.ru, сегодня попробовал - а парсер уже не авторизовывается. Теперь там нужно нажать на кнопку "я не робот" от гугл reCAPTCHA, и я ума не приложу, как это сделать. Вы случайно не разбирались в данном вопросе?
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
09.05.2016, 18:08
Помогаю со студенческими работами здесь

Как вернутся на уже открытую страницу
Ребята подскажите плз. Ситуация след. Пользователь открывает страницу -&gt; идет проверка проходил ли он афторизацию, если нет -&gt;...

Как добавить страницу уже в готовый сайт
Всем добрый день, Коллеги кто сталкивался с такой проблемой. Есть готовый сайт, исходный код утерян. Но нужно добавить новый...

как открыть страницу уже прокрученную скролбаром донизу?
чет не могу применить body.scrollTop напишите плиз правильный код...

Как вернуться на страницу авторизации, т.е. очистить сессию, находясь уже на переадресованой странице
session_start(); if ($_SESSION == &quot;Admin&quot; &amp;&amp; $_SESSION == &quot;mypass&quot;){ header(&quot;Location: welcome.php&quot;); exit; } if (isset...

Как сохранить измененную картинку
Добрый день, у меня такой вопрос: сделала простой js, с помощью которого на картинке я отмечаю точки в нужных местах(маркеры) как...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
6
Ответ Создать тему
Новые блоги и статьи
Воспроизведение звукового файла с помощью SDL3_mixer при касании экрана Android
8Observer8 26.01.2026
Содержание блога SDL3_mixer - это библиотека я для воспроизведения аудио. В отличие от инструкции по добавлению текста код по проигрыванию звука уже содержится в шаблоне примера. Нужно только. . .
Установка Android SDK, NDK, JDK, CMake и т.д.
8Observer8 25.01.2026
Содержание блога Перейдите по ссылке: https:/ / developer. android. com/ studio и в самом низу страницы кликните по архиву "commandlinetools-win-xxxxxx_latest. zip" Извлеките архив и вы увидите. . .
Вывод текста со шрифтом TTF на Android с помощью библиотеки SDL3_ttf
8Observer8 25.01.2026
Содержание блога Если у вас не установлены Android SDK, NDK, JDK, и т. д. то сделайте это по следующей инструкции: Установка Android SDK, NDK, JDK, CMake и т. д. Сборка примера Скачайте. . .
Использование SDL3-callbacks вместо функции main() на Android, Desktop и WebAssembly
8Observer8 24.01.2026
Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
моя боль
iceja 24.01.2026
Выложила интерполяцию кубическими сплайнами www. iceja. net REST сервисы временно не работают, только через Web. Написала за 56 рабочих часов этот сайт с нуля. При помощи perplexity. ai PRO , при. . .
Модель сукцессии микоризы
anaschu 24.01.2026
Решили писать научную статью с неким РОманом
http://iceja.net/ математические сервисы
iceja 20.01.2026
Обновила свой сайт http:/ / iceja. net/ , приделала Fast Fourier Transform экстраполяцию сигналов. Однако предсказывает далеко не каждый сигнал (см ограничения http:/ / iceja. net/ fourier/ docs ). Также. . .
http://iceja.net/ сервер решения полиномов
iceja 18.01.2026
Выкатила http:/ / iceja. net/ сервер решения полиномов (находит действительные корни полиномов методом Штурма). На сайте документация по API, но скажу прямо VPS слабенький и 200 000 полиномов. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru