Форум программистов, компьютерный форум, киберфорум
PHP: сети
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.67/9: Рейтинг темы: голосов - 9, средняя оценка - 4.67
-1 / 7 / 0
Регистрация: 03.02.2014
Сообщений: 100

Как получить уже изменённую скриптами страницу?

06.11.2015, 00:47. Показов 1824. Ответов 5
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
В продолжении прошлой темы. Хочу с помощью curl авторизоваться на fl.ru, но для авторизации нужен token, а он, как я понял, создаётся уже после загрузки страницы. Каким образом можно его получить?
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
06.11.2015, 00:47
Ответы с готовыми решениями:

Как получить страницу с уже выполненным JS?
Товарищи! Всем привет! Подскажите куда копать. У нас такая ситуация. Делаю парсер. Получаю код страницы через curl вот так $ch =...

как отоброзить изменённую web-страницу
Добрый ден. Кто подскажет, как вывести измененную web-страницу, т.е. например открываю в WebBrowser1 какой либо сайт, а открывается этот...

Есть персонаж уже со скриптами на ходьбу и прыжок (Unity3D)
Почему при нажатии на одну из стрелок ставится пауза? Посоветуйте что-нибудь

5
433 / 352 / 259
Регистрация: 29.11.2011
Сообщений: 628
07.11.2015, 02:43
Лучший ответ Сообщение было отмечено Altai90 как решение

Решение

Altai90, в данном случае, чтобы получить "token", не требуется "измененная страница скриптами", т.к. этот ключ изначально выдается сервером в исходном виде. Просто он находится в JS, а в скрытый <input> подставляется уже потом.

В общем вот скрипт авторизации и последующих действий
PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
<?php
define("SITE", 'https://www.fl.ru');
define("LOGIN", '');
define("PASSWORD", '');
 
/* получаем сессию */
$result = getURL(SITE); 
$cookie = $result['set_cookie'];
/* формируем post запрос */
$post = array(
    'autologin' => '1',
    'login' => LOGIN,
    'passwd' => PASSWORD,
    'u_token_key' => preg_replace('/(^.+TOKEN_KEY = \')(\w+)(\'.+$)/s', '$2', $result['content']) // получаем TOKEN_KEY
);
/* авторизуемся */
$result = getURL(SITE . '/login/', $cookie, $post); 
/* сохраняем полученные куки, для последующих запросов на сайт... */
$cookie = $result['set_cookie'];
 
/* для наглядности успешной авторизации - выводим в браузер страницу с проектами */
echo iconv('CP1251', 'UTF-8', $result['content']); // [можно убрать]
 
 
function getURL($url, $cookie = false, $post = false, $timeout = 30, $maxRedirs = 3)
{
    $ch = curl_init();
    $header[] = "Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8";
    $header[] = "Connection: keep-alive";
    $header[] = "Keep-Alive: 300";
    $header[] = "Accept-Language: ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3";
    $header[] = "Pragma: "; 
    curl_setopt($ch, CURLOPT_USERAGENT, "Mozilla/5.0 (Windows NT 6.3; WOW64; rv:35.0) Gecko/20100101 Firefox/35.0");
    curl_setopt($ch, CURLOPT_URL, $url);
    curl_setopt($ch, CURLOPT_HTTPHEADER, $header); 
    if ($cookie) {
        if (is_array($cookie)) {
            foreach($cookie as $key => $value ) {
              $cookieString[] = "{$key}={$value}";
            };
            $cookie = implode('; ', $cookieString);
        }
        curl_setopt($ch, CURLOPT_COOKIE, $cookie);
    }
    if ($post){  
        curl_setopt($ch, CURLOPT_POST, true);  
        curl_setopt($ch, CURLOPT_POSTFIELDS, $post);  
    }
    curl_setopt($ch, CURLOPT_HEADER, true);
    curl_setopt($ch, CURLOPT_ENCODING, 'gzip, deflate');
    curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
    curl_setopt($ch, CURLOPT_AUTOREFERER, true);
    curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false);
    curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, $timeout);
    curl_setopt($ch, CURLOPT_TIMEOUT, $timeout);
    $content = curl_exec($ch);
    $response = curl_getinfo($ch);
    curl_close ($ch); 
    if ($content) {
        preg_match_all('/^Set-Cookie:\s*([^;]*)/mi', $content, $match);
        $setCookie = array();
        if ($match[1]) {
            foreach($match[1] as $setCookieString) {
                parse_str($setCookieString, $setCookieUnit);
                $setCookie = array_merge($setCookie, $setCookieUnit);
            }
            $cookie = is_array($cookie) ? array_merge($cookie, $setCookie) : $setCookie;
        }
    }
    if (($response['http_code'] == 301 || $response['http_code'] == 302) AND $maxRedirs)
        if ($response['redirect_url'])
            return getURL($response['redirect_url'], $cookie, $post, $timeout, --$maxRedirs);
    if ($content) {
        return array(
            'set_cookie' => $cookie,
            'response' => $response,
            'content' => $content
        );
    } else 
        return false;
}
?>
Миниатюры
Как получить уже изменённую скриптами страницу?  
1
-1 / 7 / 0
Регистрация: 03.02.2014
Сообщений: 100
07.11.2015, 11:46  [ТС]
Да, о том как получить токен, уже сам догадался Но всё-равно интересно, можно ли как-то получить страницу с отработанными скриптами, в таком виде как она показывается в firebug например.
А за скрипт авторизации - огромное спасибо! А то мой даже с token-ом почему-то всё-равно не работал
0
433 / 352 / 259
Регистрация: 29.11.2011
Сообщений: 628
07.11.2015, 19:08
Лучший ответ Сообщение было отмечено Altai90 как решение

Решение

Altai90, обычно если какой-нибудь 'token' на сайтах генерировался специальным JS скриптом, то я просто "вырывал" этот скрипт и исполнял его на стороне сервера, c помощью библиотеки J4P5 (интерпретатор JS, на PHP)
PHP
1
2
include "js.php";
js::run($code);
А вот, чтобы получить уже полностью измененную скриптами страницу, одной библиотекой не обойтись. Можно например установить phantomJS (консольный Webkit), и с помощью функции shell_exec() делать к нему запросы и получать "уже изменённую скриптами страницу"
Вот неплохая статья как всем этим пользоваться... http://blog.luchnikov.ru/programming/phantomjs/
1
-1 / 7 / 0
Регистрация: 03.02.2014
Сообщений: 100
07.11.2015, 19:40  [ТС]
Vadim_Lasso, ух-ты, очень интересно! Спасибо большое за помощь!
0
-1 / 7 / 0
Регистрация: 03.02.2014
Сообщений: 100
09.05.2016, 18:08  [ТС]
Vadim_Lasso, Добрый день! Скажите пожалуйста, получается ли у вас сейчас авторизовываться на fl.ru с помощью curl? А то я пол года не пользовался парсером fl.ru, сегодня попробовал - а парсер уже не авторизовывается. Теперь там нужно нажать на кнопку "я не робот" от гугл reCAPTCHA, и я ума не приложу, как это сделать. Вы случайно не разбирались в данном вопросе?
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
09.05.2016, 18:08
Помогаю со студенческими работами здесь

Как вернутся на уже открытую страницу
Ребята подскажите плз. Ситуация след. Пользователь открывает страницу -&gt; идет проверка проходил ли он афторизацию, если нет -&gt;...

Как добавить страницу уже в готовый сайт
Всем добрый день, Коллеги кто сталкивался с такой проблемой. Есть готовый сайт, исходный код утерян. Но нужно добавить новый...

как открыть страницу уже прокрученную скролбаром донизу?
чет не могу применить body.scrollTop напишите плиз правильный код...

Как вернуться на страницу авторизации, т.е. очистить сессию, находясь уже на переадресованой странице
session_start(); if ($_SESSION == &quot;Admin&quot; &amp;&amp; $_SESSION == &quot;mypass&quot;){ header(&quot;Location: welcome.php&quot;); exit; } if (isset...

Как сохранить измененную картинку
Добрый день, у меня такой вопрос: сделала простой js, с помощью которого на картинке я отмечаю точки в нужных местах(маркеры) как...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
6
Ответ Создать тему
Новые блоги и статьи
Первый деплой
lagorue 16.01.2026
Не спеша развернул своё 1ое приложение в kubernetes. А дальше мне интересно создать 1фронтэнд приложения и 2 бэкэнд приложения развернуть 2 деплоя в кубере получится 2 сервиса и что-бы они. . .
Расчёт переходных процессов в цепи постоянного тока
igorrr37 16.01.2026
/ * Дана цепь постоянного тока с R, L, C, k(ключ), U, E, J. Программа составляет систему уравнений по 1 и 2 законам Кирхгофа, решает её и находит токи на L и напряжения на C в установ. режимах до и. . .
Восстановить юзерскрипты Greasemonkey из бэкапа браузера
damix 15.01.2026
Если восстановить из бэкапа профиль Firefox после переустановки винды, то список юзерскриптов в Greasemonkey будет пустым. Но восстановить их можно так. Для этого понадобится консольная утилита. . .
Изучаю kubernetes
lagorue 13.01.2026
А пригодятся-ли мне знания kubernetes в России?
Сукцессия микоризы: основная теория в виде двух уравнений.
anaschu 11.01.2026
https:/ / rutube. ru/ video/ 7a537f578d808e67a3c6fd818a44a5c4/
WordPad для Windows 11
Jel 10.01.2026
WordPad для Windows 11 — это приложение, которое восстанавливает классический текстовый редактор WordPad в операционной системе Windows 11. После того как Microsoft исключила WordPad из. . .
Classic Notepad for Windows 11
Jel 10.01.2026
Old Classic Notepad for Windows 11 Приложение для Windows 11, позволяющее пользователям вернуть классическую версию текстового редактора «Блокнот» из Windows 10. Программа предоставляет более. . .
Почему дизайн решает?
Neotwalker 09.01.2026
В современном мире, где конкуренция за внимание потребителя достигла пика, дизайн становится мощным инструментом для успеха бренда. Это не просто красивый внешний вид продукта или сайта — это. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru