Не получается авторизоваться на сайте (Grab)

@weblord · Регистрация: 16.10.2016

Студворк — интернет-сервис помощи студентам

Привет всем, возникла проблема с POST запросом, пытаюсь при помощи POST авторизоваться на форуме (использую Grab):

Python
1
2
3
4
5
6
7
8
from grab import Grab
 
g = Grab()
 
g.setup(post={'vb_login_username': 'емейл', 'vb_login_password': 'пароль'})
resp = g.go('https://www.cyberforum.ru/', connect_timeout=1000, timeout=1000)
#дальше проверяю результат попытки авторизации при помощи парсинга строки "Добро пожаловать, *ник*"
print(g.doc.select('/html/body/div[1]/div[1]/div/div/table[1]/tbody/tr/td[2]/div/strong').text())

Почему-то не работает. Интересна именно авторизация при помощи Граба. Кто подскажет?

@Garry Galler · 21.12.2016, 19:11

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
def auth_3():    
    from grab import Grab
    g = Grab()
    
    data = {
    'vb_login_username':login,
    'vb_login_password':password,
    'securitytoken':'guest',            
    'do': 'login' 
    }
    
    g.setup(post=data)
    r = g.go('{}{}'.format(url,'/login.php?do=login'))
    print(r.code)
    print(r.cookies)
    for k,v in r.cookies.items():
        if k=='vbseo_loggedin' and v=='yes':
            print('Мы вошли')
            break     
    else:
        print('Печалька') 
    
    return r
   
r = auth_3()

Добавлено через 2 минуты
Мне кажется, или Grab все-таки был актуален в эпоху отсутствия requests?

@weblord · 21.12.2016, 19:43 **[ТС]**

В грабе все как-то проще, я хочу для начала разобраться во всем. Вы хотите сказать, что requests лучше, чем граб?

Добавлено через 23 минуты

Сообщение от Garry Galler

Python
1
2
'securitytoken':'guest', 
 'do': 'login'

Не совсем понятен данный момент, откуда мы все это взяли и зачем? Буду признателен за объяснение)

@Garry Galler · 21.12.2016, 19:46

Сообщение от weblord

Вы хотите сказать, что requests лучше, чем граб

requests+lxml покрывают почти все мои практические задачи граббинга.

...Когда я начал изучать python несколько месяцев назад - и grab и суп (BS)- мне сразу показались некими гостями из прошлого, к тому не соблюдающими python way. И тот и другой модуль - по сути обертки над другими более продвинутыми модулями.
Grab,к примеру, это:
- lxml
- pycurl
- selection
- six
- user-agent
- weblib[/CODE]
Поэтому я решил, что проще будет изучить тот же lxml вдоль и поперек - чем юзать его же из других модулей, не понимая как это все работает на самом деле.
А requests уже давно стала неким эталоном удобства работы с http - не зря ведь ее назвали HTTP for Humans :-)
Но все это - всего лишь мое ИМХО, каждый волен сам выбирать себе нужный инструмент.

Добавлено через 1 минуту

Сообщение от weblord

Не совсем понятен данный момент, откуда мы все это взяли и зачем?

А это я объяснял в другой теме.
Из "из инструментов разработчика в браузере либо инструментов типа HTTP Analyzer".
Это называется - снифать:-)

@Garry Galler · 21.12.2016, 20:07

Вот что отправляет браузер, когда мы логинимся на этом сайте:

Не получается авторизоваться на сайте (Grab)

И, кстати, параметр 'securitytoken' даже, как выяснилось, необязателен.

@weblord · 21.12.2016, 20:25 **[ТС]**

Сообщение от Garry Galler

А это я объяснял в другой теме.
Из "из инструментов разработчика в браузере либо инструментов типа HTTP Analyzer".
Это называется - снифать:-)

Вот я и не понимаю, как найти эти данные в инструментах разработчика?

@Garry Galler · 21.12.2016, 21:02

weblord,
Они отличаются в разных браузерах - сам предпочитаю использовать внешние тулзы.
Вот так в opera выглядит сниф параметров (Ctrl-Shift-I):

Но так как дебаггер очень быстро перезагружает консоль редиректом, то чтобы увидеть именно данные post-запроса, а не последующего get (на который сайт редиректит) - пришлось резко останавливать запись кнопкой с "кругом" (она же и включает запись). Неудобно. Поэтому внешние тулзы лучше.

@weblord · 21.12.2016, 21:19 **[ТС]**

Огромное спасибо за помощь, уже скачал и активировал программу!

Jabbson · 22.12.2016, 02:19

Сообщение от Garry Galler

Но так как дебаггер очень быстро перезагружает консоль редиректом, то чтобы увидеть именно данные post-запроса, а не последующего get (на который сайт редиректит) - пришлось резко останавливать запись кнопкой с "кругом" (она же и включает запись). Неудобно. Поэтому внешние тулзы лучше.

в хроме есть кнопка специальная - preserve log, в ff это называется enable persistent log

@weblord · 22.12.2016, 11:33 **[ТС]**

Странно, почему-то перестал нормально работать HTTP Analyzer... Не записывает POST данные вообще, хотя пробовал логиниться на разных форумах через разные браузеры, чистил куки... Можете подсказать, в чем может быть проблема?

Добавлено через 8 минут
Кстати, вообще никаких данных не записывает, как я заметил. Кнопка старта была включена..

@Garry Galler · 22.12.2016, 13:50

Jabbson,
Сенкс, забыл про эти настройки для логирования.
-----------------------
weblord,
Перезапустите программу. В фильтре процессов выберите WebBrowsers, в нижней части верхней панели должен появиться выбранный фильтр с отмеченной галочкой - там должны быть перечислены все браузеры.
Стартуйте логирование.

@weblord · 22.12.2016, 14:06 **[ТС]**

У меня нету пункта WebBrowsers, там только '1. Result is not cache', '2. Result is successful' и т. д.

@Garry Galler · 22.12.2016, 14:22

weblord,
Не там смотрите - выпадающий список Process слева (чуть ниже кнопки Start).
И еще - прога (у меня старая версия 2012 года) бывает подглючивает и требуется (после старта логирования) еще и браузер перезапустить, чтобы она PID процесса\ов правильно определила.

@weblord · 22.12.2016, 14:36 **[ТС]**

Нет, у меня ниже кнопки старта уже отображаются вкладки (Пост запросы и т. д.)

@Garry Galler · 22.12.2016, 15:06

weblord,
Значит в новых версиях интерфейс другой - нужно попробовать самому разобраться, help там есть. Попробуйте как я сказал - запустить программу, стартовать лог, перезапустить браузер (изменить порядок действий можно на любой другой). Если вообще не получится - используйте инструменты браузера.

Новые блоги и статьи Все статьи Все блоги /
Автозаполнение реквизита при выборе элемента справочника Maks 27.03.2026 Программный код из решения ниже на примере нетипового документа "ЗаявкаНаРемонтСпецтехники" разработанного в конфигурации КА2. При выборе "Спецтехники" (Тип Справочник. Спецтехника), заполняется. . .	Сумматор с применением элементов трёх состояний. Hrethgir 26.03.2026 Тут. https:/ / fips. ru/ EGD/ ab3c85c8-836d-4866-871b-c2f0c5d77fbc Первый документ красиво выглядит, но без схемы. Это конечно не даёт никаких плюсов автору, но тем не менее. . . всё может быть. . .	Автозаполнение реквизитов при создании документа Maks 26.03.2026 Программный код из решения ниже размещается в модуле объекта документа, в процедуре "ПриСозданииНаСервере". Алгоритм проверки заполнения реализован для исключения перезаписи значения реквизита,. . .	Команды формы и диалоговое окно Maks 26.03.2026 1. Команда формы "ЗаполнитьЗапчасти". Программный код из решения ниже на примере нетипового документа "ЗаявкаНаРемонтСпецтехники" разработанного в конфигурации КА2. В качестве источника данных. . .
Кому нужен AOT? DevAlt 26.03.2026 Решил сделать простой ланчер Написал заготовку: dotnet new console --aot -o UrlHandler var items = args. Split(":"); var tag = items; var id = items; var executable = args;. . .	Отправка уведомления на почту при создании или изменении элементов справочника Maks 24.03.2026 Программная отправка письма электронной почты на примере типового справочника "Склады" в конфигурации БП3. Перед реализацией необходимо выполнить настройку системной учетной записи электронной. . .	модель ЗдравоСохранения 5. Меньше увольнений- больше дохода! anaschu 24.03.2026 Теперь система здравосохранения уменьшает количество увольнений. 9TO2GP2bpX4 a42b81fb172ffc12ca589c7898261ccb/ https:/ / rutube. ru/ video/ a42b81fb172ffc12ca589c7898261ccb/ Слева синяя линия -. . .	Midnight Chicago Blues kumehtar 24.03.2026 Такой Midnight Chicago Blues, знаешь?. . Когда вечерние улицы становятся ночными, а ты не можешь уснуть. Ты идёшь в любимый старый бар, и бармен наливает тебе виски. Ты смотришь на пролетающие. . .

@Garry Galler 5438 / 3859 / 1215 Регистрация: 28.10.2013 Сообщений: 9,552 Записей в блоге: 1
	21.12.2016, 20:07
	Вот что отправляет браузер, когда мы логинимся на этом сайте: И, кстати, параметр 'securitytoken' даже, как выяснилось, необязателен. 1

@Garry Galler 5438 / 3859 / 1215 Регистрация: 28.10.2013 Сообщений: 9,552 Записей в блоге: 1
	21.12.2016, 21:02
	weblord, Они отличаются в разных браузерах - сам предпочитаю использовать внешние тулзы. Вот так в opera выглядит сниф параметров (Ctrl-Shift-I): Но так как дебаггер очень быстро перезагружает консоль редиректом, то чтобы увидеть именно данные post-запроса, а не последующего get (на который сайт редиректит) - пришлось резко останавливать запись кнопкой с "кругом" (она же и включает запись). Неудобно. Поэтому внешние тулзы лучше. 0

@weblord 1 / 1 / 2 Регистрация: 16.10.2016 Сообщений: 111
	21.12.2016, 21:19 [ТС]
	Огромное спасибо за помощь, уже скачал и активировал программу! 0

@weblord 1 / 1 / 2 Регистрация: 16.10.2016 Сообщений: 111
	22.12.2016, 11:33 [ТС]
	Странно, почему-то перестал нормально работать HTTP Analyzer... Не записывает POST данные вообще, хотя пробовал логиниться на разных форумах через разные браузеры, чистил куки... Можете подсказать, в чем может быть проблема? Добавлено через 8 минут Кстати, вообще никаких данных не записывает, как я заметил. Кнопка старта была включена.. 0

@Garry Galler 5438 / 3859 / 1215 Регистрация: 28.10.2013 Сообщений: 9,552 Записей в блоге: 1
	22.12.2016, 13:50
	Jabbson, Сенкс, забыл про эти настройки для логирования. ----------------------- weblord, Перезапустите программу. В фильтре процессов выберите WebBrowsers, в нижней части верхней панели должен появиться выбранный фильтр с отмеченной галочкой - там должны быть перечислены все браузеры. Стартуйте логирование. 1

@weblord 1 / 1 / 2 Регистрация: 16.10.2016 Сообщений: 111
	22.12.2016, 14:06 [ТС]
	У меня нету пункта WebBrowsers, там только '1. Result is not cache', '2. Result is successful' и т. д. 0

@Garry Galler 5438 / 3859 / 1215 Регистрация: 28.10.2013 Сообщений: 9,552 Записей в блоге: 1
	22.12.2016, 14:22
	weblord, Не там смотрите - выпадающий список Process слева (чуть ниже кнопки Start). И еще - прога (у меня старая версия 2012 года) бывает подглючивает и требуется (после старта логирования) еще и браузер перезапустить, чтобы она PID процесса\ов правильно определила. 1

@weblord 1 / 1 / 2 Регистрация: 16.10.2016 Сообщений: 111
	22.12.2016, 14:36 [ТС]
	Нет, у меня ниже кнопки старта уже отображаются вкладки (Пост запросы и т. д.) 0

@Garry Galler 5438 / 3859 / 1215 Регистрация: 28.10.2013 Сообщений: 9,552 Записей в блоге: 1
	22.12.2016, 15:06
	weblord, Значит в новых версиях интерфейс другой - нужно попробовать самому разобраться, help там есть. Попробуйте как я сказал - запустить программу, стартовать лог, перезапустить браузер (изменить порядок действий можно на любой другой). Если вообще не получится - используйте инструменты браузера. 1

Не получается авторизоваться на сайте (Grab)

Решение