Форум программистов, компьютерный форум, киберфорум
Python
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
0 / 0 / 0
Регистрация: 02.09.2012
Сообщений: 23

Как сохранять cookies при использовании grab.spider?

10.09.2013, 13:15. Показов 2433. Ответов 0
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Добрый день форумчане.

Есть вопрос по работе библиотеки спайдер.

Написан простенький класс для логина на сайте. При переходе из initial task в другое задание теряются все куки. Судя по документации все должно сохранятся и реюзаться, но этого не происходит. В чем может быть ошибка?

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
#!C:\Python27\python
# -*- coding: utf-8 -*-
from grab.spider import Spider, Task
import logging
import re
 
 
class MambaSpider(Spider):
    initial_urls = ['http://wap.mamba.ru/index.php']
    base_url = 'http://wap.mamba.ru'
    links = []
 
    def task_initial(self, grab, task):
        params = {
            'sid': '',  # TODO: периодически менять
            'action': 'login',
            'area': 'Login',
            'login': 'user@yandex.ru',
            'password': '12345',
            'submitted': 'Sign in '
        }
 
        # Логинимся
        grab.setup(post=params)
        grab.request()
 
        # Задаем параметры поиска
        look = {'Female': 'F'}
        loc = {'Saint-Petesburg': '3159_4925_4962'}
        fromAge = 18
        toAge = 18
 
        searchUrl = '/?area=SearchResult&lookFor={0}&location={1}&fromAge={2}&toAge={3}&sr=true&photoSize=normal&status=all&offset=0'\
            .format(look['Female'], loc['Saint-Petesburg'], fromAge, toAge)       
 
        # Перешли на страницу поиска
        yield Task('get_links', url=searchUrl)
 
    def task_get_links(self, grab, task):
        # Теряем куки!
        nextPage = grab.xpath('//a[@class="new-pager-next"]').get('href')
        ....
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
10.09.2013, 13:15
Ответы с готовыми решениями:

Как сохранить сессии (cookies) при использовании WebView?
Подскажите, пожалуйста, как сделать так, чтобы при закрытии приложения сессии не сбрасывались? Задача состоит в том, чтобы написать...

Синий экран смерти при запуске Ultimate Spider Man
Здравствуйте пользователи форума, у меня такая ошибка при запуске игры Ultimate Spider Man вылетает синий экран, драйвер видео карты...

Ошибка при запуске игры Spider-Man Friend Or Foe
Помогите,недавно я скачал игру Spider-Man Friend Or Foe.Все шло хорошо,я скачал,загрузил игру,но когда я попробовал запустить ее начались...

0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
10.09.2013, 13:15
Помогаю со студенческими работами здесь

Как пользоваться облаком. Spider Oak
Помогите воспользоваться программой. Нужно скинуть файл объемом 130 гб для переустановки системы. Мои знания о сохранении файлов...

Невалидный PNG при парсинге Grab
Уважаемые программисты, помогите, пожалуйста, решить проблему. Пишу небольшой парсер, использую GRAB Загвоздка случилась с картинкой...

Крашится Marvel’s Spider-Man Remastered на 1660 Super при достижении потребление в 4700МБ VRAM
Всем доброго времени суток :drink: Случилась проблема. Решил поиграть в нового Spider-Manа, которого месяц назад портнули на ПК. ...

Как выполнить кастомные методы при очищении cookies в AspNetCore?
Создаю сайт по продаже билетов. На этом сайте есть корзина покупок, и при добавлении билета в корзину, место помечается как купленное. Но...

BSOD бывает при запуске игр (Saints Row 3,Amazing Spider Man,Prototype 2,Spec Ops The Line)
AMD FX(tm)-6100 Six-Core Processor x6 ~3300MHz NVIDIA GeForce GTX 560 Pure Black 990FX 8GB Windows 7 Максимальная 64-bit (6.1,...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
1
Ответ Создать тему
Новые блоги и статьи
Программный контроль заполнения реквизита табличной части документа
Maks 02.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: реализовать контроль заполнения реквизита "ПричинаСписания". . .
wmic не является внутренней или внешней командой
Maks 02.04.2026
Решение: DISM / Online / Add-Capability / CapabilityName:WMIC~~~~ Отсюда: https:/ / winitpro. ru/ index. php/ 2025/ 02/ 14/ komanda-wmic-ne-naydena/
Программная установка даты и запрет ее изменения
Maks 02.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: при создании документов установить период списания автоматически. . .
Вывод данных в справочнике через динамический список
Maks 01.04.2026
Реализация из решения ниже выполнена на примере нетипового справочника "Спецтехника" разработанного в конфигурации КА2. Задача: вывести данные из ТЧ нетипового документа. . .
Программное заполнения текстового поля в реквизите формы документа
Maks 01.04.2026
Алгоритм из решения ниже реализован на нетиповом документе "ВыдачаОборудованияНаСпецтехнику" разработанного в конфигурации КА2, в дополнении к предыдущему решению. На форме документа создается. . .
К слову об оптимизации
kumehtar 01.04.2026
Вспоминаю начало 2000-х, университет, когда я писал на Delphi. Тогда среди программистов на форумах активно обсуждали аккуратную работу с памятью: нужно было следить за переменными, вовремя. . .
Идея фильтра интернета (сервер = слой+фильтр).
Hrethgir 31.03.2026
Суть идеи заключается в том, чтобы запустить свой сервер, о чём я если честно мечтал давно и давно приобрёл книгу как это сделать. Но не было причин его запускать. Очумелые учёные напечатали на. . .
Модель здравосоХранения 6. ESG-повестка и устойчивое развитие; углублённый анализ кадрового бренда
anaschu 31.03.2026
В прикрепленном документе раздумья о том, как можно поменять модель в будущем
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru