Парсер grab, как записать полученные данные в файл?

@12Gerc · Регистрация: 15.12.2013

Студворк — интернет-сервис помощи студентам

Для записи в таком виде всё записывается

Python
1
2
3
4
5
from grab import Grab
from urllib import urlopen
f1 = open("proverka.txt", 'w')
data = urlopen('http://yandex.ru/robots.txt').read()
f1.write(data)

А как записать такой парсер, методом выше не получается

Python
1
2
3
4
5
from grab import Grab
from urllib import urlopen
g = Grab()
g.go('http://habrahabr.ru/')
print g.doc.select('//h1')[1].text()

Как сделать, чтобы полученные данные(в данном случае заголовок) записывались в отдельный фаил?

@Wolkodav · 29.06.2014, 12:27

12Gerc, первый работает

Python
1
2
3
4
5
6
from urllib import urlopen
f1 = open("proverka.txt", 'w')
data = urlopen('http://yandex.ru/robots.txt').read()
f1.write(data)
# Забыли 
f1.close()

Второй вариант:

Python
1
2
3
4
5
6
from grab import Grab
from urllib import urlopen
g = Grab()
g.go('http://habrahabr.ru/')
with open("test.txt", 'w') as fd:
    fd.write(g.doc.select('//h1')[1].text())

По идеи должно работать

@12Gerc · 29.06.2014, 16:40 **[ТС]**

Выдаёт такую ошибку
fd.write(g.doc.select('//h1')[0].text())
UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-8: ordinal not in range(128)

Сам фаил создаётся пустым

Добавлено через 23 минуты

Python
1
2
3
4
5
from grab import Grab
from urllib import urlopen
g = Grab(log_file='out.txt')
g.go('http://habrahabr.ru/')
print g.doc.select('//h1')[1].text()

При такой попытке он полностью копирует страницу сайта

Новые блоги и статьи Все статьи Все блоги /
Отчёт о спецтехнике находящейся в ремонте Maks 20.04.2026 Отчёт из решения ниже размещен в конфигурации КА2. Задача: отобразить спецтехнику, которая на данный момент находится в ремонте. Есть нетиповой документ "Заявка на ремонт спецтехники" который. . .	Памятка для бота и "визитка" для читателей "Semantic Universe Layer (Слой семантической вселенной)" Hrethgir 19.04.2026 Сгенерировано для краткого описания по случаю сборки и компиляции скелета серверного приложения. И пусть после этого скажут, что статьи сгенерированные AI - туфта и не интересно. И это не реклама -. . .	Запрет удаления строк ТЧ документа при определенном условии Maks 19.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "Аккумуляторы", разработанного в конфигурации КА2. У данного документа есть ТЧ, в которой в зависимости от прав доступа. . .	Модель заражения группы наркоманов alhaos 17.04.2026 Условия задачи сформулированы тут Суть: - Группа наркоманов из 10 человек. - Только один инфицирован ВИЧ. - Колются одной иглой. - Колются раз в день. - Колются последовательно через. . .
Мысли в слух. Про "навсегда". kumehtar 16.04.2026 Подумалось тут, что наверное очень глупо использовать во всяких своих установках понятие "навсегда". Это очень сильное понятие, и я только начинаю понимать край его смысла, не смотря на то что давно. . .	My Business CRM MaGz GoLd 16.04.2026 Всем привет, недавно возникла потребность создать CRM, для личных нужд. Собственно программа предоставляет из себя базу данных клиентов, в которой можно фиксировать звонки, стадии сделки, а также. . .	Знаешь почему 90% людей редко бывают счастливыми? kumehtar 14.04.2026 Потому что они ждут. Ждут выходных, ждут отпуска, ждут удачного момента. . . а удачный момент так и не приходит.	Фиксация колонок в отчете СКД Maks 14.04.2026 Фиксация колонок в СКД отчета типа Таблица. Задача: зафиксировать три левых колонки в отчете. Процедура ПриКомпоновкеРезультата(ДокументРезультат, ДанныеРасшифровки, СтандартнаяОбработка) / / . . .

Опции темы