Содержимое каждой страницы распарсить с помощью BeautifulSoup и сохранить всё в файл

31.05.2014, 13:15. **Показов** 2281. **Ответов** 1

Студворк — интернет-сервис помощи студентам

Добрый день!
Пытаюсь парсить сайт, на котором информация выводится по 30 записей на страницу, всего ~1000.
Для получения ссылок есть цикл:

Python
1
2
3
4
5
6
7
#!/usr/bin/env python3.3
 
src = 'http://bla.ru/ss?id={}&blabla'
 
for i in range(30, 91, 30):
    url = src.format(i)
    print(url)

Результат:
http://blablabla.ru/ss?id=30&blabla
http://blablabla.ru/ss?id=60&blabla
http://blablabla.ru/ss?id=90&blabla

Мне нужно содержимое каждой страницы распарсить с помощью BeautifulSoup и сохранить всё в файл. Вопрос, как мне поочереди эти ссылки передать в urlopen?

ВАСИЛЕВС · 31.05.2014, 13:37

В этом же цикле парсить, не вижу проблемы.

Новые блоги и статьи Все статьи Все блоги /
Подстановка значения реквизита справочника в табличную часть документа Maks 10.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "ПланированиеПерсонала", разработанного в конфигурации КА2. Задача: при выборе сотрудника (справочник Сотрудники) в ТЧ документа. . .	Очистка реквизитов документа при копировании Maks 09.04.2026 Алгоритм из решения ниже применим как для типовых, так и для нетиповых документов на самых различных конфигурациях. Задача: при копировании документа очищать определенные реквизиты и табличную. . .	модель ЗдравоСохранения 8. Подготовка к разному выполнению заданий anaschu 08.04.2026 https:/ / github. com/ shumilovas/ med2. git main ветка * содержимое блока дэлэй из старой модели теперь внутри зайца новой модели 8ATzM_2aurI	Блокировка документа от изменений, если он открыт у другого пользователя Maks 08.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа, разработанного в конфигурации КА2. Задача: запретить редактирование документа, если он открыт у другого пользователя. / / . . .
Система безопасности+живучести для сервера-слоя интернета (сети). Двойная привязка. Hrethgir 08.04.2026 Далее были размышления о системе безопасности. Сообщения с наклонным текстом - мои. А как нам будет можно проверить, что ссылка наша, а не подделана хулиганами, которая выбросит на другую ветку и. . .	Модель ЗдрввоСохранения 7: больше работников, больше ресурсов. anaschu 08.04.2026 работников и заданий может быть сколько угодно, но настроено всё так, что используется пока что только 20% kYBz3eJf3jQ	Дальние перспективы сервера - слоя сети с космологическим дизайном интефейса карты и логики. Hrethgir 07.04.2026 Дальнейшее ближайшее планирование вывело к размышлениям над дальними перспективами. И вот тут может быть даже будут нужны оценки специалистов, так как в дальних перспективах всё может очень сильно. . .	Горе от ума kumehtar 07.04.2026 Эта мне ментальная установка, что вот прямо сейчас, мол, мне для полного счастья не хватает (нужное вписать), и когда я этого достигну - тогда и полный кайф. Одна из самых сильных ловушек на пути. . . .

ВАСИЛЕВС 561 / 484 / 168 Регистрация: 14.02.2012 Сообщений: 1,561
	31.05.2014, 13:37
	В этом же цикле парсить, не вижу проблемы. 0