Форум программистов, компьютерный форум, киберфорум
Python: Web
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
 Аватар для supmener
87 / 95 / 15
Регистрация: 26.06.2013
Сообщений: 4,750

Не могу разобраться с wget (wget2)

08.09.2025, 22:12. Показов 669. Ответов 1
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Хочу составить команду, которая скачает начальный сайт целиком и внешние страницы, на которые ведут ссылки из первоначального сайта только (но с картинками, CSS, JS файлами), без перехода с них (страниц вторичных сайтов) уже на другие страницы, указанных на них.
Встречал описания флагов:
- -p, --page-requisites: скачивает всё, что нужно для корректного отображения HTML-страницы (картинки, CSS и т. п.). Работает с -r.
- -r, --recursive: рекурсивное скачивание.
- -l N, --level=N: ограничение глубины рекурсии до N уровней. -l 1 значит только начальная страница и её ссылки на уровне 1.
- -H, --span-hosts: разрешает переходить на внешние хосты во время рекурсии. Не ограничивает количеством уровней сам по себе.
- -E, --adjust-extension: корректирует расширения сохраняемых файлов (например, сохранять HTML как .html). Не конфликтует напрямую с остальными, но влияет на имена файлов.

Но не понял, как это правильно использовать для поставленной задачи, так как для начального сайта получается, что нужны одни настройки, а для тех, на которые ведут ссылки с него, уже нужны другие настройки.
0
IT_Exp
Эксперт
34794 / 4073 / 2104
Регистрация: 17.06.2006
Сообщений: 32,602
Блог
08.09.2025, 22:12
Ответы с готовыми решениями:

Загрузка файлов из интернета. Wget
Есть список ссылок на файлы расположенные в интернете. Нужно их загрузить. Решение известно -...

Установка модуля wget
Всем привет! Хотел установить модуль wget, но не получилось, устанавливая его через pip выдавало...

Какая разница между библиотеками wget и requests?
Какая разница между библиотеками wget и requests?

1
2890 / 1925 / 208
Регистрация: 05.06.2011
Сообщений: 5,616
09.09.2025, 12:53
Разве что использовать --rejected-log вкупе с запретом уходить с сайта, потом разобрать его и извлечь оттуда список дополнительных ссылок, на кои натравить wget уже с другими параметрами... Сомневаюсь, что хоть wget, хоть curl умеют одной строкой выразить столь изощрённые критерии.
1
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
BasicMan
Эксперт
29316 / 5623 / 2384
Регистрация: 17.02.2009
Сообщений: 30,364
Блог
09.09.2025, 12:53
Помогаю со студенческими работами здесь

Pycharm. Работа с библиотекой wget в Python
Ребят, всем привет! Возник вопрос по работе модуля(библиотеки) wget с использованием среды Pycharm....

Не могу разобраться в работе модуля rarfile на винде
Приветствую! Проблема такая - на лине скрипт нормально отрабатывает, а вот когда запускаю его на...

unhashable type - не могу разобраться
Вот собственно часть задачи. При запуске выводится отчет об ошибке. Помогите найти как исправить...

Не могу разобраться с удаленной отправкой
Добрый день. Создал скрипт на питоне - он берет через определенное время команды из файла на...

Не могу разобраться с sys.path
Здравствуйте! Начал изучение по книге Лутца, в ней сказано “А пока, чтобы избежать осложнений,...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
2
Ответ Создать тему
Новые блоги и статьи
Новый ноутбук
volvo 07.12.2025
Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro
Музыка, написанная Искусственным Интеллектом
volvo 04.12.2025
Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .
От async/await к виртуальным потокам в Python
IndentationError 23.11.2025
Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
Поиск "дружественных имён" СОМ портов
Argus19 22.11.2025
Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Programma_Boinc 20.11.2025
Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .
Ломающие изменения в C#.NStar Alpha
Etyuhibosecyu 20.11.2025
Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .
Мысли в слух
kumehtar 18.11.2025
Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .
Создание Single Page Application на фреймах
krapotkin 16.11.2025
Статья исключительно для начинающих. Подходы оригинальностью не блещут. В век Веб все очень привыкли к дизайну Single-Page-Application . Быстренько разберем подход "на фреймах". Мы делаем одну. . .
Фото: Daniel Greenwood
kumehtar 13.11.2025
Расскажи мне о Мире, бродяга
kumehtar 12.11.2025
— Расскажи мне о Мире, бродяга, Ты же видел моря и метели. Как сменялись короны и стяги, Как эпохи стрелою летели. - Этот мир — это крылья и горы, Снег и пламя, любовь и тревоги, И бескрайние. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2025, CyberForum.ru