Форум программистов, компьютерный форум, киберфорум
Наши страницы
IRIP
Войти
Регистрация
Восстановить пароль
Оценить эту запись

wget для загрузки сайта целиком с css, js, картинками

Запись от IRIP размещена 04.06.2019 в 14:48

Я использую wget следующим образом:

HTML5
1
wget --page-requisites --mirror --convert-links -e robots=off --span-hosts --restrict-file-names=windows --directory-prefix=$ASSETS_DIR --no-directories http://myhost/home


У wget слишком много опций, мы разберем только основные.

-h (--help) - вывести справку
-b (--background) - работать в фоновом режиме
-o файл (--out-file) - указать лог файл

-d (--debug) - включить режим отладки
-i файл (--input-file) - прочитать URL из файла
--force-html - читать файл указанный в предыдущем параметре как html
-t (--tries) - количество попыток подключения к серверу
-O файл (--output-document) - файл в который будут сохранены полученные данные
-с (--continue) - продолжить ранее прерванную загрузку
-S (--server-response) - вывести ответ сервера
--spider - проверить работоспособность URL
-T время (--timeout) - таймаут подключения к серверу
--limit-rate - ограничить скорость загрузки
-w (--wait) - интервал между запросами
-Q (--quota) - максимальный размер загрузки
-4 (--inet4only) - использовать протокол ipv4
-6 (--inet6only) - использовать протокол ipv6
-U (--user-agent)- строка USER AGENT отправляемая серверу
-r (--recursive)- рекурсивная работа утилиты
-l (--level) - глубина при рекурсивном сканировании
-k (--convert-links) - конвертировать ссылки в локальные при загрузке страниц
-P (--directory-prefix) - каталог, в который будут загружаться файлы
-m (--mirror) - скачать сайт на локальную машину
-p (--page-requisites) - во время загрузки сайта скачивать все необходимые ресурсы
Размещено в Без категории
Просмотров 110 Комментарии 1
Всего комментариев 1
Комментарии
  1. Старый комментарий
    Аватар для IRIP
    как минимум, для полного копирования сайта, делаем

    PHP
    1
    
    wget -r --mirror --convert-links -k -l 7 -p -E -nc http://myhost/home
    Запись от IRIP размещена 05.06.2019 в 09:15 IRIP вне форума
 
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin® Version 3.8.9
Copyright ©2000 - 2019, vBulletin Solutions, Inc.
Рейтинг@Mail.ru