Не понимаю поведение wget

@PhpNewbie · Регистрация: 05.01.2013

Студворк — интернет-сервис помощи студентам

Есть два разных скрипта, в одном
wget обращается с пост запросом к странице сайта, а в другом качает zip архив.
Оба эти скрипта вызываются через nohup &. Так вот, wget в случае с пост запросом почему-то выполняется только с параметром -bqc, иначе запрос просто не срабатывает и возвращает пустую страницу вместо нужной, а во втором случае если -bqc прописать, то скрипт естественно не ждет окончания загрузки архива и все ломается.
Либо я чота путаю либо wget по-разному себя ведет с архивами и с пост запросами на страницу?

@peter_irich · 25.12.2017, 20:32

Вы бы лучше полностью показали команды, которыми вызывается wget. Я ни разу не использовал
опцию "-q" и "nohup &", достаточно было "-b". И, наоборот, вывод wget у меня сохраняется в файле.
Также мне никогда не приходилось задумываться о пост-запросах, опять же это можно посмотреть в выводе.
wget просто качает, что или сколько ей указано. Страницы скачивает настолько усердно, что результат
имеет размер десятки мегабайт, в зависимости от указанных опций.
Так что покажите команды, тогда можно будет думать, что не так.

Пётр.

@PhpNewbie · 26.12.2017, 18:31 **[ТС]**

Bash
1
wget -bqc -O foo.html --post-data "data=$(cat ./postdata.txt)" sitename.com/postbackurl --no-check-certificate

Без -bqc не отправляет пост запрос почему-то. Кстати, предварительно postdata.txt я кодирую base64 чтобы не было лишних символов, есть ли вариант без кодирования? Например просто данные с любыми символами переслать? А ну да, забыл упомянуть, что этот код я запускаю удаленно с другого серва, при этом соединение обрывается сразу при запуске скрипта и не дожидается его выполнения. Это важный момент.
Ну а код скачивания архива думаю приводить смысла нет, обычный вгет качает зип архив.

@peter_irich · 27.12.2017, 13:53

Тут я помочь не смогу, т.к. никогда post-запросов не отправлял. Однако мне непонятно, зачем здесь
"-O foo.html". Кроме того, лучше бы указать полностью адрес, с "http://" и т.д.

Пётр.

@PhpNewbie · 27.12.2017, 19:48 **[ТС]**

Сообщение от peter_irich

"-O foo.html"

Чисто для отладки, смотрел приходит ли ответ с сервера

Сообщение от peter_irich

Кроме того, лучше бы указать полностью адрес, с "http://" и т.д.

Я пробовал по-разному, но там почему-то ошибки с редиректами какие-то, вот конкретно так работает.

@peter_irich · 27.12.2017, 20:44

PhpNewbie, Так возможно, что это ошибка на сайте, а не на вашей стороне.
Тем более, если действительно обязательно указывать "-q", это же относится только к выводу в терминал.

Пётр.

@PhpNewbie · 27.12.2017, 21:50 **[ТС]**

Сообщение от peter_irich

обязательно указывать "-q"

Я вообще хз чо это значит, просто загуглил, как в фоновый режим вгет впихнуть там было -bqc, вставил, заработало. Без этого не работает.
Может и в сайте проблема, но почему именно с этими параметрами все норм, а без них возвращает пустую строку в foo? и вообще не срабатывает запрос на сайт? Лан, это в принципе просто интерес, я люблю разбираться в проблемах, думал, может просто кто сталкивался.

@peter_irich · 28.12.2017, 09:43

PhpNewbie, Для фонового режима достаточно "-b". Вообще сайты бывают разные,
некоторые, например, не разрешают себя пинговать. Хорошо бы проверить на другом сайте,
м.б. и на внутреннем, если его запустить, но этого я тоже никогда не делал.

Пётр.

@PhpNewbie · 28.12.2017, 16:21 **[ТС]**

Сообщение от peter_irich

Вообще сайты бывают разные

Да не, сайт то мой. Говорю же с -b работает, а без него нет. Почему? Может и в сайте дело, но это же не отменяет вопроса, почему именно этот параметр заставляет работать?

Добавлено через 1 минуту
Но вообще, намек понял. Благодарю за ответы, потом поковыряюсь сам, как время будет.

@peter_irich · 28.12.2017, 18:05

Мне тоже непонятно, почему в фоне работает, а будучи привязанным к терминалу - нет.
"-b" только отсоединяет программу от терминала. Попробуйте без "-q" и сохранять вывод wget
в log-файл, опция "-o", но вроде бы и без неё будет сохраняться в wget-log.
Т.е. запускать с разными опциями и смотреть, что будет в log-файле.

Пётр.

@PhpNewbie · 28.12.2017, 19:53 **[ТС]**

Сообщение от peter_irich

Попробуйте без "-q" и сохранять вывод wget

Пробовал просто с -b тоже работает.

Новые блоги и статьи Все статьи Все блоги /
Воспроизведение звукового файла с помощью SDL3_mixer при касании экрана Android 8Observer8 26.01.2026 Содержание блога SDL3_mixer - это библиотека я для воспроизведения аудио. В отличие от инструкции по добавлению текста код по проигрыванию звука уже содержится в шаблоне примера. Нужно только. . .	Установка Android SDK, NDK, JDK, CMake и т.д. 8Observer8 25.01.2026 Содержание блога Перейдите по ссылке: https:/ / developer. android. com/ studio и в самом низу страницы кликните по архиву "commandlinetools-win-xxxxxx_latest. zip" Извлеките архив и вы увидите. . .	Вывод текста со шрифтом TTF на Android с помощью библиотеки SDL3_ttf 8Observer8 25.01.2026 Содержание блога Если у вас не установлены Android SDK, NDK, JDK, и т. д. то сделайте это по следующей инструкции: Установка Android SDK, NDK, JDK, CMake и т. д. Сборка примера Скачайте. . .	Использование SDL3-callbacks вместо функции main() на Android, Desktop и WebAssembly 8Observer8 24.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
моя боль iceja 24.01.2026 Выложила интерполяцию кубическими сплайнами www. iceja. net REST сервисы временно не работают, только через Web. Написала за 56 рабочих часов этот сайт с нуля. При помощи perplexity. ai PRO , при. . .	Модель сукцессии микоризы anaschu 24.01.2026 Решили писать научную статью с неким РОманом	http://iceja.net/ математические сервисы iceja 20.01.2026 Обновила свой сайт http:/ / iceja. net/ , приделала Fast Fourier Transform экстраполяцию сигналов. Однако предсказывает далеко не каждый сигнал (см ограничения http:/ / iceja. net/ fourier/ docs ). Также. . .	http://iceja.net/ сервер решения полиномов iceja 18.01.2026 Выкатила http:/ / iceja. net/ сервер решения полиномов (находит действительные корни полиномов методом Штурма). На сайте документация по API, но скажу прямо VPS слабенький и 200 000 полиномов. . .

@PhpNewbie 3 / 3 / 2 Регистрация: 05.01.2013 Сообщений: 264

	Не понимаю поведение wget 25.12.2017, 17:54. Показов 1463. Ответов 10 Метки нет (Все метки) Есть два разных скрипта, в одном wget обращается с пост запросом к странице сайта, а в другом качает zip архив. Оба эти скрипта вызываются через nohup &. Так вот, wget в случае с пост запросом почему-то выполняется только с параметром -bqc, иначе запрос просто не срабатывает и возвращает пустую страницу вместо нужной, а во втором случае если -bqc прописать, то скрипт естественно не ждет окончания загрузки архива и все ломается. Либо я чота путаю либо wget по-разному себя ведет с архивами и с пост запросами на страницу? 0

@peter_irich 366 / 222 / 53 Регистрация: 18.10.2017 Сообщений: 2,359
	25.12.2017, 20:32
	Вы бы лучше полностью показали команды, которыми вызывается wget. Я ни разу не использовал опцию "-q" и "nohup &", достаточно было "-b". И, наоборот, вывод wget у меня сохраняется в файле. Также мне никогда не приходилось задумываться о пост-запросах, опять же это можно посмотреть в выводе. wget просто качает, что или сколько ей указано. Страницы скачивает настолько усердно, что результат имеет размер десятки мегабайт, в зависимости от указанных опций. Так что покажите команды, тогда можно будет думать, что не так. Пётр. 0

@peter_irich 366 / 222 / 53 Регистрация: 18.10.2017 Сообщений: 2,359
	27.12.2017, 13:53
	Тут я помочь не смогу, т.к. никогда post-запросов не отправлял. Однако мне непонятно, зачем здесь "-O foo.html". Кроме того, лучше бы указать полностью адрес, с "http://" и т.д. Пётр. 0

@peter_irich 366 / 222 / 53 Регистрация: 18.10.2017 Сообщений: 2,359
	27.12.2017, 20:44
	PhpNewbie, Так возможно, что это ошибка на сайте, а не на вашей стороне. Тем более, если действительно обязательно указывать "-q", это же относится только к выводу в терминал. Пётр. 0

@peter_irich 366 / 222 / 53 Регистрация: 18.10.2017 Сообщений: 2,359
	28.12.2017, 09:43
	PhpNewbie, Для фонового режима достаточно "-b". Вообще сайты бывают разные, некоторые, например, не разрешают себя пинговать. Хорошо бы проверить на другом сайте, м.б. и на внутреннем, если его запустить, но этого я тоже никогда не делал. Пётр. 0

@peter_irich 366 / 222 / 53 Регистрация: 18.10.2017 Сообщений: 2,359
	28.12.2017, 18:05
	Мне тоже непонятно, почему в фоне работает, а будучи привязанным к терминалу - нет. "-b" только отсоединяет программу от терминала. Попробуйте без "-q" и сохранять вывод wget в log-файл, опция "-o", но вроде бы и без неё будет сохраняться в wget-log. Т.е. запускать с разными опциями и смотреть, что будет в log-файле. Пётр. 0