Форум программистов, компьютерный форум, киберфорум
Софт: Интернет и сеть, браузеры
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.50/4: Рейтинг темы: голосов - 4, средняя оценка - 4.50
3 / 3 / 2
Регистрация: 10.09.2013
Сообщений: 210

Скачивание веб-страниц (более 800) за один раз

10.01.2016, 14:29. Показов 907. Ответов 10
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Есть набор страниц вида
Каким образом сохранить их одной кучей, а не по отдельности?
Работоспособность ссылок (преврашение их в локальные) не требуется, нужно лишь содержимое (изображения), так что сохранять страницы по типу [ПКП]->[Сохранить как] вполне подходить, вопрос только в автоматизации повторения подобного на 800+ раз.
Пробовал HTTrack, но это совсем не то: адрес http://acomics.ru/~unsounded/ он скачивать не хочет, а вбивать по одной ссылке задолбаешься. Да и одну страницу он минуты две мурыжил - так и не сделал. Может это я такой валенок, не разобрался с настройками, но нужно что-то простое и быстро работающее.
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
10.01.2016, 14:29
Ответы с готовыми решениями:

Просмотр веб-страниц и скачивание файлов
Помогите, пожалуйста, создать программу в c#, с помощью которой можно будет просматривать веб-страницы и скачивать файлы из интернета,...

Асинхронное скачивание веб-страниц (познавательненько)
Доброго! Стоит задача выдрать информацию из очень большого количества страниц. Задачу упрощает то, что на эти страницы нужная инфа...

Как сделать один раз на 100 страниц?
Скажем у меня есть код гугла <script type="text/javascript"><!-- google_ad_client = "pub-8277403654566071"; google_ad_width =...

10
5987 / 4562 / 1096
Регистрация: 29.08.2013
Сообщений: 28,202
Записей в блоге: 3
11.01.2016, 11:20
wget?
0
3 / 3 / 2
Регистрация: 10.09.2013
Сообщений: 210
11.01.2016, 11:36  [ТС]
qwertehok, скачал - выдаёт ошибку с отсутствующим libeay32.dll; скачал и закинул его в директорию bin где wget.exe - консоль появляется и тут же исчезает, прочесть содержимое окна не представляется возможным.
0
5987 / 4562 / 1096
Регистрация: 29.08.2013
Сообщений: 28,202
Записей в блоге: 3
11.01.2016, 12:05
Монтгомери, а вы, мсье, знатный тролль

это вообще то консольная программа, ее нужно запускать с параметрами
для это откройте cmd, перейдите в папку где оно у вас лежит и запустите с параметром /?

про параметры вы знаете?
2
3 / 3 / 2
Регистрация: 10.09.2013
Сообщений: 210
11.01.2016, 12:24  [ТС]
qwertehok, не имел с ними дела до этого, сейчас попробую.

Добавлено через 16 минут
qwertehok, запустил, но вопрос теперь с параметрами.
wget.exe http://acomics.ru/~unsounded/
cкачивает только один index.html безо всякого содержимого.
Среди --help я ответа не нашёл.
0
5987 / 4562 / 1096
Регистрация: 29.08.2013
Сообщений: 28,202
Записей в блоге: 3
11.01.2016, 12:29
Монтгомери, теперь пишите bat\vbs\.. скрипт и вызывайте wget в цикле
0
3 / 3 / 2
Регистрация: 10.09.2013
Сообщений: 210
11.01.2016, 14:31  [ТС]
qwertehok, скачивает, да не то, что нужно. Скачалось даже ряд файлов с других комиксов, только не с того, который нужен.
Можете пример привести?
0
5987 / 4562 / 1096
Регистрация: 29.08.2013
Сообщений: 28,202
Записей в блоге: 3
11.01.2016, 14:59
Цитата Сообщение от Монтгомери Посмотреть сообщение
Можете пример привести?
вас в поиске забанили?
мне не платят за вашу работу
0
3 / 3 / 2
Регистрация: 10.09.2013
Сообщений: 210
11.01.2016, 18:15  [ТС]
qwertehok, а почему вы решили, что это работа?
Или по-вашему у кого-то может быть работой скачивание страниц комикса с сайта?

Ладно, возник другой вопрос: на сайте для комиксов с рейтингом Restricted (aka 17+) требуется нажать кнопку для подтверждения просмотра.
И вместо страницы комикса сохраняется страница, требующая подтверждения, т.к. адрес у них один.
В гугле ответа не нашёл.
0
5987 / 4562 / 1096
Регистрация: 29.08.2013
Сообщений: 28,202
Записей в блоге: 3
12.01.2016, 10:11
то есть вам требуется открыть браузер на каждую вашу картинку и кликнуть по кнопке?

попробуйте xStarter
1
3 / 3 / 2
Регистрация: 10.09.2013
Сообщений: 210
12.01.2016, 14:10  [ТС]
qwertehok, интересно, о таком типе программ ещё не слышал. Спасибо, сейчас попробую.
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
12.01.2016, 14:10
Помогаю со студенческими работами здесь

Найти вероятность того, что герб выпадет: 2 раза; не менее 2 раз; не более 2 раз; не менее одного и не более трех раз
Монету бросают 6 раз. Найти вероятность того, что герб выпадет: а) 2 раза; б) не менее 2 раз; в)не более 2 раз; г) не менее одного и не...

Как за один раз создать более одного запроса SQL
Как за один раз передать более двух запросов SQL, где то натыкался на подобную тему было написано что их нужно разделять точкой с запятой...

Вывод покупателей, купившие более 2х раз один и тот же продукт
Помогите с запросом нужно вывести покупателей, купившие более 2х раз один и тот же продукт вот мой вариант, но он считает в общем...

Найти все слова, в которых буква ”а” встречается более чем один раз
Помогите пожалуйста решить поставленную задачу. Дана строка, состоящая из слов, разделенных любым количеством пробелов. Напишите...

Подсчитать количество трехзначных чисел, в которых присутствует цифра 0 один или более раз
Помогите решить задачу, пожалуйста. Подсчитать количество трехзначных чисел, в которых присутствует цифра 0 один или более раз


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
11
Ответ Создать тему
Новые блоги и статьи
Настройки VS Code
Loafer 13.04.2026
{ "cmake. configureOnOpen": false, "diffEditor. ignoreTrimWhitespace": true, "editor. guides. bracketPairs": "active", "extensions. ignoreRecommendations": true, . . .
Оптимизация кода на разграничение прав доступа к элементам формы
Maks 13.04.2026
Алгоритм из решения ниже реализован на нетиповом документе, разработанного в конфигурации КА2. Задачи, как таковой, поставлено не было, проделанное ниже исключительно моя инициатива. Было так:. . .
Контроль заполнения и очистка дат в зависимости от значения перечислений
Maks 12.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "ПланированиеПерсонала", разработанного в конфигурации КА2. Задача: реализовать контроль корректности заполнения дат назначения. . .
Архитектура слоя интернета для сервера-слоя.
Hrethgir 11.04.2026
В продолжение https:/ / www. cyberforum. ru/ blogs/ 223907/ 10860. html Знаешь что я подумал? Раз мы все источники пишем в голове ветки, то ничего не мешает добавить в голову такой источник, который сам. . .
Подстановка значения реквизита справочника в табличную часть документа
Maks 10.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "ПланированиеПерсонала", разработанного в конфигурации КА2. Задача: при выборе сотрудника (справочник Сотрудники) в ТЧ документа. . .
Очистка реквизитов документа при копировании
Maks 09.04.2026
Алгоритм из решения ниже применим как для типовых, так и для нетиповых документов на самых различных конфигурациях. Задача: при копировании документа очищать определенные реквизиты и табличную. . .
модель ЗдравоСохранения 8. Подготовка к разному выполнению заданий
anaschu 08.04.2026
https:/ / github. com/ shumilovas/ med2. git main ветка * содержимое блока дэлэй из старой модели теперь внутри зайца новой модели 8ATzM_2aurI
Блокировка документа от изменений, если он открыт у другого пользователя
Maks 08.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа, разработанного в конфигурации КА2. Задача: запретить редактирование документа, если он открыт у другого пользователя. / / . . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru