Скачивание множества html страниц

@DarkJoker1992 · Регистрация: 19.02.2013

Студворк — интернет-сервис помощи студентам

Добрый день, подскажите как с помощью vbs скачать html страницы? (что бы я указал txt в котором собственно linkн на скачку)

@ComSpec · 14.06.2015, 10:25

DarkJoker1992, всё зависит от выбора Вами имён файлов, в которые будут сохраняться скачиваемые страницы.

Если ссылки в Вашем текстовом файле (назовём его "list.txt") будут иметь примерно такой вид:

Code
https://www.cyberforum.ru/vbscript-wsh/thread1477566.html
https://www.cyberforum.ru/vbscript-wsh/thread1477490.html
https://www.cyberforum.ru/vbscript-wsh/thread1476279.html

,

то предложу такой код BAT-файла:

Windows Batch file
1
@powershell "gc 'list.txt'|%%{(New-Object System.Net.WebClient).DownloadFile($_,$_ -replace '^.*/')}"

.

Страницы по этим ссылкам будут сохранены в файлы соответственно с именами по умолчанию

thread1477566.html

,

thread1477490.html

,

thread1476279.html

в директорию, из которой запущен пакетный файл.

Если же ссылки будут иметь какой-нибудь другой вид, то тогда приведите эти ссылки, и будем применять, как говорится, творческий подход

.

greg zakharov · 14.06.2015, 10:53

Пример файла URL'ов foo.txt:

Code
1
2
https://technet.microsoft.com/en-us/sysinternals/bb842062.aspx
http://www.piriform.com/ccleaner/builds

Пример сохранялки wget.vbs:

Code
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
Dim of, cf, lin, arr, out
Dim req : Set req = CreateObject("WinHTTP.WinHTTPRequest.5.1")
 
With CreateObject("Scripting.FileSystemObject")
  Set of = .OpenTextFile("foo.txt", 1)
  
  Do While of.AtEndOfStream <> True
    lin = of.ReadLine
    arr = Split(lin, "/")
    out = arr(UBound(arr))
    
    If InStr(out, ".") = 0 Then
      out = out & ".html"
    Else
      out = Split(out, ".")(0) & ".html"
    End If
    
    req.Open "GET", lin, False
    req.Send
    
    Set cf = .CreateTextFile(out, True)
    cf.Write req.ResponseText
    cf.Close
  Loop
  
  of.Close
End With

@DarkJoker1992 · 14.06.2015, 18:11 **[ТС]**

Сообщение от ComSpec

@powershell "gc 'list.txt'|%%{(New-Object System.Net.WebClient).DownloadFile($_,$_ -replace '^.*/')}"

скажите а можно как то ускорить скачку? что бы скачивал на по 1 файлу, а у несколько потоков, желательно от 5 -до 20 потоков.

Новые блоги и статьи Все статьи Все блоги /
Модель ЗдрввоСохранения 7: больше работников, больше ресурсов. anaschu 08.04.2026 работников и заданий может быть сколько угодно, но настроено всё так, что используется пока что только 20%	Дальние перспективы сервера - слоя сети с космологическим дизайном интефейса карты и логики. Hrethgir 07.04.2026 Дальнейшее ближайшее планирование вывело к размышлениям над дальними перспективами. И вот тут может быть даже будут нужны оценки специалистов, так как в дальних перспективах всё может очень сильно. . .	Горе от ума kumehtar 07.04.2026 Эта мне ментальная установка, что вот прямо сейчас, мол, мне для полного счастья не хватает (нужное вписать), и когда я этого достигну - тогда и полный кайф. Одна из самых сильных ловушек на пути. . . .	Использование значений реквизитов справочника в документе, с определенными условиями и правами Maks 07.04.2026 1. Контроль срока действия договора Алгоритм из решения ниже реализован на примере нетипового документа "ЗаявкаНаРаботу", разработанного в конфигурации КА2. Задача: уведомлять пользователя, если. . .
Доступность команды формы по условию Maks 07.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: сделать доступной кнопку (команда формы "ЗавершитьСписание") при. . .	Уведомление о неверно выбранном значении справочника Maks 06.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "НарядПутевка", разработанного в конфигурации КА2. Задача: уведомлять пользователя, если в документе выбран неверный склад. . .	Установка Qt Creator для C и C++: ставим среду, CMake и MinGW без фреймворка Qt 8Observer8 05.04.2026 Среду разработки Qt Creator можно установить без фреймворка Qt. Есть отдельный репозиторий для этой среды: https:/ / github. com/ qt-creator/ qt-creator, где можно скачать установщик, на вкладке Releases:. . .	AkelPad-скрипты, структуры, и немного лирики.. testuser2 05.04.2026 Такая программа, как AkelPad существует уже давно, и также давно существуют скрипты под нее. Тем не менее, прога живет, периодически что-то не спеша дополняется, улучшается. Что меня в первую очередь. . .

@DarkJoker1992 148 / 4 / 0 Регистрация: 19.02.2013 Сообщений: 369

	VBS Скачивание множества html страниц 14.06.2015, 00:42. Показов 7874. Ответов 3 Метки нет (Все метки) Добрый день, подскажите как с помощью vbs скачать html страницы? (что бы я указал txt в котором собственно linkн на скачку) 0

Скачивание множества html страниц

Решение