Аватар для MeteorNEO
2 / 2 / 0
Регистрация: 20.04.2013
Сообщений: 15

Получен код другой страницы через WebClient

24.10.2016, 23:26. Показов 1002. Ответов 6
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Visual Studio 2008. Windows XP, SP-2. Написал небольшую программку для чтения кода html страницы, а именно https://www.gismeteo.ru/city/legacy/4392/. Код чтения:
C#
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
ServicePointManager.ServerCertificateValidationCallback = delegate { return true; };//обход подлинности сертификата
byte[] response = null;
 
string str = "";
using (WebClient client = new WebClient()) // WebClient class inherits IDisposable
{
    try
    {
        response = client.DownloadData("https://www.gismeteo.ru/city/legacy/4392/");
        str = System.Text.Encoding.UTF8.GetString(response);
    }
    catch (WebException ex)
    {
        Logging("Network error: " + ex.Message + " - ");
    }
    catch (Exception exception)
    {
        Logging(exception.Message + " - ");
    }
}
И всё вроде бы нормально было. А вот сегодня заметил(запускаю каждый день утром), что внезапно получил код другой страницы. Полазив по сайту, пришёл к выводу, что прочитался код https://beta.gismeteo.ru/weather-tula-4392/ (не отформатированный код только там обнаружил, не говоря уже о некоторых строках). Изучаю недавно. При тестах последующие 5 часов такого не наблюдалось. В результате чего могло такое произойти?
P.S. Читал в ветке Как WebClient представляется серверу?, что заголовок заполнять не обязательно, да и тут тоже https://msdn.microsoft.com/ru-... .110).aspx. Он заполняется, когда нужна версия страницы от определенного браузера?
0
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
24.10.2016, 23:26
Ответы с готовыми решениями:

WebClient не получает исходный код страницы
вроде все работает норм... но на странице www.maultalk.com/ptopic96877.html происходит что не понятное... Никаких ошибок, просто попытка...

WebClient неправильно скачивает код страницы
пишу парсер новостей Яндекса. Необходимо скачать код страници, и он вроди бы скачивается но неправильно. код страници с яндекса совсем не...

Вызов другой страницы через <!--#include ... >
Привет. Помогите. Есть такой код в странице index.asp: &lt;!--#include file='getpage.asp' --&gt; на странице getpage.asp код...

6
Администратор
Эксперт .NET
 Аватар для OwenGlendower
18308 / 14232 / 5368
Регистрация: 17.03.2014
Сообщений: 28,904
Записей в блоге: 1
24.10.2016, 23:56
MeteorNEO, почему это могло произойти сказать трудно, но заголовок User-Agent лучше указывать всегда.
0
 Аватар для MeteorNEO
2 / 2 / 0
Регистрация: 20.04.2013
Сообщений: 15
25.10.2016, 10:06  [ТС]
Цитата Сообщение от OwenGlendower Посмотреть сообщение
MeteorNEO, почему это могло произойти сказать трудно, но заголовок User-Agent лучше указывать всегда.
А если не указывать User-Agent, как тогда берется информация WebClient'ом с сервера?
0
 Аватар для BearBaloo
41 / 41 / 16
Регистрация: 04.10.2016
Сообщений: 154
25.10.2016, 11:17
вы можете вообще почти не отсылать заголовков, просто как без заголовков воспримет сервер ваш запрос это другой вопрос, возможно на сайте есть какие то специальные параметры которые нужны для отображения именно той инфомрации которую вы хотите.
По Вашему вопросу как такое могло случится, был редирект и ваш веб клиент его обработал...
0
Администратор
Эксперт .NET
 Аватар для OwenGlendower
18308 / 14232 / 5368
Регистрация: 17.03.2014
Сообщений: 28,904
Записей в блоге: 1
25.10.2016, 11:22
MeteorNEO, как обычно. Клиент отправляет запрос, сервер отвечает. Наличие или отсутствие User-Agent на это не влияет. Зато он может повлиять на содержимое ответа сервера. Некоторые сайты вообще не принимают запрос без use-agent, другие отдают отличающийся ответ.
0
 Аватар для MeteorNEO
2 / 2 / 0
Регистрация: 20.04.2013
Сообщений: 15
25.10.2016, 14:40  [ТС]
Цитата Сообщение от OwenGlendower Посмотреть сообщение
MeteorNEO, как обычно. Клиент отправляет запрос, сервер отвечает. Наличие или отсутствие User-Agent на это не влияет. Зато он может повлиять на содержимое ответа сервера. Некоторые сайты вообще не принимают запрос без use-agent, другие отдают отличающийся ответ.
А как лучше подобрать клиент, определить свой?
0
Администратор
Эксперт .NET
 Аватар для OwenGlendower
18308 / 14232 / 5368
Регистрация: 17.03.2014
Сообщений: 28,904
Записей в блоге: 1
25.10.2016, 14:42
MeteorNEO, на этот счет нет определенных правил. Название своей программы с номером версии это хороший вариант.
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
25.10.2016, 14:42
Помогаю со студенческими работами здесь

Как скачивать несколько файлов через WebClient по очереди, через DownloadFileAsync
Доброй ночи. Столкнулся с проблемой по скачиванию нескольких файлов друг за другом. Фулл код как скачиваю: void DownloadMPQ(Uri u,...

Авторизоваться на сайте через WebBrowser и работать на нем через WebClient
Я тут подумал, можно ли сделать так: авторизоваться через веббраузер и после этого работать на сайте (на котором я авторизовался) через...

Как проверить тип переменный, который получен через cin?
Вообще как можно реализовать, чтобы юзер набрал число с типом десятичной или вещественного типа. Надо у знать что за тип, чтобы впихать...

Как проверить тип переменный, который получен через cin?
Вообще как можно реализовать, чтобы юзер набрал число с типом десятичной или вещественного типа. Надо у знать что за тип, чтобы впихать...

WebClient.DownloadString возвращает не всё содержимое страницы
Есть html страничка ... &lt;surf:container id=&quot;id1&quot;&gt; .... &lt;/surf:container&gt; ... Метод DownloadString у...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
7
Ответ Создать тему
Опции темы

Новые блоги и статьи
Отчёт о затраченных материалах за определенный период с макетом печатной формы
Maks 21.04.2026
Отчёт из решения ниже размещён в конфигурации КА2. Задача: показать затраченные материалы за определённый период, с возможностью вывода печатной формы отчёта с шапкой и подвалом. В качестве. . .
Отчёт о спецтехнике находящейся в ремонте
Maks 20.04.2026
Отчёт из решения ниже размещен в конфигурации КА2. Задача: отобразить спецтехнику, которая на данный момент находится в ремонте. Есть нетиповой документ "Заявка на ремонт спецтехники" который. . .
Памятка для бота и "визитка" для читателей "Semantic Universe Layer (Слой семантической вселенной)"
Hrethgir 19.04.2026
Сгенерировано для краткого описания по случаю сборки и компиляции скелета серверного приложения. И пусть после этого скажут, что статьи сгенерированные AI - туфта и не интересно. И это не реклама -. . .
Запрет удаления строк ТЧ документа при определённом условии
Maks 19.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "Аккумуляторы", разработанного в конфигурации КА2. У данного документа есть ТЧ, в которой в зависимости от прав доступа. . .
Модель заражения группы наркоманов
alhaos 17.04.2026
Условия задачи сформулированы тут Суть: - Группа наркоманов из 10 человек. - Только один инфицирован ВИЧ. - Колются одной иглой. - Колются раз в день. - Колются последовательно через. . .
Мысли в слух. Про "навсегда".
kumehtar 16.04.2026
Подумалось тут, что наверное очень глупо использовать во всяких своих установках понятие "навсегда". Это очень сильное понятие, и я только начинаю понимать край его смысла, не смотря на то что давно. . .
My Business CRM
MaGz GoLd 16.04.2026
Всем привет, недавно возникла потребность создать CRM, для личных нужд. Собственно программа предоставляет из себя базу данных клиентов, в которой можно фиксировать звонки, стадии сделки, а также. . .
Знаешь почему 90% людей редко бывают счастливыми?
kumehtar 14.04.2026
Потому что они ждут. Ждут выходных, ждут отпуска, ждут удачного момента. . . а удачный момент так и не приходит.
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru