Получения кода сайта

@Sergey_1987 · Регистрация: 12.12.2016

Студворк — интернет-сервис помощи студентам

Здравствуйте.
Возник вопрос по получения кода сайта.
Раньше для этого я использовал код:

C#
1
2
3
4
5
6
7
8
9
10
11
12
            string url = "http://www.google.ru";
            string txt = String.Empty;
            WebRequest req = WebRequest.Create(url);
            WebResponse resp = req.GetResponse();
            using (Stream stream = resp.GetResponseStream())
            {
                using (StreamReader sr = new StreamReader(stream))
                {
                       // Получаем код для дальнейшего анализа                    
                       txt = sr.ReadToEnd();
                }
            }

Это очень распространненный пример, и он рабоает для многих сайтов.
Но недавно столкунулся, с тем что некоторые страницы сайты(например http://www.zakupki.gov.ru/epz/... 4916000011 ), при попытки их обрабоать таким кодом, выдают ошибку: “Удаленный сервер возвратил ошибку: (404) Не найден.”, хотя страница существует.
Сейчас я обрабатываю такие страницы, через webBrowser. Это работает, но имеет много минусов
Скажите можно как то получить код страниц : http://www.zakupki.gov.ru/epz/... 4916000011 или http://www.zakupki.gov.ru/epz/... d=30667963
,не прибегая к webBrowser.

@Usaga · 29.12.2016, 11:42

Sergey_1987, если сервер вернул тебе 404-й код, значит ты у него запросил то, чего у него нет.

@OwenGlendower · 29.12.2016, 12:14

Sergey_1987, нужно всего лишь соблюдать правила протокола HTTP и указать заголовок User-Agent

C#
1
2
HttpWebRequest req = (HttpWebRequest)WebRequest.Create(url);
req.UserAgent = "MyApp v1.3";

Новые блоги и статьи Все статьи Все блоги /
Модель заражения группы наркоманов alhaos 17.04.2026 Условия задачи сформулированы тут Суть: - Группа наркоманов из 10 человек. - Только один инфицирован ВИЧ. - Колются одной иглой. - Колются раз в день. - Колются последовательно через. . .	Мысли в слух. Про "навсегда". kumehtar 16.04.2026 Подумалось тут, что наверное очень глупо использовать во всяких своих установках понятие "навсегда". Это очень сильное понятие, и я только начинаю понимать край его смысла, не смотря на то что давно. . .	My Business CRM MaGz GoLd 16.04.2026 Всем привет, недавно возникла потребность создать CRM, для личных нужд. Собственно программа предоставляет из себя базу данных клиентов, в которой можно фиксировать звонки, стадии сделки, а также. . .	Знаешь почему 90% людей редко бывают счастливыми? kumehtar 14.04.2026 Потому что они ждут. Ждут выходных, ждут отпуска, ждут удачного момента. . . а удачный момент так и не приходит.
Фиксация колонок в отчете СКД Maks 14.04.2026 Фиксация колонок в СКД отчета типа Таблица. Задача: зафиксировать три левых колонки в отчете. Процедура ПриКомпоновкеРезультата(ДокументРезультат, ДанныеРасшифровки, СтандартнаяОбработка) / / . . .	Настройки VS Code Loafer 13.04.2026 { "cmake. configureOnOpen": false, "diffEditor. ignoreTrimWhitespace": true, "editor. guides. bracketPairs": "active", "extensions. ignoreRecommendations": true, . . .	Оптимизация кода на разграничение прав доступа к элементам формы Maks 13.04.2026 Алгоритм из решения ниже реализован на нетиповом документе, разработанного в конфигурации КА2. Задачи, как таковой, поставлено не было, проделанное ниже исключительно моя инициатива. Было так:. . .	Контроль заполнения и очистка дат в зависимости от значения перечислений Maks 12.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "ПланированиеПерсонала", разработанного в конфигурации КА2. Задача: реализовать контроль корректности заполнения дат назначения. . .

@Usaga 14316 / 9402 / 1355 Регистрация: 21.01.2016 Сообщений: 35,461
	29.12.2016, 11:42
	Sergey_1987, если сервер вернул тебе 404-й код, значит ты у него запросил то, чего у него нет. 0