Форум программистов, компьютерный форум, киберфорум
C# .NET
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.57/7: Рейтинг темы: голосов - 7, средняя оценка - 4.57
 Аватар для montanaPy
3 / 2 / 6
Регистрация: 19.01.2015
Сообщений: 125

Сайт постоянно грузится. Как сделать получение ответа не дожидаясь загрузки до конца?

17.08.2015, 19:15. Показов 1544. Ответов 2
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Доброго времени суток. После нескольких действий вываливается исключение
Code
1
2
3
An unhandled exception of type 'System.Net.WebException' occurred in System.dll
 
Additional information: The operation has timed out
Действия выполняются, но четко только первые два. Остальные как повезет. Сайт постоянно обновляется в браузере. Для отправки следующего запроса с параметрами мне не удается получить ответ от сервера. Как все таки получить ответ в виде html. Может быть есть такое что получать не дожидаясь загрузки....
C#
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
    class Program
    {
        static void Main(string[] args)
        {
            CookieContainer testcook = new CookieContainer();
 
            Kissmia test = new Kissmia();
 
            testcook = test.authorize("*****", "*****");
            
            int i = 0;
            while (i < 200)
            {
                //Thread.Sleep(1 * 60 * 1000);
                test.matches(testcook, "maybe");
                //Thread.Sleep(1 * 60 * 1000);
                test.matches(testcook, "yes");
                test.testCooki(testcook);
                i += 1;
            }        
        }
 
        class Kissmia
        {
            int unixTime = (int)(DateTime.UtcNow - new DateTime(1970, 1, 1)).TotalSeconds;
             
            CookieContainer cookies = new CookieContainer();
            CookieContainer cookies2 = new CookieContainer();
 
            public CookieContainer authorize(string login, string password)
            {
                HttpWebRequest req = (HttpWebRequest)HttpWebRequest.Create("http://kismia.ru/sign/in");
                req.CookieContainer = cookies;
                req.KeepAlive = true;
                req.UserAgent = "Mozilla/5.0 (Windows NT 6.1; rv:38.0) Gecko/20100101 Firefox/38.0";
                req.AllowAutoRedirect = false;              
                req.ContentType = "application/x-www-form-urlencoded";
                req.KeepAlive = true;
                req.Accept = "text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8";
                req.ContentType = "application/x-www-form-urlencoded";
                byte[] dataStream = Encoding.UTF8.GetBytes(String.Format("email={0}&password={1}", login, password));
 
                req.ContentLength = dataStream.Length;
                req.Method = WebRequestMethods.Http.Post;
 
                Stream Stream = req.GetRequestStream();
                Stream.Write(dataStream, 0, dataStream.Length);
                Stream.Close();
 
                HttpWebResponse response = (HttpWebResponse)req.GetResponse();
                
                using (StreamReader sr = new StreamReader(response.GetResponseStream()))
                {
                    string text = sr.ReadToEnd();
 
                    System.IO.File.WriteAllText(@"WriteText.html", text);
                }
                
                _BugFix_CookieDomain(cookies);
                cookies2 = cookies;
 
                return cookies2;
 
            }
            /// <summary>
            /// Получаем страницу с оценкой пользователей.
            /// </summary>
            public void matches(CookieContainer coock, string selectionTrue)
            {
                string userId = String.Empty;
                string text = String.Empty;
 
                HtmlAgilityPack.HtmlDocument HD = new HtmlAgilityPack.HtmlDocument();
 
 
                HttpWebRequest req = (HttpWebRequest)HttpWebRequest.Create("http://www.kismia.ru/matches");
                req.CookieContainer = coock;
                      
 
                req.Method = WebRequestMethods.Http.Get;              
                req.Proxy = null;
                ServicePointManager.DefaultConnectionLimit = 6;
                req.Timeout = 100000;
                
                try {                   
                     using (WebResponse response = req.GetResponse())
                    {
                        using (StreamReader sr = new StreamReader(response.GetResponseStream()))
                        {
                            text = sr.ReadToEnd();
 
                            System.IO.File.WriteAllText(@"matches.html", text);
                        }
                           var web = new HtmlWeb
                           {
                                AutoDetectEncoding = true,
                                OverrideEncoding = Encoding.UTF8,
                      };
                    // HD = web.Load(text);
                    HD.LoadHtml(text);
                    HtmlNode IEWSTATE = HD.DocumentNode.SelectSingleNode(".//*[@id='content']/div[2]/div[1]/div");
                    HtmlAttribute valueVIEWSTATE = IEWSTATE.Attributes["data-user_id"];
                    userId = valueVIEWSTATE.Value;
 
                    HttpWebRequest reqLike = (HttpWebRequest)HttpWebRequest.Create(String.Format("http://kismia.ru/matches?{1}={0}&reply=0", userId, selectionTrue));
                    reqLike.CookieContainer = coock;
                    reqLike.Method = WebRequestMethods.Http.Get;
                    HttpWebResponse responseLike = (HttpWebResponse)reqLike.GetResponse();
 
                    Console.WriteLine("Like - " + userId);
 
                    response.Close();
                }
                    }
                catch
                {
                    HttpWebRequest reqs = (HttpWebRequest)HttpWebRequest.Create("http://www.kismia.ru/matches");
                    reqs.CookieContainer = coock;
 
 
                    reqs.Method = WebRequestMethods.Http.Get;
                    reqs.Proxy = null;
                    ServicePointManager.DefaultConnectionLimit = 6;
                    reqs.Timeout = 100000;
                }
 
                req.Abort();
 
                //_BugFix_CookieDomain(cookies);
            }
            public void testCooki(CookieContainer coock)
            {
                HttpWebRequest req = (HttpWebRequest)HttpWebRequest.Create("http://www.kismia.ru/matches");
                req.CookieContainer = coock;
                req.Method = WebRequestMethods.Http.Get;
                req.Proxy = null;
                ServicePointManager.DefaultConnectionLimit = 6;
                req.Timeout = 100000;
 
                WebResponse response = req.GetResponse();
 
            }
 
            //http://kismia.ru/matches?maybe=13033319&reply=0 Возможно 
            //http://kismia.ru/matches?no=12963392&reply=0 Точно нет
            //http://kismia.ru/matches?yes=13024190&reply=0 Да
 
            public void _BugFix_CookieDomain(CookieContainer cookieContainer)
            {
                System.Collections.Hashtable table = (System.Collections.Hashtable)cookieContainer.GetType().InvokeMember("m_domainTable",
                    System.Reflection.BindingFlags.NonPublic |
                    System.Reflection.BindingFlags.GetField |
                    System.Reflection.BindingFlags.Instance,
                    null,
                    cookieContainer,
                    new object[] { }
                );
 
                System.Collections.ArrayList keys = new System.Collections.ArrayList(table.Keys);
                foreach (string keyObj in keys)
                {
                    string key = (keyObj as string);
                    if (key[0] == '.')
                    {
                        string newKey = key.Remove(0, 1);
                        table[newKey] = table[keyObj];
                    }
                }
            }
        }
 
 
    }
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
17.08.2015, 19:15
Ответы с готовыми решениями:

Как выполнять процедуры, не дожидаясь конца предыдущей
Как выполнять процедуры, не дожидаясь конца предыдущей? Как имитировать передвижение не используя cls. Как вставлять картинки, звуки, и...

Отправка текста на сайт получение ответа
Можно ли сделать так: Чтобы потльзователь вводил текст,т е какую-нибудь строку,например 2+2,программа отправляла этот текст на опред...

Отправка Post запроса на сайт и получение ответа
Здравствуйте. Помогите решить такую проблему: есть сайт на котором всего одно поле для ввода. в которое нужно записать пароль чтобы...

2
 Аватар для m0nax
1274 / 975 / 113
Регистрация: 12.01.2010
Сообщений: 1,971
17.08.2015, 22:35
думал в сказку попал чтоль?) лепи задержки, ограничивай соединения до 1-2
сайтовладельцы на дух не переносят парсеров и ботов, порой и вовсе грозят законодательными мерами, ибо толку с ботов 0, а ресурсы жрутся на всю катушку
радуйся что капчу не спрашивает как это делают серьезные ресурсы

если содержимое страницы не нужно вообще(только заголовки) есть HEAD запросы
0
 Аватар для montanaPy
3 / 2 / 6
Регистрация: 19.01.2015
Сообщений: 125
20.08.2015, 10:53  [ТС]
Благодарю за совет. Все таки на python переделал. С request и lxml. На C# че т не могу догнать где не прав... Все тоже самое только ответ не получаю долго... хз короче в чем причина. Все те же самые запросы подставил и все окай работает на python. Люди добрые объясните в чем причина кроется? Какую опцию надо еще прописать, чтобы заработало нормально на C# ?
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
20.08.2015, 10:53
Помогаю со студенческими работами здесь

После загрузки Windows постоянно открывается сайт
Добрый день. После того как загружаю систему и пытаюсь войти в Opera постоянно открывается один и тот же сайт .spinyla2.ru. Помогите...

Нужен примерный код отправки GET и POST запросов на сайт, и получение ответа
Люди помогите пожалуйста, можете показать примерный код отправки GET и POST запросов на сайт, и получение ответа, заранее спасибо!

Как начать воспроизведение до конца загрузки и декодирования музыки
Доброго времени суток. Пробую разобраться в Audio API, возник такой вопрос как начать воспроизведение до конца загрузки и декодирования...

Не до конца грузится Винда
Грузится, потом осуществляешь вход wINDOWS,звучит фоновая музыка, появляется рисунок рабочего стола и все. Безопасный не грузится т.к....

Не до конца грузится Windows 7
Здравствуйте, товарищи! У знакомых столкнулся с проблемой - семерка загружается как-будто не до конца: проходят все загрузочные анимации,...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
3
Ответ Создать тему
Новые блоги и статьи
SDL3 для Desktop (MinGW): Рисуем цветные прямоугольники с помощью рисовальщика SDL3 на Си и C++
8Observer8 17.03.2026
Содержание блога Финальные проекты на Си и на C++: finish-rectangles-sdl3-c. zip finish-rectangles-sdl3-cpp. zip
Символические и жёсткие ссылки в Linux.
algri14 15.03.2026
Существует два типа ссылок — символические и жёсткие. Ссылка в Linux — это запись в каталоге, которая может указывать либо на inode «файла-ИСТОЧНИКА», тогда это будет «жёсткая ссылка» (hard link),. . .
[Owen Logic] Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора
ФедосеевПавел 14.03.2026
Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора ВВЕДЕНИЕ Выполняя задание на управление насосной группой заполнения резервуара,. . .
делаю науч статью по влиянию грибов на сукцессию
anaschu 13.03.2026
прикрепляю статью
SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++
8Observer8 10.03.2026
Содержание блога Финальные проекты на Си и на C++: hello-sdl3-c. zip hello-sdl3-cpp. zip Результат:
Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE
8Observer8 10.03.2026
Содержание блога MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .
Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки
Neotwalker 08.03.2026
Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .
Модульная разработка через nuget packages
DevAlt 07.03.2026
Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru