Браузер - не браузер. Загружатель html страничек

@Валеркуй · Регистрация: 17.06.2013

Студворк — интернет-сервис помощи студентам

Всем привет, в обще такое дело, нужно симулировать работу браузера, но на самом деле прога браузером не будет.
В чем суть, хочу просто по протоколу tcp/ip загружать тело html документа, не загружая картинки и прочую css хрень.
И все тело документа должно сохранится в String переменную. И да, нужно еще что-то для сохранения post и get переменных, чтобы каждый раз на страницу авторизации не выкидывало.

Рыжий Лис · 05.06.2015, 16:04

Сообщение от Валеркуй

протоколу tcp/ip

Там HTTP

Используйте сокеты. Открываете сокет до нужного сервера (порт 80) и отправляете строку вида:

C++
1
"GET / HTTP/1.1\r\nHost: ya.ru\r\nUser-Agent: Mozilla/5.0 (X11; Linux i686 on x86_64; rv:24.0) Gecko/20100101 Firefox/24.0\r\nConnection: close\r\n\r\n

И принимаете данные. В принятых данных ищете подстроку "\r\n\r\n" и удаляете HTTP-заголовок

Добавлено через 2 минуты

Сообщение от Валеркуй

чтобы каждый раз на страницу авторизации не выкидывало.

для авторизации используются куки, они содержатся в заголовках

@Валеркуй · 05.06.2015, 16:23 **[ТС]**

Спасибо дружище! Получилось!!! Только на питоне попробовал, но и на плюсах работать будет.
Только вот с буфером что делать... его же бесконечным не сделаешь

@Kastaneda · 05.06.2015, 22:17

Сообщение от Валеркуй

Только вот с буфером что делать... его же бесконечным не сделаешь

1. Можно читать в динамический буфер какой-нибудь. Не думаю, что html файл будет больше размера оперативки.
2. Можно читать хоть по 1 байту, каждый раз скидывая этот байт на диск.

Сообщение от Рыжий Лис

Там HTTP

Ну чисто технически данные приходят по TCP/IP

@Валеркуй · 06.06.2015, 11:04 **[ТС]**

Сообщение от Kastaneda

Можно читать хоть по 1 байту

Я так и сделал) Правда не на с++, а на питоне, все равно у них сокеты одинаковые... Там просто нужно разобраться в заголовках кто что передает. Например для картинки там совсем другой заголовок нужен... Про tcp это мы знаем.

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Web (WebAssembly): Реализация движения на Box2D v3 - трение и коллизии с повёрнутыми стенами 8Observer8 20.02.2026 Содержание блога Box2D позволяет легко создать главного героя, который не проходит сквозь стены и перемещается с заданным трением о препятствия, которые можно располагать под углом, как верхнее. . .	Конвертировать закладки radiotray-ng в m3u-плейлист damix 19.02.2026 Это можно сделать скриптом для PowerShell. Использование . \СonvertRadiotrayToM3U. ps1 <path_to_bookmarks. json> Рядом с файлом bookmarks. json появится файл bookmarks. m3u с результатом. # Check if. . .	Семь CDC на одном интерфейсе: 5 U[S]ARTов, 1 CAN и 1 SSI Eddy_Em 18.02.2026 Постепенно допиливаю свою "многоинтерфейсную плату". Выглядит вот так: https:/ / www. cyberforum. ru/ blog_attachment. php?attachmentid=11617&stc=1&d=1771445347 Основана на STM32F303RBT6. На борту пять. . .	Камера Toupcam IUA500KMA Eddy_Em 12.02.2026 Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .
И ясному Солнцу zbw 12.02.2026 И ясному Солнцу, и светлой Луне. В мире покоя нет и люди не могут жить в тишине. А жить им немного лет.	«Знание-Сила» zbw 12.02.2026 «Знание-Сила» «Время-Деньги» «Деньги -Пуля»	SDL3 для Web (WebAssembly): Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 12.02.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами и вызывать обработчики событий столкновения. . . .	SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 11.02.2026 Содержание блога Библиотека SDL3 содержит встроенные инструменты для базовой работы с изображениями - без использования библиотеки SDL3_image. Пошагово создадим проект для загрузки изображения. . .

@Валеркуй 2 / 2 / 3 Регистрация: 17.06.2013 Сообщений: 122

	Браузер - не браузер. Загружатель html страничек 04.06.2015, 23:09. Показов 2146. Ответов 4 Метки нет (Все метки) Всем привет, в обще такое дело, нужно симулировать работу браузера, но на самом деле прога браузером не будет. В чем суть, хочу просто по протоколу tcp/ip загружать тело html документа, не загружая картинки и прочую css хрень. И все тело документа должно сохранится в String переменную. И да, нужно еще что-то для сохранения post и get переменных, чтобы каждый раз на страницу авторизации не выкидывало. 0

@Валеркуй 2 / 2 / 3 Регистрация: 17.06.2013 Сообщений: 122
	05.06.2015, 16:23 [ТС]
	Спасибо дружище! Получилось!!! Только на питоне попробовал, но и на плюсах работать будет. Только вот с буфером что делать... его же бесконечным не сделаешь 0

Браузер - не браузер. Загружатель html страничек

Решение