Создать http запрос используя socket

@Albaz · Регистрация: 31.05.2013

Студворк — интернет-сервис помощи студентам

Как используя только socket-либ создать полноценный заголовок - протокол, юзерагент и тд... В общем, интересуют только низкоуровневые варианты.

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
import socket
 
sock = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
print socket.gethostbyname('2ip.ru')
print socket.gethostbyaddr('127.0.0.1')
sock.connect(('2ip.ru', 80))
sock.send("HEAD / HTTP/1.0\n") # вот тут тормозит
 
data = sock.recv(1024)
sock.close()
 
udata = data.decode("utf-8")
print udata
input()

Добавлено через 7 часов 37 минут
В общем все дело в

Python
1
("\r\n")

, вернее в

Python
1
sock.send("\r\n")

Но почему-то косо работает, зависит от

Python
1
sock.send("Host: google.ru \r\n")

Код:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
import socket
 
sock = socket.socket()
print socket.gethostbyname('2ip.ru')
print socket.gethostbyaddr('127.0.0.1')
sock.connect(('google.ru', 80))
sock.send("GET / HTTP/1.1 \r\n")
sock.send("Accept: */*")
sock.send("Accept-Language: ru \r\n")
sock.send("User-Agent: HTTPClient \r\n")
#sock.send("Host: google.ru \r\n")
sock.send("\r\n")
data = sock.recv(1024)
sock.close()
 
udata = data.decode("utf-8")
print udata
input()

выдает в консоли:

Bash
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
HTTP/1.1 302 Found
 
Cache-Control: private
 
Content-Type: text/html; charset=UTF-8
 
Location: [url]http://www.google.ru/?gfe_rd=cr&ei=dQGSWMOXEs3EZMzrlYgJ[/url]
 
Content-Length: 256
 
Date: Wed, 01 Feb 2017 15:40:37 GMT
 
 
 
<HTML><HEAD><meta http-equiv="content-type" content="text/html;charset=utf-8">
<TITLE>302 Moved</TITLE></HEAD><BODY>
<H1>302 Moved</H1>
The document has moved
<A HREF="http://www.google.ru/?gfe_rd=cr&amp;ei=dQGSWMOXEs3EZMzrlYgJ">here</A>.
 
</BODY></HTML>

Если же включить

Python
1
sock.send("Host: google.ru \r\n")

, то итог в ссылке будет иным.
Вот какой скрипт:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
import socket
 
sock = socket.socket()
print socket.gethostbyname('2ip.ru')
print socket.gethostbyaddr('127.0.0.1')
sock.connect(('google.ru', 80))
sock.send("GET / HTTP/1.1 \r\n")
sock.send("Accept: */*")
sock.send("Accept-Language: ru \r\n")
sock.send("User-Agent: HTTPClient \r\n")
sock.send("Host: google.ru \r\n")
sock.send("\r\n")
data = sock.recv(1024)
sock.close()
 
udata = data.decode("utf-8")
print udata
input()

дает итог:

Bash
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
HTTP/1.1 301 Moved Permanently
 
Location: [url]http://www.google.ru/[/url]
 
Content-Type: text/html; charset=UTF-8
 
Date: Wed, 01 Feb 2017 15:47:33 GMT
 
Expires: Fri, 03 Mar 2017 15:47:33 GMT
 
Cache-Control: public, max-age=2592000
 
Server: gws
 
Content-Length: 218
 
X-XSS-Protection: 1; mode=block
 
X-Frame-Options: SAMEORIGIN
 
 
 
<HTML><HEAD><meta http-equiv="content-type" content="text/html;charset=utf-8">
<TITLE>301 Moved</TITLE></HEAD><BODY>
<H1>301 Moved</H1>
The document has moved
<A HREF="http://www.google.ru/">here</A>.
 
</BODY></HTML>

Т.е. меняется ссылка

HTML5
1
<A HREF="http://www.google.ru/">here</A>

на

HTML5
1
<A HREF="http://www.google.ru/?gfe_rd=cr&amp;ei=dQGSWMOXEs3EZMzrlYgJ">here</A>

Ну и в любом случае, полноценную страницу № 200 так и не удается получить...

Да, и из аргумента

Python
1
sock = socket.socket()

выкинул всякие там

Python
1
(socket.AF_INET, socket.SOCK_STREAM)

без к-либо изменений. Почему?

@Albaz · 02.02.2017, 22:07 **[ТС]**

Что то тихо совсем))
Порассуждаем сам - на -сам))
Что то и с почтой не получается...

Python
1
2
3
4
5
6
7
8
9
10
import socket
 
sock = socket.socket()
sock.connect(('pop3.mail.ru', 110))
sock.send("\r\n")
data = sock.recv(1024)
udata = data.decode("utf-8")
print udata
sock.close()
input()

Результат:

Bash
1
2
>>> 
+OK

Очень скромненький, хотя и положительный... А дальше никакие команды USER PASS не работают((

@Avazart · 03.02.2017, 21:19

Не по теме:

Сообщение от Albaz

Что то тихо совсем))

Во первых через сокеты это изврат, во вторых у вас репа минусовая так что не удивляйтесь.

@null_0 · 12.02.2017, 21:04

Avazart,

Сообщение от Avazart

через сокеты это изврат

А через что, простите?

@Avazart · 12.02.2017, 21:25

Сообщение от null_0

А через что, простите?

requests, curl ?

@Вованя · 18.02.2017, 17:54

Albaz, RFC SNMP, RFC HTTP

Новые блоги и статьи Все статьи Все блоги /
делаю науч статью по влиянию грибов на сукцессию anaschu 13.03.2026 прикрепляю статью	SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++ 8Observer8 10.03.2026 Содержание блога Финальные проекты на Си и на C++: hello-sdl3-c. zip hello-sdl3-cpp. zip Результат:	Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE 8Observer8 10.03.2026 Содержание блога MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .	Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки Neotwalker 08.03.2026 Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .
Модульная разработка через nuget packages DevAlt 07.03.2026 Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .	Модульный подход на примере F# DevAlt 06.03.2026 В блоге дяди Боба наткнулся на такое определение: В этой книге («Подход, основанный на вариантах использования») Ивар утверждает, что архитектура программного обеспечения — это структуры,. . .	Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование 8Observer8 05.03.2026 Содержание блога Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .	SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D 8Observer8 04.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip На первой гифке отладочные линии отключены, а на второй включены:. . .

@Вованя 153 / 148 / 66 Регистрация: 20.02.2014 Сообщений: 556
	18.02.2017, 17:54
	Albaz, RFC SNMP, RFC HTTP 0