По поводу get переменных в url и обработки их сервером

@Братуха · Регистрация: 15.07.2012

Студворк — интернет-сервис помощи студентам

здраствуйте, недавно решил заняться парсингом и вот стал вопрос у меня по поводу защит от парсинга есть url вида

HTML5
1
http://www.site.by/last_ar.html?ARDisabled=on&hl=15167154%2C15167143%2C15165359%2C15175714%2C15166549%2C15166552%2C15175619%2C15165356%2C15167137.&he=15167154,151671435356,15165359,15175714,15166549,15166552,15175619,15165356,1516713767137,15167143,15167154,15175619,15175714,&curs=0&curName=$

так вот время от времени ссылка меняет свой облик а именно &he= то точка это в нашем случае то - после переменой &he= могут переменные местами поменяны перед &curs= то есть запятая то нет и я не знаю какая закономерность и что это формирует.
Вопрос вот в чем ведь серверу без разницы какой адрес давать для него это просто переменные а вот эти точки тире он игнорирует вроде на прямую вводил данные получаются и вроде актуальные, какие последствия и могут ли вычислить то что бот делает запрос, очень часто страничку посещать надо. Спасибо большое

@53ifbb · 18.03.2016, 13:03

Братуха, посл. предложения выглядят как случайный набор слов. Вы может напишите с соблюдением грамматики их? И четко отдельным предложением сформируете вопрос ?

@useruser · 18.03.2016, 13:10

В вашем конкретном случае вам надо парсить

Сообщение от Братуха

http://www.site.by/last_ar.html?ARDisabled=on

или даже

Сообщение от Братуха

http://www.site.by/last_ar.html

Странно, что расширение html т.к. язык гипертекстовой разметки не может принять данные переданные методом GET.

@Братуха · 18.03.2016, 13:17 **[ТС]**

скажите для сервера есть разница получает он ссылку такого вида

HTML5
1
http://www.site.by/last_ar.html?ARDisabled=on&hl=15167154%2C15167143.&he=15175619,15175714,&curs=0&curName=$

или такого

HTML5
1
http://www.site.by/last_ar.html?ARDisabled=on&hl=15167154%2C15167143-&he=15175619,15175714&curs=0&curName=$

в первом случае перед &he= стоит (.) и перед &curs= стоит (,), а во втором случае перед &he= стоит (-) и перед &curs= ничего (). Cервер игнорирует эти точки и тире он только обращает внимание на переменные?

Добавлено через 4 минуты
useruser, это уже готовая ссылка я ее собирал из js вот и получился этот адрес. Я по нему прохожу и все нормально отображается, но вот с этими точками и тире проблема, я боюсь когда начну парсить меня забанить могу. А вот найти какой скрипт эти точки и тире меняет я не могу.

@useruser · 18.03.2016, 13:32

Сообщение от Братуха

useruser, это уже готовая ссылка я ее собирал из js

Хорошо, оставим в покое расширения.

Сообщение от Братуха

парсить меня забанить могут

Банят по ip адресам. Когда высокая нагрузка.

Сообщение от Братуха

А вот найти какой скрипт эти точки и тире меняет я не могу.

Точки тире и прочие непонятки...
Всё, что идет после знака ? - это параметры (значения) которые будут переданы скрипту методом гет
Знак & это начало нового параметра (объединение нескольких параметров)
Т.е. скрипт получит информацию параметр ARDisabled=on и hl=15167154%2C15167143- и he=15175619
В адресе управляющие символы только ? и & Т.е. запятые, точки, тире, буквы....-это данные.

HTML5
1
http://www.site.by/last_ar.html?ARDisabled=on&hl=15167154%2C15167143-&he=15175619

Скорее всего скрипт, при загрузке вычисляет что либо и добавляет параметры в адресную строку. Так делают многие скрипты. Похоже, он идентифицирует вас.

на вопрос

Сообщение от Братуха

скажите для сервера есть разница получает он ссылку такого вида

Сообщение от Братуха

или такого

не возможно ответить.
Неизвестно, что в коде скрипта. Может ему, при вычислении всё равно точка или тире. А может и нет.
Одно могу сказать точно - это два разных запроса. А разница в передаваемых параметрах. В одном случае точка, в другом тире.
Тире это не точка.

@Братуха · 18.03.2016, 13:47 **[ТС]**

понял дальше буду искать как и где и что образуется

@53ifbb · 18.03.2016, 20:50

Сообщение от useruser

Странно, что расширение html т.к. язык гипертекстовой разметки не может принять данные переданные методом GET.

в настройках сервера можно указать любое расширение и привязать его например к php...

Братуха, все ваши точки и тому подобное являются частью значения переменной! И еще их нужно передавать в кодированном виде.

@Братуха · 18.03.2016, 21:06 **[ТС]**

53ifbb, Вы случайно парсингом не занимались?

@53ifbb · 18.03.2016, 21:53

Братуха, не люблю я это дело)) муторно очень

@Братуха · 18.03.2016, 23:26 **[ТС]**

53ifbb, вот и я пожалел не могу

понять как формируется запрос

Новые блоги и статьи Все статьи Все блоги /
Access VikBal 11.12.2025 Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.	Новый ноутбук volvo 07.12.2025 Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro	Музыка, написанная Искусственным Интеллектом volvo 05.12.2025 Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .	От async/await к виртуальным потокам в Python IndentationError 23.11.2025 Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .	Поиск "дружественных имён" СОМ портов Argus19 22.11.2025 Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
Сколько Государство потратило денег на меня, обеспечивая инсулином. Programma_Boinc 20.11.2025 Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .	Ломающие изменения в C#.NStar Alpha Etyuhibosecyu 20.11.2025 Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .	Мысли в слух kumehtar 18.11.2025 Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .	Создание Single Page Application на фреймах krapotkin 17.11.2025 Статья исключительно для начинающих. Подходы оригинальностью не блещут. В век Веб все очень привыкли к дизайну Single-Page-Application . Быстренько разберем подход "на фреймах". Мы делаем одну. . .	Фото: Daniel Greenwood kumehtar 13.11.2025

@53ifbb 55 / 55 / 21 Регистрация: 01.03.2016 Сообщений: 594
	18.03.2016, 13:03
	Братуха, посл. предложения выглядят как случайный набор слов. Вы может напишите с соблюдением грамматики их? И четко отдельным предложением сформируете вопрос ? 0

@Братуха 5 / 5 / 5 Регистрация: 15.07.2012 Сообщений: 773
	18.03.2016, 13:47 [ТС]
	понял дальше буду искать как и где и что образуется 0

@Братуха 5 / 5 / 5 Регистрация: 15.07.2012 Сообщений: 773
	18.03.2016, 21:06 [ТС]
	53ifbb, Вы случайно парсингом не занимались? 0

@53ifbb 55 / 55 / 21 Регистрация: 01.03.2016 Сообщений: 594
	18.03.2016, 21:53
	Братуха, не люблю я это дело)) муторно очень 0

@Братуха 5 / 5 / 5 Регистрация: 15.07.2012 Сообщений: 773
	18.03.2016, 23:26 [ТС]
	53ifbb, вот и я пожалел не могу понять как формируется запрос 0