Парсинг сайта

@notforu · Регистрация: 19.03.2022

Студворк — интернет-сервис помощи студентам

Всем привет! Столкнулся с такой проблемой, при парсинге сайта, с использованием requests: мне нужно собрать ссылки и текст, но проблема в том, что ссылка пишется не напрямую, а через функцию js в html коде, то есть, грубо говоря мне нужно чтобы вызвать функцию js, передав ей параметры. В целом, всё работает, но при использовании текущего способа ключ одной из спаршенных ссылок бьётся и по итогу ссылка получается невалидной. И да, мне нужно вызвать эту функцию (не знаю как). Я не могу использовать Selenium, пишу код на #Python

Я первый раз на форуме и только начинаю осваивать парсинг, буду очень благодарен за ответ

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
function submit(key, title, value)
    {
        var url = document.location.href;
        if (document.location.href.indexOf('#') != -1)
            url = document.location.href.substring(0, document.location.href.indexOf('#'));
        if (value != '')
            document.location.href = url + "#" + value;
        else
            document.location.href = url;
        var form = document.getElementById('PostForm');
        form.innerHTML = "<input type=\"hidden\" name=\"Key\">";
        form.innerHTML += "<input type=\"hidden\" name=\"Title\">";
        document.forms[1].Key.value = key;
        document.forms[1].Title.value = title;
        document.forms[1].action = "Groups.aspx";
        document.forms[1].submit();
    }

HTML5
1
<a href="javascript:submit('RJuzPlvdavwzyOu12R7PKQ==','название товара....','0');">название товара....</a>

@DobroAlex · 08.03.2024, 01:49

notforu, вы бы хоть сайт дали. Алсо, вариантов 2:
1) написать свою функцию на питоне, которая будет считать тоже,что и JS функция. Будет работать ровно до тех пор, пока не поменяется реализация функции на сайте
2( использовать selenium и не становиться во вторую позу

Новые блоги и статьи Все статьи Все блоги /
PhpStorm 2025.3: WSL Terminal всегда стартует в ~ and_y87 14.12.2025 PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .	Access VikBal 11.12.2025 Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.	Новый ноутбук volvo 07.12.2025 Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro	Музыка, написанная Искусственным Интеллектом volvo 04.12.2025 Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .	От async/await к виртуальным потокам в Python IndentationError 23.11.2025 Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
Поиск "дружественных имён" СОМ портов Argus19 22.11.2025 Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .	Сколько Государство потратило денег на меня, обеспечивая инсулином. Programma_Boinc 20.11.2025 Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .	Ломающие изменения в C#.NStar Alpha Etyuhibosecyu 20.11.2025 Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .	Мысли в слух kumehtar 18.11.2025 Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .	Создание Single Page Application на фреймах krapotkin 16.11.2025 Статья исключительно для начинающих. Подходы оригинальностью не блещут. В век Веб все очень привыкли к дизайну Single-Page-Application . Быстренько разберем подход "на фреймах". Мы делаем одну. . .

@DobroAlex Заклинатель змей 705 / 560 / 219 Регистрация: 30.04.2016 Сообщений: 2,605
	08.03.2024, 01:49
	notforu, вы бы хоть сайт дали. Алсо, вариантов 2: 1) написать свою функцию на питоне, которая будет считать тоже,что и JS функция. Будет работать ровно до тех пор, пока не поменяется реализация функции на сайте 2( использовать selenium и не становиться во вторую позу 0