Запрос данных просто с Python и insomnia. И что потом с этими данными делать?

18.12.2020, 21:43. Показов 3418. Ответов 0

Метки json, parse date, python 3.8 (Все метки)

Студворк — интернет-сервис помощи студентам

Вот этот сайт, https://www.codegrepper.com/, там нужныессылки - json с bs4 там делать нечего. Бесплатную прогу нарыл здесь https://insomnia.rest/download/#windows
То есть это еще один способ парсинга веб-страниц с помощью Python. Найтие, откуда веб-сайт получает данные, а затем программно имитировать этот запрос.
Как бы код:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
import requests
import re
 
url = "https://www.codegrepper.com/api/search_term_alternatives.php"
 
querystring = {"q": "python 3 replace all whitespace characters"}
 
payload = ""
 
headers = {
    'accept': 'accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9',
    "user-agent": "...."
}
 
response = requests.request("GET", url, data=payload, headers=headers, params=querystring)
#Вот с этого строки в коде, я пытался найти что-то в запросе. Куча мала данных.
r = response.text.replace('related_terms', '').replace('term', '').replace('score', '')
from string import punctuation
 
str2 = ''
for c in r:
    if c not in ('0', '1', '2', '3', '4', '5', '6', '7', '8', '9'):
        str2 = str2 + c
for char in punctuation:
    str2 = str2.replace(char, ' ')
HOST = 'https://www.codegrepper.com/search.php?q='
s = str2.replace("  ", ' ').replace(' ', '%20')
# s2 = [x for x in re.split(',| ',s) if x!='']
print(s)

Но что делать с полученными данными - вопрос: мешанина какая то приходит. Удалял, удалял лишнее -фигня получилась. А нужно было ссылки получить, типа таких: https://www.codegrepper.com/se... characters Дак как же по умного использовать данные, полученные с помощью insomnia core?
Я так понимаю, что это раздел - несколько прикольный, тут различные вопросы, задаются, разной степени тупости.

Добавлено через 1 час 2 минуты
Оказывается, все нормально. И json можно получить. И дальше редактировать. Норм тема эта insomnia для парсинга.

IT_Exp

Эксперт

34794 / 4073 / 2104

Регистрация: 17.06.2006

Сообщений: 32,602

Блог

18.12.2020, 21:43

Ответы с готовыми решениями:

Что делать с этими файлами?
http://kindohm.com/files/KinectCursorSmoothing.zip Вот исходники. Думаю, все знают что такое Kinect. Проект есть, а как это запустить?...

Объясните, что делать с этими пределами
Объясните как решать эти пределы (номера 3,4,5) Нельзя пользоваться Лопиталем, только "замечательные" пределы.....

Поиск данных в таблице и вставка значений в строку с этими данными
Hi, помогите решить задачу. Я начинающий, прошу не судить строго. В формировании отчета участвуют две карточки. При вводе данных из...

Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.

BasicMan

Эксперт

29316 / 5623 / 2384

Регистрация: 17.02.2009

Сообщений: 30,364

Блог

18.12.2020, 21:43

Помогаю со студенческими работами здесь

Программа для ввода данных и формирования файла .doc с этими данными
Всем привет! Уважаемые программисты, начинающие и уже умеющие, очень нужна ваша помощь. Ввиду того, что в программировании знания у...

Чтение данных из *.txt файла, находящегося в ресурсах, и заполнение этими данными DataGridView
На форме расположен ComboBox, в котором можно выбрать один из типов резьбы (G,M,Pg,Rp,Tr и все резьбы). После выбора одного из значений в...

Как используя свитч сравнить данные а потом делать запрос
switch (FinOper) { case "1501": SqlCommand command101 = new...

Не знаю что делать, компьютер просто не хочет работать
Предыстория: Комп был обычный, рабочий, но слабый, Пенек 4 с видюшкой АМД (все что помню) Решил обновить конфигурацию, так как тянуть...

Что мне делать потом, как лечить флешку
умоляю, умники програмисты помогите чайнику. собираюсь флешку нести для "вставления" в комп, который точно заразный, НО ЭТО очень надо...

Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Web (WebAssembly): Обработчик клика мыши в браузере ПК и касания экрана в браузере на мобильном устройстве 8Observer8 02.02.2026 Содержание блога Для начала пошагово создадим рабочий пример для подготовки к экспериментам в браузере ПК и в браузере мобильного устройства. Потом напишем обработчик клика мыши и обработчик. . .	Философия технологии iceja 01.02.2026 На мой взгляд у человека в технических проектах остается роль генерального директора. Все остальное нейронки делают уже лучше человека. Они не могут нести предпринимательские риски, не могут. . .	SDL3 для Web (WebAssembly): Вывод текста со шрифтом TTF с помощью SDL3_ttf 8Observer8 01.02.2026 Содержание блога В этой пошаговой инструкции создадим с нуля веб-приложение, которое выводит текст в окне браузера. Запустим на Android на локальном сервере. Загрузим Release на бесплатный. . .	SDL3 для Web (WebAssembly): Сборка C/C++ проекта из консоли 8Observer8 30.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
SDL3 для Web (WebAssembly): Установка Emscripten SDK (emsdk) и CMake для сборки C и C++ приложений в Wasm 8Observer8 30.01.2026 Содержание блога Для того чтобы скачать Emscripten SDK (emsdk) необходимо сначало скачать и уставить Git: Install for Windows. Следуйте стандартной процедуре установки Git через установщик. . . .	SDL3 для Android: Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 29.01.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .	Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT bedvit 28.01.2026 Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования. Часть библиотеки BedvitCOM Использованы. . .	SDL3 для Android: Загрузка PNG с альфа-каналом с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 28.01.2026 Содержание блога SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .

Наверх