Как пропатчить aiohttp?

@BigProfessor · Регистрация: 17.01.2015

Студворк — интернет-сервис помощи студентам

Когда я делаю запрос на сайт через aiohttp мне вылазит ошибка

Traceback (most recent call last):
File "main.py", line 30, in check_eng
text = await resp.text()
File "C:\python\Python36-32\lib\site-packages\aiohttp\client_reqrep.py", line 713, in text
return self._content.decode(encoding, errors=errors)
UnicodeDecodeError: 'utf-8' codec can't decode byte 0xd0 in position 43381: invalid continuation byte
Task exception was never retrieved
future: <Task finished coro=<check_eng() done, defined at main.py:15> exception=LookupError('unknown encoding: cp-1251',)>
Traceback (most recent call last):
File "main.py", line 30, in check_eng
text = await resp.text()
File "C:\python\Python36-32\lib\site-packages\aiohttp\client_reqrep.py", line 713, in text
return self._content.decode(encoding, errors=errors)
LookupError: unknown encoding: cp-1251

Если я правильно понял, то это связано с тем, что не валидная кодировка прописана в html документе. Подскажите как исправить?

@Zuzik · 23.09.2017, 20:32

Есть возможность предоставить код которым делается запрос? И как я предполагаю запрос делается через ClientSession? И версия aiohttp не из древних надеюсь?

@BigProfessor · 24.09.2017, 00:40 **[ТС]**

Запрос через ClientSession

Уже все решил. Заменил в файле библиотеки client_reqrep.py пару строк

в функции text

Python
1
return self._content.decode(encoding, errors=error):

на

Python
1
return self._content.decode(encoding, errors='ignore'):

и поменял, что бы функция

Python
1
 def _get_encoding(self):

всегда возвращала utf-8

Python
1
return 'utf-8'

Первое можно сделать при вызове функции не влезая в файлы либы. Но если не поменять второе иногда сыпяться исключения, что неверная кодировка в html коде, а как это исправить не влезая в либу хз

@Garry Galler · 24.09.2017, 13:37

Сообщение от BigProfessor

text = await resp.text()

Сигнатура функции:

Python
1
def text(self, encoding=None, errors='strict'):

Что вам помешало передать сюда параметр encoding или errors?

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Web (WebAssembly): Обработчик клика мыши в браузере ПК и касания экрана в браузере на мобильном устройстве 8Observer8 02.02.2026 Содержание блога Для начала пошагово создадим рабочий пример для подготовки к экспериментам в браузере ПК и в браузере мобильного устройства. Потом напишем обработчик клика мыши и обработчик. . .	Философия технологии iceja 01.02.2026 На мой взгляд у человека в технических проектах остается роль генерального директора. Все остальное нейронки делают уже лучше человека. Они не могут нести предпринимательские риски, не могут. . .	SDL3 для Web (WebAssembly): Вывод текста со шрифтом TTF с помощью SDL3_ttf 8Observer8 01.02.2026 Содержание блога В этой пошаговой инструкции создадим с нуля веб-приложение, которое выводит текст в окне браузера. Запустим на Android на локальном сервере. Загрузим Release на бесплатный. . .	SDL3 для Web (WebAssembly): Сборка C/C++ проекта из консоли 8Observer8 30.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
SDL3 для Web (WebAssembly): Установка Emscripten SDK (emsdk) и CMake для сборки C и C++ приложений в Wasm 8Observer8 30.01.2026 Содержание блога Для того чтобы скачать Emscripten SDK (emsdk) необходимо сначало скачать и уставить Git: Install for Windows. Следуйте стандартной процедуре установки Git через установщик. . . .	SDL3 для Android: Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 29.01.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .	Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT bedvit 28.01.2026 Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования. Часть библиотеки BedvitCOM Использованы. . .	SDL3 для Android: Загрузка PNG с альфа-каналом с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 28.01.2026 Содержание блога SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .

@Zuzik 298 / 256 / 57 Регистрация: 11.06.2012 Сообщений: 1,557
	23.09.2017, 20:32
	Есть возможность предоставить код которым делается запрос? И как я предполагаю запрос делается через ClientSession? И версия aiohttp не из древних надеюсь? 0