UnicodeDecodeError: 'utf-8' codec can't decode byte 0xcf in position 5: invalid continuation byte

@Dinaid · Регистрация: 04.02.2022

Студворк — интернет-сервис помощи студентам

Я чайник. Новичок на Пайтон, уже изучаю веб-приложения, помогите пожалуйста!
Я формирую файл с таким содержанием:

Python
1
2
3
4
5
6
7
8
9
from flask import Flask
 
app = Flask(__name__)
 
@app.route('/')
def hello() -> str:
    return 'Hello world from Flask!'
 
app.run()

Выводит ошибку, и в cmd, и в PyCharm и в итоге одинаковые ошибки:

C:\Users\user\PycharmProjects\project1\v env\Scripts\python.exe C:/Users/user/AppData/Local/Programs/Python/Python38/webapp/hello_flask.py
* Serving Flask app 'hello_flask' (lazy loading)
* Environment: production
WARNING: This is a development server. Do not use it in a production deployment.
Use a production WSGI server instead.
* Debug mode: off
Traceback (most recent call last):
File "C:/Users/user/AppData/Local/Programs/Python/Python38/webapp/hello_flask.py", line 9, in <module>
app.run()
File "C:\Users\user\PycharmProjects\project1\ venv\lib\site-packages\flask\app.py", line 920, in run
run_simple(t.cast(str, host), port, self, **options)
File "C:\Users\user\PycharmProjects\project1\ venv\lib\site-packages\werkzeug\serving.py", line 1010, in run_simple
inner()
File "C:\Users\user\PycharmProjects\project1\ venv\lib\site-packages\werkzeug\serving.py", line 950, in inner
srv = make_server(
File "C:\Users\user\PycharmProjects\project1\ venv\lib\site-packages\werkzeug\serving.py", line 782, in make_server
return ThreadedWSGIServer(
File "C:\Users\user\PycharmProjects\project1\ venv\lib\site-packages\werkzeug\serving.py", line 688, in __init__
super().__init__(server_address, handler) # type: ignore
File "C:\Users\user\AppData\Local\Programs\Py thon\Python38\lib\socketserver.py", line 452, in __init__
self.server_bind()
File "C:\Users\user\AppData\Local\Programs\Py thon\Python38\lib\http\server.py", line 140, in server_bind
self.server_name = socket.getfqdn(host)
File "C:\Users\user\AppData\Local\Programs\Py thon\Python38\lib\socket.py", line 756, in getfqdn
hostname, aliases, ipaddrs = gethostbyaddr(name)
UnicodeDecodeError: 'utf-8' codec can't decode byte 0xcf in position 5: invalid continuation byte

Помогите разобраться пожалуйста! Что делаю не так, ведь я всё делаю по книге.

@Ципихович Эндрю · 06.02.2022, 15:24

Сообщение от avgoor

Разработчики фреймворка должны это учесть, или юзер должен писать велосипед на костылях?

конечно да и для многих других случаев да

@avgoor · 06.02.2022, 15:31

Ципихович Эндрю, что "да"?

@Ципихович Эндрю · 06.02.2022, 15:33

вот

Сообщение от Ципихович Эндрю

Разработчики фреймворка должны это учесть

@Garry Galler · 06.02.2022, 15:55

Сообщение от avgoor

Разработчики фреймворка должны это учесть, или юзер должен писать велосипед на костылях?

Ни то, ни другое.
разработчики фреймворка не могут ничего учесть, так как доменные имена - не их епархия (разве что расшифровать ошибку в более понятную).
А юзер просто должен знать спецификацию. И если его машина ей не отвечает - это исключительно его проблема.
Спецификации для того и существуют, чтобы не было "кто в лес, кто по грибы".

@avgoor · 06.02.2022, 16:53

Сообщение от Garry Galler

Ни то, ни другое.
...
Спецификации для того и существуют, чтобы не было "кто в лес, кто по грибы".

Тем не менее это подтвержденный баг хоть и не фляска, а питона. Что там про спецификации?

@Garry Galler · 06.02.2022, 17:34

Сообщение от avgoor

Тем не менее это подтвержденный баг хоть и не фляска, а питона.

Этот баг сам по себе.
А невозможность использования кириллического имени в качестве доменного имени тоже само по себе.

То есть никак не связаны.
У ТС кириллическое имя компа. И неважно - есть баг в gethostbyaddr() или нет. У него и так и эдак ничего не будет работать.

P.S. Просто уже раз 150 создавались темы с этой ошибкой. Но никто не читает...

@Ципихович Эндрю · 06.02.2022, 17:44

Сообщение от Garry Galler

Просто уже раз 150 создавались темы с этой ошибкой

так может тому кто писал фреймворк пора победить её, не?
и темы бы не было 150 раз........
что значит не читают?-читают но не понимают.........

@Garry Galler · 06.02.2022, 17:58

Сообщение от Ципихович Эндрю

так может тому кто писал фреймворк пора победить её, не?

Ошибка в функции gethostbyaddr() давно исправлена (с Python 3.8).

Code
1
2
3
New changeset f7bc44170b4bdd16c46b4b6acf7673ffc24dfb19 by Miss Islington (bot) in branch '3.8':
bpo-26227: Fixes decoding of host names on Windows from ANSI instead of UTF-8 (GH-25510)
https://github.com/python/cpython/commit/f7bc44170b4bdd16c46b4b6acf7673ffc24dfb19

И, в любом случае, она имеет лишь косвенное отношения в проблеме ТС.
Ну не называйте свои компутеры русскими именами. Если вы программист, а не блондинка.

@avgoor · 06.02.2022, 18:05

Сообщение от Garry Galler

И, в любом случае, она имеет лишь косвенное отношения в проблеме ТС.

Она имеет прямое отношение:

Сообщение от Dinaid

File "C:\Users\user\AppData\Local\Programs\Py thon\Python38\lib\so cket.py", line 756, in getfqdn
hostname, aliases, ipaddrs = gethostbyaddr(name)
UnicodeDecodeError: 'utf-8' codec can't decode byte 0xcf in position 5: invalid continuation byte

А вот каким боком вообще отностится имя хоста к возможности запуска сервера? Нужно лишь начать слушать на определенном ip-шнике. То, что софт падает при попытке ресолвить валидное с т.з. системы имя - однозначно баг.

@Garry Galler · 06.02.2022, 19:28

Сообщение от avgoor

валидное с т.з. системы имя

Уж не знаю какое оно там валидное, но у меня ОС при попытке переназвать комп по-русски сказала мне нечто в духе что я дурак и не надо так делать и в общем ССЗБ.
Но я все-таки сделал. Что интересно, flask на моем 3.8.2 запустился. То есть проблемы с перекодировкой не ASCII имени компьютера уже нет.
Однако, я все-таки процитирую разработчика из приведенной вами же ссылки на баг: Использование имени хоста, не кодируемого в кодовую страницу ANSI, вероятно, вызовет серьезные проблемы (не в Python, а в других приложениях).

@avgoor · 06.02.2022, 19:38

Сообщение от Garry Galler

но у меня ОС при попытке переназвать комп по-русски

Какая ОС?

Сообщение от Garry Galler

Однако, я все-таки процитирую разработчика из приведенной вами же ссылки на баг: Использование имени хоста, не кодируемого в кодовую страницу ANSI, вероятно, вызовет серьезные проблемы (не в Python, а в других приложениях).

Это нелепая отмазка, т.к. проблема не в не-ASCII символах, как таковых, а в том, что не utf8 строка интерпретируется как utf8 строка. В этом суть этого бага.

@Garry Galler · 06.02.2022, 19:56

Сообщение от avgoor

Какая ОС?

Windows 7.

Сообщение от Garry Galler

Что интересно, flask на моем 3.8.2 запустился.

... только потому что у меня была в файле host запись с нормальным именем хоста.
То есть если убрать ее - с не ASCII именем все-таки не работает.

Сообщение от avgoor

а в том, что не utf8 строка интерпретируется как utf8 строка. В этом суть этого бага.

Баг по мнению разработчиков был исправлен. Вы же сами читали issue.

Как работает gethostbyaddr с кириллическим именем хоста в чистом Си?

@avgoor · 06.02.2022, 20:04

Сообщение от Garry Galler

Windows 7.

Тогда как вы объясните, что при установке win-7 имя компьютера по умолчанию - это имя пользователя с постфиксом "-ПК"?
Картинка из интернета:

UnicodeDecodeError: 'utf-8' codec can't decode byte 0xcf in position 5: invalid continuation byte

Сообщение от Garry Galler

Баг по мнению разработчиков был исправлен. Вы же сами читали issue.

Это не значит, что у ТС пропатченная версия питона, и что "он сам дурак, надо компьютеры нормально называть".

@Garry Galler · 06.02.2022, 20:07

Я имею ввиду, что функция должна вернуть доменное имя по ip адресу. Но если имя хоста не соответствует стандарту - она же должна также выдать какую-то ошибку?

Сообщение от avgoor

Тогда как вы объясните, что при установке win-7 имя компьютера по умолчанию - это имя пользователя с постфиксом "-ПК"?

avgoor, Так делают (оставляют это постфикс) в магазинах неграмотные установщики windows.
Так что объяснять тут нечего.
Именно из-за них и все проблемы у начинающих бэкендеров :-)

А то что сам windows этот самый постфикс предлагает к имени компа, так это известный баг винды "правая рука не знает что делает левая".

@avgoor · 06.02.2022, 20:21

Сообщение от Garry Galler

Так делают в магазинах неграмотные установщики windows.
Так что объяснять тут нечего.
Именно из-за них и все проблемы у начинающих бэкендеров :-)

Плевать на установщиков. Главное, Микрософт считает, что имя с кириллицей вполне себе годное.
А проблемы у начинающих бэкендеров не потому, что они при установке не изменили параметр по умолчанию, а потому, что быдлокодеры не знают в какой кодировке системная функция возвращает значение. И, к сожалению, такого софта (который даже в путях русские буквы не переваривает) - вагон и маленькая тележка. Поэтому я тоже избегаю кириллических путей. Но проблема не в юзерах, а в быдлокодерах.

@Garry Galler · 06.02.2022, 20:34

Сообщение от avgoor

Главное, Микрософт считает, что имя с кириллицей вполне себе годное.

Мы отошли от темы. microsoft и ее воззрения это отдельная тема.

вы можете мне сказать каким образом сюда
struct hostent * gethostbyaddr(const char *addr, int len, int type);

struct hostent {
char *h_name; /* official name of host */

может быть записано неоднобайтовое (не соответствующее стандарту DNS )имя хоста?
То есть если забыть про Python и его траблы с кодировками?

@avgoor · 06.02.2022, 20:44

Сообщение от Garry Galler

вы можете мне сказать каким образом сюда

Во первых, почему об этом должен думать я, а не авторы фреймворка?
Во вторых, зачем что-то передавать в депрекейтнутую функию, ведь есть getnameinfo()?
В третьих, есть unicode-версия getnameinfo() - GetNameInfoW().

@Ципихович Эндрю · 06.02.2022, 20:45

Сообщение от avgoor

Во первых, почему об этом должен думать я, а не авторы фреймворка?

ну да и ТС и я Не хотим думать об этом

@Garry Galler · 06.02.2022, 21:10

Добавлено через 2 минуты

Сообщение от avgoor

Во первых, почему об этом должен думать я, а не авторы фреймворка

Если честно, мне на это пока нечего ответить.
Потому что если getnameinfo\GetNameInfoW не приводят к таким ошибкам, то мне тоже непонятно почему их не используют.

Однако, есть проблема в плане доступности:

Minimum supported client Windows 8.1, Windows Vista

Сообщение от Ципихович Эндрю

ну да и ТС и я Не хотим думать об этом

У меня точно такая же проблема. Win 7, python 3.8.5 попытка запустить локальный сервер. Имя пользователя на латиннице, все папки тоже. Через блокнот пробовал перекодировать все файлы проекта сначала в utf-8, потом все остальные кодировки перепробовал. Не помогло. Переустановил винду, установил пайтон и джанго заново. Тоже не помогло(ошибка та же) Я новичек и делаю это первый раз. Если кто знает как решить, опишите пожалуйста по подробней(без этого не могу двинутся дальше) –

Но если бы человек знал бы про стандарт доменных имен, то это избавило бы его и от недоработок (а они будут всегда) авторов фреймворка и от кучи вышеперечисленных бесполезных действий....

@Ципихович Эндрю · 06.02.2022, 21:12

я на одном из форумов написал тему: что радипоток сдулся? была проблема на одном ресурсе-радио онлайн, так вот они первые ответили, то есть зарегистрировались на форуме и ответили, что всё гут, такие дела))

Новые блоги и статьи Все статьи Все блоги /
Нейтральные знания, чистый код - бла-бла-бла-бла, на самом деле кликбейт и самореклама, плагиат, и вот почему Hrethgir 27.07.2026 То-есть отклонение такой публикации говорит само за себя, и пусть только возьмут на вооружение после отклонения публикации - это будет чистейшим актом плагиата. Отклонял Хабр. Дословно, отклонённая. . .	тв 16 бой ии anaschu 27.07.2026 Великий Перелом ИИ: Как уравнения ОДУ Radau дожали цензурные фильтры Алисы Фиксируем в мемофонде Теории Всего беспрецедентный факт в истории ИИ-зондирования. В затяжном многораундовом. . .	мв 15. непроверенное, возможно, глюк anaschu 27.07.2026 НАУЧНО-АНАЛИТИЧЕСКИЙ ОТЧЕТ. РАЗДЕЛ 1. 1: «НАУКА» (РАСШИРЕННАЯ СТЕХИОМЕТРИЧЕСКАЯ И ГЕНЕТИЧЕСКАЯ ВЕРСИЯ)Тема: Теоретическое обоснование инвариантности 19-мерного тензорного ядра непрерывных ОДУ и. . .	Очистка реквизитов и табличных частей документа при копировании (вариант 2) Maks 26.07.2026 Алгоритм из решения ниже разработан на примере нетипового документа "ЗаявкаНаРаботу", разработанного в КА2. Задача: Заменить алгоритм запрета копирования документов для сотрудников с ролью "Стажер",. . .
Доктрина интенционального знания - Доктрина для портала "Срез". Hrethgir 25.07.2026 Может найдётся кто захочет оценить доктрину. . . Написания правил участия для меня роскошь, требующая лимита времени, поэтому все сообщения не прошедшие модерацию будут видны только участникам портала,. . .	сукцессия 44. Решил подать на припринт в межународные сервисы препринтов. Но нужно одобрение от ученых anaschu 25.07.2026 Английский вариант. Пока кто то не одобрит мою личность, мне не получиться это опубликовать на препринте. Но заявку на публикацию статьи я сегодня подам.	сукцессия 43. Вторая научная статья за месяц- прайминг и гатгил anaschu 25.07.2026 две стороны одной монеты	Более приземисто - Эстафету хвоста в .cdl (деревья эстафеты в сад). Hrethgir 24.07.2026 В будущем, после написания блока инверсии обхода дерева (эстафеты хвоста), я планирую вернуться к нашему прошлому разговору о том, обладают ли знания целеполаганием. Тогда я пришел к выводу, что. . .

@avgoor 1550 / 877 / 179 Регистрация: 05.12.2015 Сообщений: 2,555
	06.02.2022, 15:31
	Ципихович Эндрю, что "да"? 1

@Ципихович Эндрю 1713 / 580 / 76 Регистрация: 10.04.2009 Сообщений: 9,337
	06.02.2022, 21:12
	я на одном из форумов написал тему: что радипоток сдулся? была проблема на одном ресурсе-радио онлайн, так вот они первые ответили, то есть зарегистрировались на форуме и ответили, что всё гут, такие дела)) 1