Форум программистов, компьютерный форум, киберфорум
Python: Web
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.88/8: Рейтинг темы: голосов - 8, средняя оценка - 4.88
0 / 0 / 0
Регистрация: 01.07.2010
Сообщений: 21

Python asyncio / aiohttp API 429 response error

14.09.2022, 13:27. Показов 1798. Ответов 3
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Пытаюсь написать асинхронный API-запрос, нашел подходящий пример, но в ответ получаю ошибку: "429 Too Many Requests (Rate Limit Exceeded)"
Я где-то не прав или это ограничение API?
Как заставить это работать?

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
import asyncio
from datetime import datetime
 
 
async def fetch(session, task):  # fetching urls and mark result of execution
    async with session.post(f'https://api.urlname.com/users/{task["url"][1]}',  # user_id
                            headers={'Authorization': f"Bearer {task['url'][0]}"}) as response:  # token
        if response.status != 200:
            task['result'] = response.status
            task['status'] = response.json()
        elif response.status != 429:
            task['result'] = response.status
            task['status'] = response.json()
        await response.text()
        print(f"{str(datetime.now())}: Got result of {task['url'][1]}")  # logging
        task['result'] = response.status
        task['status'] = 'done'
 
 
async def fetch_all(session, urls, persecond):
    url_tasks = [{'url': i, 'result': None, 'status': 'new'} for i in urls]
    n = 0  # counter
    while True:
        running_tasks = len([i for i in url_tasks if i['status'] in ['fetch']])
        is_tasks_to_wait = len([i for i in url_tasks if i['status'] != 'done'])
        if n < len(url_tasks) and running_tasks < persecond:
            url_tasks[n]['status'] = 'fetch'
            asyncio.create_task(fetch(session, url_tasks[n]))
            n += 1
            print(f'Schedule tasks {n}. '
                  f'Running {running_tasks} '
                  f'Remain {is_tasks_to_wait}')
        if running_tasks >= persecond:
            print('Throttling')
            await asyncio.sleep(1)
        if is_tasks_to_wait != 0:
            await asyncio.sleep(0.1)  # wait all tasks done
        else:
            break
    return url_tasks
 
 
async def main():
    async with aiohttp.ClientSession(connector=aiohttp.TCPConnector(ssl=False)) as session:
        res = await fetch_all(session, list_of_tokens_n_id, 3)
        print(res)
 
 
if __name__ == '__main__':
    list_of_tokens_n_id = [['token0', '0000'], ['token1', '0001'], ['token2', '0002'], ['token3', '0003']]
    asyncio.run(main())
0
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
14.09.2022, 13:27
Ответы с готовыми решениями:

Коннектор к API используя AsyncIO, aiohttp
Py3.5. Работаю с библиотекой, подключаюсь к api telegram. Получаю сообщения и отправляю их в обработку. Сообщения будут выполнять запросы...

aiohttp response
Доброго времени, уважаемые форумчане. Столкнулся с такой проблемой: при совершении простого get-запроса, в котором я получаю картинку,...

Не выполняется Response.Redirect: Response object error 'ASP 0156 : 80004005' Header Error
Вот такая вот ошибка на простой вызов редиректа на вполне доступный адрес. что бы это могло быть? Response object error 'ASP 0156 :...

3
155 / 120 / 38
Регистрация: 12.12.2013
Сообщений: 374
20.09.2022, 18:53
Ну вроде написано, что "слишком много запросов".
И зачем делать дополнительный while True, если можно затолкать в какой-нибудь gather сразу все?
0
0 / 0 / 0
Регистрация: 01.07.2010
Сообщений: 21
20.09.2022, 19:27  [ТС]
Проблема была в ограничении api, в моём случае 2 секунды на запрос
0
155 / 120 / 38
Регистрация: 12.12.2013
Сообщений: 374
20.09.2022, 19:58
Цитата Сообщение от Nlegion Посмотреть сообщение
Проблема была в ограничении api, в моём случае 2 секунды на запрос
Теоретически в заголовке должен был быть Retry-After. Если да, можно было его проанализировать.
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
20.09.2022, 19:58
Помогаю со студенческими работами здесь

<Response 429>
При парсинге сайта

ERROR:asyncio:Task exception was never retrieved
Телеграм бот находится по этой ссылке Его делал Хауди Хо в этом видео Я изменил токен бота на свой, но он все равно не работает. В...

Run time error 429
При запуске программы на машине где нет VB возникает ошибка Run time error 429. Подскажите, как от нее избавиться?

Run-time error '429'
Всем доброго дня! Win 7 Pro 64x MsOffice 2010 Pro При запуске excel выдает окно сообщения: Run-time error '429' ActiveX...

Run-time error 429
Делаю лабу по VBA и вылезла ошибка Run-time error 429 ActiveX component can't create object Sub AutomateWord() Dim wrdApp...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
4
Ответ Создать тему
Новые блоги и статьи
Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост.
Programma_Boinc 28.12.2025
Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост. Налог на собак: https:/ / **********/ gallery/ V06K53e Финансовый отчет в Excel: https:/ / **********/ gallery/ bKBkQFf Пост отсюда. . .
Кто-нибудь знает, где можно бесплатно получить настольный компьютер или ноутбук? США.
Programma_Boinc 26.12.2025
Нашел на реддите интересную статью под названием Anyone know where to get a free Desktop or Laptop? Ниже её машинный перевод. После долгих разбирательств я наконец-то вернула себе. . .
Thinkpad X220 Tablet — это лучший бюджетный ноутбук для учёбы, точка.
Programma_Boinc 23.12.2025
Рецензия / Мнение/ Перевод Нашел на реддите интересную статью под названием The Thinkpad X220 Tablet is the best budget school laptop period . Ниже её машинный перевод. Thinkpad X220 Tablet —. . .
PhpStorm 2025.3: WSL Terminal всегда стартует в ~
and_y87 14.12.2025
PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .
Как объединить две одинаковые БД Access с разными данными
VikBal 11.12.2025
Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.
Новый ноутбук
volvo 07.12.2025
Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro
Музыка, написанная Искусственным Интеллектом
volvo 04.12.2025
Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .
От async/await к виртуальным потокам в Python
IndentationError 23.11.2025
Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
Поиск "дружественных имён" СОМ портов
Argus19 22.11.2025
Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Programma_Boinc 20.11.2025
Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2025, CyberForum.ru