Форум программистов, компьютерный форум, киберфорум
Python: Web
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.88/8: Рейтинг темы: голосов - 8, средняя оценка - 4.88
0 / 0 / 0
Регистрация: 01.07.2010
Сообщений: 21

Python asyncio / aiohttp API 429 response error

14.09.2022, 13:27. Показов 1865. Ответов 3
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Пытаюсь написать асинхронный API-запрос, нашел подходящий пример, но в ответ получаю ошибку: "429 Too Many Requests (Rate Limit Exceeded)"
Я где-то не прав или это ограничение API?
Как заставить это работать?

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
import asyncio
from datetime import datetime
 
 
async def fetch(session, task):  # fetching urls and mark result of execution
    async with session.post(f'https://api.urlname.com/users/{task["url"][1]}',  # user_id
                            headers={'Authorization': f"Bearer {task['url'][0]}"}) as response:  # token
        if response.status != 200:
            task['result'] = response.status
            task['status'] = response.json()
        elif response.status != 429:
            task['result'] = response.status
            task['status'] = response.json()
        await response.text()
        print(f"{str(datetime.now())}: Got result of {task['url'][1]}")  # logging
        task['result'] = response.status
        task['status'] = 'done'
 
 
async def fetch_all(session, urls, persecond):
    url_tasks = [{'url': i, 'result': None, 'status': 'new'} for i in urls]
    n = 0  # counter
    while True:
        running_tasks = len([i for i in url_tasks if i['status'] in ['fetch']])
        is_tasks_to_wait = len([i for i in url_tasks if i['status'] != 'done'])
        if n < len(url_tasks) and running_tasks < persecond:
            url_tasks[n]['status'] = 'fetch'
            asyncio.create_task(fetch(session, url_tasks[n]))
            n += 1
            print(f'Schedule tasks {n}. '
                  f'Running {running_tasks} '
                  f'Remain {is_tasks_to_wait}')
        if running_tasks >= persecond:
            print('Throttling')
            await asyncio.sleep(1)
        if is_tasks_to_wait != 0:
            await asyncio.sleep(0.1)  # wait all tasks done
        else:
            break
    return url_tasks
 
 
async def main():
    async with aiohttp.ClientSession(connector=aiohttp.TCPConnector(ssl=False)) as session:
        res = await fetch_all(session, list_of_tokens_n_id, 3)
        print(res)
 
 
if __name__ == '__main__':
    list_of_tokens_n_id = [['token0', '0000'], ['token1', '0001'], ['token2', '0002'], ['token3', '0003']]
    asyncio.run(main())
0
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
14.09.2022, 13:27
Ответы с готовыми решениями:

Коннектор к API используя AsyncIO, aiohttp
Py3.5. Работаю с библиотекой, подключаюсь к api telegram. Получаю сообщения и отправляю их в обработку. Сообщения будут выполнять запросы...

aiohttp response
Доброго времени, уважаемые форумчане. Столкнулся с такой проблемой: при совершении простого get-запроса, в котором я получаю картинку,...

Не выполняется Response.Redirect: Response object error 'ASP 0156 : 80004005' Header Error
Вот такая вот ошибка на простой вызов редиректа на вполне доступный адрес. что бы это могло быть? Response object error 'ASP 0156 :...

3
155 / 120 / 38
Регистрация: 12.12.2013
Сообщений: 374
20.09.2022, 18:53
Ну вроде написано, что "слишком много запросов".
И зачем делать дополнительный while True, если можно затолкать в какой-нибудь gather сразу все?
0
0 / 0 / 0
Регистрация: 01.07.2010
Сообщений: 21
20.09.2022, 19:27  [ТС]
Проблема была в ограничении api, в моём случае 2 секунды на запрос
0
155 / 120 / 38
Регистрация: 12.12.2013
Сообщений: 374
20.09.2022, 19:58
Цитата Сообщение от Nlegion Посмотреть сообщение
Проблема была в ограничении api, в моём случае 2 секунды на запрос
Теоретически в заголовке должен был быть Retry-After. Если да, можно было его проанализировать.
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
20.09.2022, 19:58
Помогаю со студенческими работами здесь

<Response 429>
При парсинге сайта

ERROR:asyncio:Task exception was never retrieved
Телеграм бот находится по этой ссылке Его делал Хауди Хо в этом видео Я изменил токен бота на свой, но он все равно не работает. В...

Run time error 429
При запуске программы на машине где нет VB возникает ошибка Run time error 429. Подскажите, как от нее избавиться?

Run-time error '429'
Всем доброго дня! Win 7 Pro 64x MsOffice 2010 Pro При запуске excel выдает окно сообщения: Run-time error '429' ActiveX...

Run-time error 429
Делаю лабу по VBA и вылезла ошибка Run-time error 429 ActiveX component can't create object Sub AutomateWord() Dim wrdApp...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
4
Ответ Создать тему
Новые блоги и статьи
Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки
Neotwalker 08.03.2026
Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .
Модульная разработка через nuget packages
DevAlt 07.03.2026
Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .
Модульный подход на примере F#
DevAlt 06.03.2026
В блоге дяди Боба наткнулся на такое определение: В этой книге («Подход, основанный на вариантах использования») Ивар утверждает, что архитектура программного обеспечения — это структуры,. . .
Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование
8Observer8 05.03.2026
Содержание блога Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .
SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D
8Observer8 04.03.2026
Содержание блога Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip На первой гифке отладочные линии отключены, а на второй включены:. . .
SDL3 для Web (WebAssembly): Идентификация объектов на Box2D v3 - использование userData и событий коллизий
8Observer8 02.03.2026
Содержание блога Финальная демка в браузере. Итоговый код: finish-collision-events-sdl3-c. zip Сканируйте QR-код на мобильном и вы увидите, что появится джойстик для управления главным героем. . . .
Реалии
Hrethgir 01.03.2026
Нет, я не закончил до сих пор симулятор. Эта задача сложнее. Не получилось уйти в плавсостав, но оно и к лучшему, возможно. Точнее получалось - но сварщиком в палубную команду, а это значит, в моём. . .
Ритм жизни
kumehtar 27.02.2026
Иногда приходится жить в ритме, где дел становится всё больше, а вовлечения в происходящее — всё меньше. Плотный график не даёт вниманию закрепиться ни на одном событии. Утро начинается с быстрых,. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru