Форум программистов, компьютерный форум, киберфорум
Python: Научные вычисления
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.84/25: Рейтинг темы: голосов - 25, средняя оценка - 4.84
1 / 1 / 0
Регистрация: 09.09.2017
Сообщений: 59

Dataframe: ограничения по размеру

11.02.2020, 12:52. Показов 5005. Ответов 1
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Добрый день.
Выгружаю данные в датафрейм следующим образом:
Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
startDate = dt.datetime(2019,2,10)
endDate = dt.datetime(2020,2,10)
startTime = datetime.timestamp(startDate)
endTime = datetime.timestamp(endDate)
client = Client()
symbol = 'ETHBTC'
interval = '1h'
root_url = 'https://api.binance.com/api/v1/klines'
url = root_url + '?symbol=' + symbol + '&interval=' + interval+'&startTime='+str(int(startTime)*1000)+'&endTime='+str(int(endTime)*1000)
data = json.loads(requests.get(url).text)
hist = pd.DataFrame(data)
hist.columns = ['open_time',
              'o', 'h', 'l', 'c', 'v',
              'close_time', 'qav', 'num_trades',
              'taker_base_vol', 'taker_quote_vol', 'ignore']
hist.index = [dt.datetime.fromtimestamp(x/1000.0) for x in hist.close_time]
target_col = 'c'
ethbtc = hist['c'].astype('float')
ethbtc.plot(figsize=(16,9))
Беру данные за год, но почему-то выгружается только 500 строк. Есть ли какие-то ограничения на размеры выгружаемых данных в DataFrame или это вопросы к json.loads? И как можно эти ограничения обойти?
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
11.02.2020, 12:52
Ответы с готовыми решениями:

Новый Dataframe с информацией из старого Dataframe
У меня есть такой Dataframe. Мне нужно посчитать количество каждого значения из столбца Message для каждого номера из...

Есть ли ограничения по размеру массива
Здравствуйте! Внутри одной из функций хочу создать большой массив. Его размер, допустим, известен на этапе компиляции. Вариант 1...

Как снять ограничения по размеру на базу в 10 Гб?
Доброго времени суток! Появилась такая проблема, база достигла 10 гб, на сколько я понимаю это предельный объём для sql server, из за этого...

1
Эксперт Python
5438 / 3859 / 1215
Регистрация: 28.10.2013
Сообщений: 9,552
Записей в блоге: 1
11.02.2020, 13:49
Цитата Сообщение от phoenix_css Посмотреть сообщение
выгружается только 500 строк
И причем тут dataframe? И json? Вы с сервака получаете ровно 500 строк. Неужели так сложно было проверить...
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
11.02.2020, 13:49
Помогаю со студенческими работами здесь

Pandas. Изменение значений Dataframe исходя из другого Dataframe
Добрый день. Прошу подсказать с реализаций следующего алгоритма: я загружаю из файла примерно следующий Dataframe(db): ...

Дописать содержимое меньшего по размеру файла в конец большего по размеру
Создать с помощью текстового редактора файлы file1.txt и file2.txt, длины которых не превышают 100 символов. Написать программу, которая: ...

По заданным количеству и размеру модулей и размеру поля для их размещения, определить максимальную толщину слоя защиты
Добрый день, помогите пожалуйста конвертировать код с питона на с++, заранее благодарен. def f(m): return max((w // (a + 2 * m)) *...

Ограничения в классах. Ограничения числа копий библиотек классов в объектно-ориентированных языках
Приветствую всех. Пишу курсовую работу. Помогите, пожалуйста, найти материалы на эти темы. Источники, статьи и т.д. Заранее благодарю.

Сопоставление ограничения, введенного без указания имени ограничения, и имени соответствующего столбца средствами SSMS
Если для какого-то столбца введено ограничение UNIQUE или DEFAULT без явного указания имени ограничения (что конечно не комильфо), то есть...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
2
Ответ Создать тему
Новые блоги и статьи
Установка Qt Creator для C и C++: ставим среду, CMake и MinGW без фреймворка Qt
8Observer8 05.04.2026
Среду разработки Qt Creator можно установить без фреймворка Qt. Есть отдельный репозиторий для этой среды: https:/ / github. com/ qt-creator/ qt-creator, где можно скачать установщик, на вкладке Releases:. . .
AkelPad-скрипты, структуры, и немного лирики..
testuser2 05.04.2026
Такая программа, как AkelPad существует уже давно, и также давно существуют скрипты под нее. Тем не менее, прога живет, периодически что-то не спеша дополняется, улучшается. Что меня в первую очередь. . .
Отображение реквизитов в документе по условию и контроль их заполнения
Maks 04.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "ПланированиеСпецтехники", разработанного в конфигурации КА2. Данный документ берёт данные из другого нетипового документа. . .
Фото всей Земли с борта корабля Orion миссии Artemis II
kumehtar 04.04.2026
Это первое подобное фото сделанное человеком за 50 лет. Снимок называют новым вариантом легендарной фотографии «The Blue Marble» 1972 года, сделанной с борта корабля «Аполлон-17». Новое фото. . .
Вывод диалогового окна перед закрытием, если документ не проведён
Maks 04.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: реализовать программный контроль на предмет проведения документа. . .
Программный контроль заполнения реквизитов табличной части документа
Maks 02.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: 1. Реализовать контроль заполнения реквизита. . .
wmic не является внутренней или внешней командой
Maks 02.04.2026
Решение: DISM / Online / Add-Capability / CapabilityName:WMIC~~~~ Отсюда: https:/ / winitpro. ru/ index. php/ 2025/ 02/ 14/ komanda-wmic-ne-naydena/
Программная установка даты и запрет ее изменения
Maks 02.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: при создании документов установить период списания автоматически. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru