Форум программистов, компьютерный форум, киберфорум
Python: Научные вычисления
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.84/25: Рейтинг темы: голосов - 25, средняя оценка - 4.84
1 / 1 / 0
Регистрация: 09.09.2017
Сообщений: 59

Dataframe: ограничения по размеру

11.02.2020, 12:52. Показов 4946. Ответов 1
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Добрый день.
Выгружаю данные в датафрейм следующим образом:
Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
startDate = dt.datetime(2019,2,10)
endDate = dt.datetime(2020,2,10)
startTime = datetime.timestamp(startDate)
endTime = datetime.timestamp(endDate)
client = Client()
symbol = 'ETHBTC'
interval = '1h'
root_url = 'https://api.binance.com/api/v1/klines'
url = root_url + '?symbol=' + symbol + '&interval=' + interval+'&startTime='+str(int(startTime)*1000)+'&endTime='+str(int(endTime)*1000)
data = json.loads(requests.get(url).text)
hist = pd.DataFrame(data)
hist.columns = ['open_time',
              'o', 'h', 'l', 'c', 'v',
              'close_time', 'qav', 'num_trades',
              'taker_base_vol', 'taker_quote_vol', 'ignore']
hist.index = [dt.datetime.fromtimestamp(x/1000.0) for x in hist.close_time]
target_col = 'c'
ethbtc = hist['c'].astype('float')
ethbtc.plot(figsize=(16,9))
Беру данные за год, но почему-то выгружается только 500 строк. Есть ли какие-то ограничения на размеры выгружаемых данных в DataFrame или это вопросы к json.loads? И как можно эти ограничения обойти?
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
11.02.2020, 12:52
Ответы с готовыми решениями:

Новый Dataframe с информацией из старого Dataframe
У меня есть такой Dataframe. Мне нужно посчитать количество каждого значения из столбца Message для каждого номера из...

Есть ли ограничения по размеру массива
Здравствуйте! Внутри одной из функций хочу создать большой массив. Его размер, допустим, известен на этапе компиляции. Вариант 1...

Как снять ограничения по размеру на базу в 10 Гб?
Доброго времени суток! Появилась такая проблема, база достигла 10 гб, на сколько я понимаю это предельный объём для sql server, из за этого...

1
Эксперт Python
5438 / 3859 / 1215
Регистрация: 28.10.2013
Сообщений: 9,552
Записей в блоге: 1
11.02.2020, 13:49
Цитата Сообщение от phoenix_css Посмотреть сообщение
выгружается только 500 строк
И причем тут dataframe? И json? Вы с сервака получаете ровно 500 строк. Неужели так сложно было проверить...
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
11.02.2020, 13:49
Помогаю со студенческими работами здесь

Pandas. Изменение значений Dataframe исходя из другого Dataframe
Добрый день. Прошу подсказать с реализаций следующего алгоритма: я загружаю из файла примерно следующий Dataframe(db): ...

Дописать содержимое меньшего по размеру файла в конец большего по размеру
Создать с помощью текстового редактора файлы file1.txt и file2.txt, длины которых не превышают 100 символов. Написать программу, которая: ...

По заданным количеству и размеру модулей и размеру поля для их размещения, определить максимальную толщину слоя защиты
Добрый день, помогите пожалуйста конвертировать код с питона на с++, заранее благодарен. def f(m): return max((w // (a + 2 * m)) *...

Ограничения в классах. Ограничения числа копий библиотек классов в объектно-ориентированных языках
Приветствую всех. Пишу курсовую работу. Помогите, пожалуйста, найти материалы на эти темы. Источники, статьи и т.д. Заранее благодарю.

Сопоставление ограничения, введенного без указания имени ограничения, и имени соответствующего столбца средствами SSMS
Если для какого-то столбца введено ограничение UNIQUE или DEFAULT без явного указания имени ограничения (что конечно не комильфо), то есть...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
2
Ответ Создать тему
Новые блоги и статьи
Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост.
Programma_Boinc 28.12.2025
Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост. Налог на собак: https:/ / **********/ gallery/ V06K53e Финансовый отчет в Excel: https:/ / **********/ gallery/ bKBkQFf Пост отсюда. . .
Кто-нибудь знает, где можно бесплатно получить настольный компьютер или ноутбук? США.
Programma_Boinc 26.12.2025
Нашел на реддите интересную статью под названием Anyone know where to get a free Desktop or Laptop? Ниже её машинный перевод. После долгих разбирательств я наконец-то вернула себе. . .
Thinkpad X220 Tablet — это лучший бюджетный ноутбук для учёбы, точка.
Programma_Boinc 23.12.2025
Рецензия / Мнение/ Перевод Нашел на реддите интересную статью под названием The Thinkpad X220 Tablet is the best budget school laptop period . Ниже её машинный перевод. Thinkpad X220 Tablet —. . .
PhpStorm 2025.3: WSL Terminal всегда стартует в ~
and_y87 14.12.2025
PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .
Как объединить две одинаковые БД Access с разными данными
VikBal 11.12.2025
Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.
Новый ноутбук
volvo 07.12.2025
Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro
Музыка, написанная Искусственным Интеллектом
volvo 04.12.2025
Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .
От async/await к виртуальным потокам в Python
IndentationError 23.11.2025
Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
Поиск "дружественных имён" СОМ портов
Argus19 22.11.2025
Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Programma_Boinc 20.11.2025
Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2025, CyberForum.ru