Форум программистов, компьютерный форум, киберфорум
Python для начинающих
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.72/25: Рейтинг темы: голосов - 25, средняя оценка - 4.72
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59

CSV формат и типы данных

31.08.2018, 16:10. Показов 5910. Ответов 15
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Доброго времени суток!
При чтении данных из файла CSV выдает ошибку:
ValueError: could not convert string to float: '12:23:34'.
Отсюда возникает вопрос, как читать время формата HH:MI:SS из файла CSV?
Время в CSV файле каждый раз меняется.
Пожалуйста помогите.
0
Лучшие ответы (1)
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
31.08.2018, 16:10
Ответы с готовыми решениями:

Определить типы данных CSV при загрузке в Pandas
Добрый день! Подскажите как правильно определить типы данных при загрузке из файла в формате CSV в Pandas? Сейчас делаю так и...

Pandas - сохранить формат данных при записи в файл csv
При сохранении фрейма и последующей загрузке преобразовывается формат данных. Подскажите как этого избежать? import pandas as pd d =...

Вам доступен csv файл data.csv, содержащий информацию в csv формате.Напишите функцию read_csv для чтения данных из файла
Вам доступен CSV-файл data.csv, содержащий информацию в csv формате. Напишите функцию read_csv для чтения данных из этого файла. Она должна...

15
277 / 226 / 93
Регистрация: 27.06.2016
Сообщений: 639
31.08.2018, 17:11
При чём тут CSV?
И что ожидаем на выходе?
1
Эксперт Python
 Аватар для dondublon
4651 / 2071 / 366
Регистрация: 17.03.2012
Сообщений: 10,180
Записей в блоге: 6
31.08.2018, 17:22
Чем читаете?
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 17:28  [ТС]
Мне просто надо получить данные из CSV и засунуть в массив.
Пример массива который хочу получить:[12:22:45, 0.35674, 25.33305, 1 ]
numpy.loadtxt("Test27.csv", delimiter=";") - вот так я читаю.
0
Эксперт Python
 Аватар для dondublon
4651 / 2071 / 366
Регистрация: 17.03.2012
Сообщений: 10,180
Записей в блоге: 6
31.08.2018, 17:50
Vampiredok, посмотрите параметр converters. Ну и остальные, может, кое-что интересное найдёте.

Добавлено через 1 минуту
alex white, "тут" - это где?
1
Эксперт Python
5438 / 3859 / 1215
Регистрация: 28.10.2013
Сообщений: 9,552
Записей в блоге: 1
31.08.2018, 18:04
Python
1
2
3
4
5
6
7
8
9
10
11
>>> d = StringIO('''
12:22:45; 0.35674; 25.33305; 1
12:22:45; 0.35674; 25.33305; 1
12:22:45; 0.35674; 25.33305; 1'''
)
>>> np.loadtxt(d, dtype=[('1','O'),('2','f8'),('3','f8'),('4','i8')],delimiter=";")
array([('12:22:45', 0.35674, 25.33305, 1),
       ('12:22:45', 0.35674, 25.33305, 1),
       ('12:22:45', 0.35674, 25.33305, 1)],
      dtype=[('1', 'O'), ('2', '<f8'), ('3', '<f8'), ('4', '<i8')])
>>>
P.S. Формат M - datetime - здесь почему-то не работает. Поэтому будет просто строка.

Добавлено через 2 минуты
Ну и в параметре converters - как и указали выше - можно свой конвертер использовать.
1
Эксперт Python
 Аватар для dondublon
4651 / 2071 / 366
Регистрация: 17.03.2012
Сообщений: 10,180
Записей в блоге: 6
31.08.2018, 18:09
Garry Galler, я бы предпочёл сразу converters, чтобы сделать нормальный 2d массив вместо массива рекордов ( ). Впрочем, тут зависит от ситуации.
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 18:09  [ТС]
dondublon, спасибо за помощь.
Однако теперь появилась ошибка: TypeError: strptime() argument 0 must be str, not <class 'bytes'>.
0
Эксперт Python
 Аватар для dondublon
4651 / 2071 / 366
Регистрация: 17.03.2012
Сообщений: 10,180
Записей в блоге: 6
31.08.2018, 18:13
Vampiredok, это странно, он должен читать файл сразу, как текст. Но можете сделать decode на скорую руку.
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 18:24  [ТС]
dondublon, могли бы вы подсказать как сделать decode?
Вот мой код:
Python
1
2
3
4
import numpy
from matplotlib.dates import strpdate2num, num2date
convert = lambda x: num2date(strpdate2num('%H/%M/%S')(x))
numpy.loadtxt("Data2.csv", delimiter=";", converters={0:convert})
0
Эксперт Python
 Аватар для dondublon
4651 / 2071 / 366
Регистрация: 17.03.2012
Сообщений: 10,180
Записей в блоге: 6
31.08.2018, 18:36
Python
1
x.decode()
Формат даты, похоже, не тот, да и matplotlib для этого тянуть - слишком сильное средство.
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 18:44  [ТС]
Пишет: NameError: name 'x' is not defined
А какой формат лучше выбрать?
0
Эксперт Python
5438 / 3859 / 1215
Регистрация: 28.10.2013
Сообщений: 9,552
Записей в блоге: 1
31.08.2018, 18:50
Лучший ответ Сообщение было отмечено Vampiredok как решение

Решение

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
from io  import StringIO
from datetime import timedelta
import time
import numpy as np
 
d = StringIO('''
12:22:45; 0.35674; 25.33305; 1
12:22:45; 0.35674; 25.33305; 1
12:22:45; 0.35674; 25.33305; 1'''
)
 
def str2delta(s:str,fmt:str='%H:%M:%S'):
    t = time.strptime(s,fmt)
    td = timedelta(hours=t.tm_hour, minutes=t.tm_min, seconds=t.tm_sec)
    return td
 
result = np.loadtxt(d, 
    converters={
        # конвертер для нулевого столбца - duration превращаем в обычные секунды
        0:lambda s:str2delta(s.decode('utf8')).total_seconds(),
        },
    delimiter=";"
)
 
print(result)
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 19:02  [ТС]
Garry Galler, спасибо за код.
Однако у меня возникает вопрос как теперь можно это число 4.456500e+04 конвертировать в человеческую дату обратно?
Ps: Я совсем зеленый, начал изучать питон в этот понедельник.
0
Эксперт Python
5438 / 3859 / 1215
Регистрация: 28.10.2013
Сообщений: 9,552
Записей в блоге: 1
31.08.2018, 19:25
Цитата Сообщение от Vampiredok Посмотреть сообщение
число 4.456500e+04 конвертировать в человеческую дату обратно?
В строку формата "H:M:S"?
Python
1
2
3
>>> str(timedelta(seconds=4.456500e+04))
'12:22:45'
>>>
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 19:28  [ТС]
Garry Galler, еще раз спасибо
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
31.08.2018, 19:28
Помогаю со студенческими работами здесь

Какой формат базы данных DSN Access (атрибуты и типы данных)?
В настройках IIS можно выбирать формат журнала, один из форматов - это DSN Access, то есть события журналируются в базу данных. Так вот,...

Формат вывода, типы данных

Вставка данных из внешнего файла (формат CSV)
Здравствуйте. Не удаётся вставить данные в таблицу из внешнего файла (файл имеет формат CSV). Выдаётся ошибка: *** ERROR 1290 (HY000):...

Excel VBA экспорт в формат CSV с разделением данных через запятую в одном столбце
Добрый день. Есть XLTM файл из которого нужно экспортировать данные из столбцов &quot;В&quot; и &quot;М&quot; в формат CSV причем так,...

Предопределенные типы переменных. Простые типы данных. Пользовательские типы данных
Лабораторная работа №6. Тема: Предопределенные типы переменных. Простые типы данных. Пользовательские типы данных.(лекция) ...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
16
Ответ Создать тему
Новые блоги и статьи
Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост.
Programma_Boinc 28.12.2025
Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост. Налог на собак: https:/ / **********/ gallery/ V06K53e Финансовый отчет в Excel: https:/ / **********/ gallery/ bKBkQFf Пост отсюда. . .
Кто-нибудь знает, где можно бесплатно получить настольный компьютер или ноутбук? США.
Programma_Boinc 26.12.2025
Нашел на реддите интересную статью под названием Anyone know where to get a free Desktop or Laptop? Ниже её машинный перевод. После долгих разбирательств я наконец-то вернула себе. . .
Thinkpad X220 Tablet — это лучший бюджетный ноутбук для учёбы, точка.
Programma_Boinc 23.12.2025
Рецензия / Мнение/ Перевод Нашел на реддите интересную статью под названием The Thinkpad X220 Tablet is the best budget school laptop period . Ниже её машинный перевод. Thinkpad X220 Tablet —. . .
PhpStorm 2025.3: WSL Terminal всегда стартует в ~
and_y87 14.12.2025
PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .
Как объединить две одинаковые БД Access с разными данными
VikBal 11.12.2025
Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.
Новый ноутбук
volvo 07.12.2025
Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro
Музыка, написанная Искусственным Интеллектом
volvo 04.12.2025
Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .
От async/await к виртуальным потокам в Python
IndentationError 23.11.2025
Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
Поиск "дружественных имён" СОМ портов
Argus19 22.11.2025
Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Programma_Boinc 20.11.2025
Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2025, CyberForum.ru