Форум программистов, компьютерный форум, киберфорум
Python для начинающих
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.72/25: Рейтинг темы: голосов - 25, средняя оценка - 4.72
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59

CSV формат и типы данных

31.08.2018, 16:10. Показов 6193. Ответов 15
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Доброго времени суток!
При чтении данных из файла CSV выдает ошибку:
ValueError: could not convert string to float: '12:23:34'.
Отсюда возникает вопрос, как читать время формата HH:MI:SS из файла CSV?
Время в CSV файле каждый раз меняется.
Пожалуйста помогите.
0
Лучшие ответы (1)
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
31.08.2018, 16:10
Ответы с готовыми решениями:

Определить типы данных CSV при загрузке в Pandas
Добрый день! Подскажите как правильно определить типы данных при загрузке из файла в формате CSV в Pandas? Сейчас делаю так и...

Pandas - сохранить формат данных при записи в файл csv
При сохранении фрейма и последующей загрузке преобразовывается формат данных. Подскажите как этого избежать? import pandas as pd d =...

Вам доступен csv файл data.csv, содержащий информацию в csv формате.Напишите функцию read_csv для чтения данных из файла
Вам доступен CSV-файл data.csv, содержащий информацию в csv формате. Напишите функцию read_csv для чтения данных из этого файла. Она должна...

15
277 / 226 / 93
Регистрация: 27.06.2016
Сообщений: 639
31.08.2018, 17:11
При чём тут CSV?
И что ожидаем на выходе?
1
Эксперт Python
 Аватар для dondublon
4653 / 2073 / 366
Регистрация: 17.03.2012
Сообщений: 10,183
Записей в блоге: 6
31.08.2018, 17:22
Чем читаете?
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 17:28  [ТС]
Мне просто надо получить данные из CSV и засунуть в массив.
Пример массива который хочу получить:[12:22:45, 0.35674, 25.33305, 1 ]
numpy.loadtxt("Test27.csv", delimiter=";") - вот так я читаю.
0
Эксперт Python
 Аватар для dondublon
4653 / 2073 / 366
Регистрация: 17.03.2012
Сообщений: 10,183
Записей в блоге: 6
31.08.2018, 17:50
Vampiredok, посмотрите параметр converters. Ну и остальные, может, кое-что интересное найдёте.

Добавлено через 1 минуту
alex white, "тут" - это где?
1
Эксперт Python
5438 / 3859 / 1215
Регистрация: 28.10.2013
Сообщений: 9,552
Записей в блоге: 1
31.08.2018, 18:04
Python
1
2
3
4
5
6
7
8
9
10
11
>>> d = StringIO('''
12:22:45; 0.35674; 25.33305; 1
12:22:45; 0.35674; 25.33305; 1
12:22:45; 0.35674; 25.33305; 1'''
)
>>> np.loadtxt(d, dtype=[('1','O'),('2','f8'),('3','f8'),('4','i8')],delimiter=";")
array([('12:22:45', 0.35674, 25.33305, 1),
       ('12:22:45', 0.35674, 25.33305, 1),
       ('12:22:45', 0.35674, 25.33305, 1)],
      dtype=[('1', 'O'), ('2', '<f8'), ('3', '<f8'), ('4', '<i8')])
>>>
P.S. Формат M - datetime - здесь почему-то не работает. Поэтому будет просто строка.

Добавлено через 2 минуты
Ну и в параметре converters - как и указали выше - можно свой конвертер использовать.
1
Эксперт Python
 Аватар для dondublon
4653 / 2073 / 366
Регистрация: 17.03.2012
Сообщений: 10,183
Записей в блоге: 6
31.08.2018, 18:09
Garry Galler, я бы предпочёл сразу converters, чтобы сделать нормальный 2d массив вместо массива рекордов ( ). Впрочем, тут зависит от ситуации.
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 18:09  [ТС]
dondublon, спасибо за помощь.
Однако теперь появилась ошибка: TypeError: strptime() argument 0 must be str, not <class 'bytes'>.
0
Эксперт Python
 Аватар для dondublon
4653 / 2073 / 366
Регистрация: 17.03.2012
Сообщений: 10,183
Записей в блоге: 6
31.08.2018, 18:13
Vampiredok, это странно, он должен читать файл сразу, как текст. Но можете сделать decode на скорую руку.
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 18:24  [ТС]
dondublon, могли бы вы подсказать как сделать decode?
Вот мой код:
Python
1
2
3
4
import numpy
from matplotlib.dates import strpdate2num, num2date
convert = lambda x: num2date(strpdate2num('%H/%M/%S')(x))
numpy.loadtxt("Data2.csv", delimiter=";", converters={0:convert})
0
Эксперт Python
 Аватар для dondublon
4653 / 2073 / 366
Регистрация: 17.03.2012
Сообщений: 10,183
Записей в блоге: 6
31.08.2018, 18:36
Python
1
x.decode()
Формат даты, похоже, не тот, да и matplotlib для этого тянуть - слишком сильное средство.
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 18:44  [ТС]
Пишет: NameError: name 'x' is not defined
А какой формат лучше выбрать?
0
Эксперт Python
5438 / 3859 / 1215
Регистрация: 28.10.2013
Сообщений: 9,552
Записей в блоге: 1
31.08.2018, 18:50
Лучший ответ Сообщение было отмечено Vampiredok как решение

Решение

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
from io  import StringIO
from datetime import timedelta
import time
import numpy as np
 
d = StringIO('''
12:22:45; 0.35674; 25.33305; 1
12:22:45; 0.35674; 25.33305; 1
12:22:45; 0.35674; 25.33305; 1'''
)
 
def str2delta(s:str,fmt:str='%H:%M:%S'):
    t = time.strptime(s,fmt)
    td = timedelta(hours=t.tm_hour, minutes=t.tm_min, seconds=t.tm_sec)
    return td
 
result = np.loadtxt(d, 
    converters={
        # конвертер для нулевого столбца - duration превращаем в обычные секунды
        0:lambda s:str2delta(s.decode('utf8')).total_seconds(),
        },
    delimiter=";"
)
 
print(result)
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 19:02  [ТС]
Garry Galler, спасибо за код.
Однако у меня возникает вопрос как теперь можно это число 4.456500e+04 конвертировать в человеческую дату обратно?
Ps: Я совсем зеленый, начал изучать питон в этот понедельник.
0
Эксперт Python
5438 / 3859 / 1215
Регистрация: 28.10.2013
Сообщений: 9,552
Записей в блоге: 1
31.08.2018, 19:25
Цитата Сообщение от Vampiredok Посмотреть сообщение
число 4.456500e+04 конвертировать в человеческую дату обратно?
В строку формата "H:M:S"?
Python
1
2
3
>>> str(timedelta(seconds=4.456500e+04))
'12:22:45'
>>>
1
0 / 0 / 0
Регистрация: 13.06.2018
Сообщений: 59
31.08.2018, 19:28  [ТС]
Garry Galler, еще раз спасибо
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
31.08.2018, 19:28
Помогаю со студенческими работами здесь

Какой формат базы данных DSN Access (атрибуты и типы данных)?
В настройках IIS можно выбирать формат журнала, один из форматов - это DSN Access, то есть события журналируются в базу данных. Так вот,...

Формат вывода, типы данных

Вставка данных из внешнего файла (формат CSV)
Здравствуйте. Не удаётся вставить данные в таблицу из внешнего файла (файл имеет формат CSV). Выдаётся ошибка: *** ERROR 1290 (HY000):...

Excel VBA экспорт в формат CSV с разделением данных через запятую в одном столбце
Добрый день. Есть XLTM файл из которого нужно экспортировать данные из столбцов &quot;В&quot; и &quot;М&quot; в формат CSV причем так,...

Предопределенные типы переменных. Простые типы данных. Пользовательские типы данных
Лабораторная работа №6. Тема: Предопределенные типы переменных. Простые типы данных. Пользовательские типы данных.(лекция) ...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
16
Ответ Создать тему
Новые блоги и статьи
делаю науч статью по влиянию грибов на сукцессию
anaschu 13.03.2026
прикрепляю статью
SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++
8Observer8 10.03.2026
Содержание блога Финальные проекты на Си и на C++: hello-sdl3-c. zip hello-sdl3-cpp. zip Результат:
Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE
8Observer8 10.03.2026
Содержание блога MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .
Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки
Neotwalker 08.03.2026
Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .
Модульная разработка через nuget packages
DevAlt 07.03.2026
Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .
Модульный подход на примере F#
DevAlt 06.03.2026
В блоге дяди Боба наткнулся на такое определение: В этой книге («Подход, основанный на вариантах использования») Ивар утверждает, что архитектура программного обеспечения — это структуры,. . .
Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование
8Observer8 05.03.2026
Содержание блога Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .
SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D
8Observer8 04.03.2026
Содержание блога Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip На первой гифке отладочные линии отключены, а на второй включены:. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru