Формирование подходящей выборки данных для обучения сети

@SharpProg · Регистрация: 24.01.2017

Студворк — интернет-сервис помощи студентам

У меня есть некоторые измеренные данные за различные промежутки времени, около 200 параметров на каждое измерение. Некоторые из параметров меняются незначительно с течением времени, а некоторые стохастически.
У некоторых параметров есть дополнительные характеристики, которые можно представить в виде числовой матрицы. Как это можно учесть при обучении сети? Оформить каждый элемент выборки в виде тензора, или нужно приводить к какому-то другом виду? Если это многомерный тензор, то как обучают сеть на такой входной информации?
Почему-то в интернете все обучают сеть на картинках, или простых векторах. У меня же каждый элемент датасета - это тензор. Что делать в таком случае?
Можно ли использовать какую-нибудь прогу для опробования разных архитектур и методов обучения сетей с визуализацией?

@Garry Galler · 02.04.2019, 14:19

Сообщение от SharpProg

Почему-то в интернете все обучают сеть на картинках, или простых векторах.

Картинки, если внимательно изучить примеры, "схлопывают" в одномерный вектор и потом еще стандартизируют.
А с чего вы решили что вам нужна нейросеть? Это вовсе не волшебный ящик, куда положил что хошь и получил о чем подумал. Нейросети мысли не читают, если вы неверно сформулируете для нее задачу - получите ерунду.
Garbage in - garbage out.
Feature engineering\feature selection это та часть айсберга Data Mining, которая дает 99% результата и отнимает 90% времени.
А три строки на Keras это просто вишенка на пироге.

@SharpProg · 02.04.2019, 14:24 **[ТС]**

Нейросеть поможет лучше понять данные. Можно пробовать разные архитектуры и наборы слоёв. И вообще это весело)

@Garry Galler · 02.04.2019, 15:47

Сообщение от SharpProg

Можно пробовать разные архитектуры и наборы слоёв

Ага, особенно, если не понимаешь как это работает, то это действительно весело.
И в той же мере бесполезно.

@Nick07 · 21.05.2019, 09:00

Сообщение от SharpProg

Почему-то в интернете все обучают сеть на картинках, или простых векторах. У меня же каждый элемент датасета - это тензор. Что делать в таком случае?

Картинка - это тензор

Новые блоги и статьи Все статьи Все блоги /
Валидация и контроль данных табличной части документа перед записью Maks 22.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа, разработанного в КА2. Задача: контроль и валидация данных табличной части документа перед записью с учетом регламента компании. . .	Отчёт о затраченных материалах за определенный период с макетом печатной формы Maks 21.04.2026 Отчёт из решения ниже размещён в конфигурации КА2. Задача: разработка отчёта по затраченным материалам за определённый период, с возможностью вывода печатной формы отчёта с шапкой и подвалом. В. . .	Отчёт о спецтехнике находящейся в ремонте Maks 20.04.2026 Отчёт из решения ниже размещен в конфигурации КА2. Задача: отобразить спецтехнику, которая на данный момент находится в ремонте. Есть нетиповой документ "Заявка на ремонт спецтехники" который. . .	Памятка для бота и "визитка" для читателей "Semantic Universe Layer (Слой семантической вселенной)" Hrethgir 19.04.2026 Сгенерировано для краткого описания по случаю сборки и компиляции скелета серверного приложения. И пусть после этого скажут, что статьи сгенерированные AI - туфта и не интересно. И это не реклама -. . .
Запрет удаления строк ТЧ документа при определённом условии Maks 19.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "Аккумуляторы", разработанного в конфигурации КА2. У данного документа есть ТЧ, в которой в зависимости от прав доступа. . .	Модель заражения группы наркоманов alhaos 17.04.2026 Условия задачи сформулированы тут Суть: - Группа наркоманов из 10 человек. - Только один инфицирован ВИЧ. - Колются одной иглой. - Колются раз в день. - Колются последовательно через. . .	Мысли в слух. Про "навсегда". kumehtar 16.04.2026 Подумалось тут, что наверное очень глупо использовать во всяких своих установках понятие "навсегда". Это очень сильное понятие, и я только начинаю понимать край его смысла, не смотря на то что давно. . .	My Business CRM MaGz GoLd 16.04.2026 Всем привет, недавно возникла потребность создать CRM, для личных нужд. Собственно программа предоставляет из себя базу данных клиентов, в которой можно фиксировать звонки, стадии сделки, а также. . .

@SharpProg 7 / 7 / 1 Регистрация: 24.01.2017 Сообщений: 229

	Формирование подходящей выборки данных для обучения сети 01.04.2019, 09:32. Показов 1790. Ответов 4 Метки нет (Все метки) У меня есть некоторые измеренные данные за различные промежутки времени, около 200 параметров на каждое измерение. Некоторые из параметров меняются незначительно с течением времени, а некоторые стохастически. У некоторых параметров есть дополнительные характеристики, которые можно представить в виде числовой матрицы. Как это можно учесть при обучении сети? Оформить каждый элемент выборки в виде тензора, или нужно приводить к какому-то другом виду? Если это многомерный тензор, то как обучают сеть на такой входной информации? Почему-то в интернете все обучают сеть на картинках, или простых векторах. У меня же каждый элемент датасета - это тензор. Что делать в таком случае? Можно ли использовать какую-нибудь прогу для опробования разных архитектур и методов обучения сетей с визуализацией? 0

@SharpProg 7 / 7 / 1 Регистрация: 24.01.2017 Сообщений: 229
	02.04.2019, 14:24 [ТС]
	Нейросеть поможет лучше понять данные. Можно пробовать разные архитектуры и наборы слоёв. И вообще это весело) 0

Опции темы