Как хранить веса связей многослойной нейронной сети после обучения?

@Volodya_ · Регистрация: 20.02.2018

Студворк — интернет-сервис помощи студентам

Форумчане, здравствуйте!

Подскажите пожалуйста как лучше хранить веса связей многослойной нейронной сети после обучения?
Я только пытаюсь "въехать" в данное направление. В моём дилетантском представлении их нужно записывать в таблицу БД и для каждого слоя должна быть своя таблица БД. А может всё в одну таблицу запихнуть? Не знаю.
У кого есть опыт или кто сталкивался с данным вопросом посоветуйте пожалуйста.

@Mikhaylo · 09.08.2018, 04:55

Ответ короткий: засуньте в GPU, там обменные скорости на шесть порядков выше. )))

@Volodya_ · 09.08.2018, 18:18 **[ТС]**

Сообщение от Mikhaylo

Ответ короткий: засуньте в GPU, там обменные скорости на шесть порядков выше. )))

Не понял ответа.
После обучения, т.е после того как мы уже вычислили нужные нам веса, нам же нужно где-то их хранить, чтобы каждый раз не пересчитывать. Вот что я имею ввиду.

@VTsaregorodtsev · 09.08.2018, 19:25

Сообщение от Volodya_

как лучше хранить веса связей многослойной нейронной сети после обучения?

В двоичном файле Вашего собственного формата. Формат делаете таким, чтобы он удобно лёг на процедурную или объектную логику Вашей программы.
Т.е. если ООПа нет - то можно в начало файла положить все счётчики (число слоёв, число нейронов в каждом слое), а затем все веса (а при чтении их читать тогда, когда прочитали предыдущие счётчики и в соответствии с их значениями выделили нужные куски памяти). Если же ООП есть - сначала идёт счётчик числа слоёв, затем то, что будет читаться классом слоя (число нейронов в нём и их веса) - т.е. веса в файле будут чередоваться послойно с другими данными (счётчиками).
А тазы банных тут идут лесом.

@Volodya_ · 09.08.2018, 19:41 **[ТС]**

VTsaregorodtsev, у меня ООП.
Если можно ещё пара уточняющих вопросов.

Сообщение от VTsaregorodtsev

Если же ООП есть - сначала идёт счётчик числа слоёв

1. Счётчик для определения к какому слою относятся веса и др. инф-я?

Сообщение от VTsaregorodtsev

затем то, что будет читаться классом слоя (число нейронов в нём и их веса) - т.е. веса в файле будут чередоваться послойно с другими данными (счётчиками).

2. Число нейронов нужно чтобы автоматически инициализировать объекты слоя?

@VTsaregorodtsev · 09.08.2018, 19:59

Под "счётчиком" я имел в виду значение целочисленной переменной, в которой лежит общее количество чего-то

Т.е. "счётчик"<>"индекс".
У каждого слоя сохранять его индекс совсем не нужно.

Иными словами. Я (для ООП) предлагал структуру вида:
1) Число входов сети
2) Число слоёв
3а) Число нейронов в слое1
3б) Веса слоя1 (а число их при чтении рассчитаем как произведение числа входов слоя на число нейронов в нём, плюс бивисы)
4а) Число нейронов в слое2
4б) Веса слоя2
...

Естественно, если есть другие переменные или флаги (например, те, которые будут задавать нелинейности у нейронов в том или ином слое) - они будут сохраняться или где-то в начальном=общем "заголовке" файла, или внутри "послойного" блока информации.

@Volodya_ · 09.08.2018, 20:16 **[ТС]**

VTsaregorodtsev, спасибо!

@Mikhaylo · 10.08.2018, 20:57

Сообщение от Volodya_

Не понял ответа.
После обучения, т.е после того как мы уже вычислили нужные нам веса, нам же нужно где-то их хранить, чтобы каждый раз не пересчитывать. Вот что я имею ввиду.

Не понял вопроса.
Данные хранят в памяти, в виде массива, например. А база данных - это частный случай, когда нужно, чтобы к одним и тем же данным имели доступ тысячи клиентов одновременно. Там скорости на порядки меньше, они негодны.

@Volodya_ · 10.08.2018, 21:04 **[ТС]**

Сообщение от Mikhaylo

Данные хранят в памяти, в виде массива, например. А база данных - это частный случай, когда нужно, чтобы к одним и тем же данным имели доступ тысячи клиентов одновременно. Там скорости на порядки меньше, они негодны.

Но мы же после обучения рассчитанные веса будем применять не один раз, а много раз для разных случаев. И если мы их будем просто записывать в массив (оперативную память), то нам их придётся рассчитывать каждый раз заново, т.е. по сути каждый раз заново учить нейронку - это же не рационально.
Лучше обучить, записать, а потом использовать когда нужно.

@Mikhaylo · 10.08.2018, 21:06

Сохраните в файл. Изучите бинарные файловые потоки и всё такое.

@Konst2016 · 13.01.2020, 16:41

json делают.

Новые блоги и статьи Все статьи Все блоги /
Отчёт о затраченных материалах за определенный период с макетом печатной формы Maks 21.04.2026 Отчёт из решения ниже размещён в конфигурации КА2. Задача: разработка отчёта по затраченным материалам за определённый период, с возможностью вывода печатной формы отчёта с шапкой и подвалом. В. . .	Отчёт о спецтехнике находящейся в ремонте Maks 20.04.2026 Отчёт из решения ниже размещен в конфигурации КА2. Задача: отобразить спецтехнику, которая на данный момент находится в ремонте. Есть нетиповой документ "Заявка на ремонт спецтехники" который. . .	Памятка для бота и "визитка" для читателей "Semantic Universe Layer (Слой семантической вселенной)" Hrethgir 19.04.2026 Сгенерировано для краткого описания по случаю сборки и компиляции скелета серверного приложения. И пусть после этого скажут, что статьи сгенерированные AI - туфта и не интересно. И это не реклама -. . .	Запрет удаления строк ТЧ документа при определённом условии Maks 19.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "Аккумуляторы", разработанного в конфигурации КА2. У данного документа есть ТЧ, в которой в зависимости от прав доступа. . .
Модель заражения группы наркоманов alhaos 17.04.2026 Условия задачи сформулированы тут Суть: - Группа наркоманов из 10 человек. - Только один инфицирован ВИЧ. - Колются одной иглой. - Колются раз в день. - Колются последовательно через. . .	Мысли в слух. Про "навсегда". kumehtar 16.04.2026 Подумалось тут, что наверное очень глупо использовать во всяких своих установках понятие "навсегда". Это очень сильное понятие, и я только начинаю понимать край его смысла, не смотря на то что давно. . .	My Business CRM MaGz GoLd 16.04.2026 Всем привет, недавно возникла потребность создать CRM, для личных нужд. Собственно программа предоставляет из себя базу данных клиентов, в которой можно фиксировать звонки, стадии сделки, а также. . .	Знаешь почему 90% людей редко бывают счастливыми? kumehtar 14.04.2026 Потому что они ждут. Ждут выходных, ждут отпуска, ждут удачного момента. . . а удачный момент так и не приходит.

@Volodya_ 15 / 13 / 3 Регистрация: 20.02.2018 Сообщений: 446

	Как хранить веса связей многослойной нейронной сети после обучения? 08.08.2018, 17:42. Показов 10175. Ответов 10 Метки нейронная сеть, нейросеть (Все метки) Форумчане, здравствуйте! Подскажите пожалуйста как лучше хранить веса связей многослойной нейронной сети после обучения? Я только пытаюсь "въехать" в данное направление. В моём дилетантском представлении их нужно записывать в таблицу БД и для каждого слоя должна быть своя таблица БД. А может всё в одну таблицу запихнуть? Не знаю. У кого есть опыт или кто сталкивался с данным вопросом посоветуйте пожалуйста. 0

@Mikhaylo 691 / 575 / 75 Регистрация: 20.09.2014 Сообщений: 3,750
	09.08.2018, 04:55
	Ответ короткий: засуньте в GPU, там обменные скорости на шесть порядков выше. ))) 0

@VTsaregorodtsev 2744 / 1670 / 269 Регистрация: 19.02.2010 Сообщений: 4,426
	09.08.2018, 19:59
	Сообщение было отмечено Volodya_ как решение Решение Под "счётчиком" я имел в виду значение целочисленной переменной, в которой лежит общее количество чего-то Т.е. "счётчик"<>"индекс". У каждого слоя сохранять его индекс совсем не нужно. Иными словами. Я (для ООП) предлагал структуру вида: 1) Число входов сети 2) Число слоёв 3а) Число нейронов в слое1 3б) Веса слоя1 (а число их при чтении рассчитаем как произведение числа входов слоя на число нейронов в нём, плюс бивисы) 4а) Число нейронов в слое2 4б) Веса слоя2 ... Естественно, если есть другие переменные или флаги (например, те, которые будут задавать нелинейности у нейронов в том или ином слое) - они будут сохраняться или где-то в начальном=общем "заголовке" файла, или внутри "послойного" блока информации. 0

@Volodya_ 15 / 13 / 3 Регистрация: 20.02.2018 Сообщений: 446
	09.08.2018, 20:16 [ТС]
	VTsaregorodtsev, спасибо! 0

@Mikhaylo 691 / 575 / 75 Регистрация: 20.09.2014 Сообщений: 3,750
	10.08.2018, 21:06
	Сохраните в файл. Изучите бинарные файловые потоки и всё такое. 0

@Konst2016 7 / 7 / 9 Регистрация: 07.02.2016 Сообщений: 207 Записей в блоге: 53
	13.01.2020, 16:41
	json делают. 0

Как хранить веса связей многослойной нейронной сети после обучения?

Решение