|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
||||||
Как сохранить модель keras?03.02.2021, 09:35. Показов 4567. Ответов 16
Доброго времени суток, есть модель keras, при попытке сохранить через pickle вылетает ошибка:
TypeError: can't pickle _thread.RLock objects При попытке сохранить базовыми средствами keras:
Traceback (most recent call last): File "main.py", line 677, in run.main() File "main.py", line 673, in main model = load_model("model.h5") File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\engine\ saving.py", line 229, in load_model model_config = json.loads(model_config.decode('utf-8')) AttributeError: 'str' object has no attribute 'decode' Что я не так делаю?
0
|
||||||
| 03.02.2021, 09:35 | |
|
Ответы с готовыми решениями:
16
Keras - классификация текста - оверфиттинг, и как улучшить модель Как уменьшить размер тензора keras? Как сохранить модель Компас из V16 в V12? |
|
533 / 438 / 47
Регистрация: 17.07.2013
Сообщений: 2,236
|
|
| 03.02.2021, 18:57 | |
|
0
|
|
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|
| 04.02.2021, 20:22 [ТС] | |
|
Да, читал документацию
Дело в том, что при использовании версии h5py==3.0.0 и выше вылетает ошибка: AttributeError: 'str' object has no attribute 'decode' А при использовании версий ниже летит: AttributeError: 'NoneType' object has no attribute 'get'
0
|
|
|
533 / 438 / 47
Регистрация: 17.07.2013
Сообщений: 2,236
|
|
| 04.02.2021, 21:07 | |
|
0
|
|
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|
| 04.02.2021, 22:51 [ТС] | |
|
У меня Python 3.7.0, tensorflow 1.12.0, h5py 2.9.0
Но все равно при попытке загрузки модели получаю: Traceback (most recent call last): File "main.py", line 679, in <module> run.main() File "main.py", line 674, in recognition model = load_model("main.h5") File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\engine\ saving.py", line 230, in load_model model = model_from_config(model_config, custom_objects=custom_objects) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\engine\ saving.py", line 310, in model_from_config return deserialize(config, custom_objects=custom_objects) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\layers\ serialization.py", line 64, in deserialize printable_module_name='layer') File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\utils\g eneric_utils.py", line 173, in deserialize_keras_object list(custom_objects.items()))) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\engine\ network.py", line 1292, in from_config process_layer(layer_data) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\engine\ network.py", line 1278, in process_layer layer = deserialize_layer(layer_data, custom_objects=custom_objects) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\layers\ serialization.py", line 64, in deserialize printable_module_name='layer') File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\utils\g eneric_utils.py", line 173, in deserialize_keras_object list(custom_objects.items()))) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\layers\ core.py", line 800, in from_config printable_module_name='function in Lambda layer') File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\utils\g eneric_utils.py", line 190, in deserialize_keras_object fn = module_objects.get(function_name) AttributeError: 'NoneType' object has no attribute 'get'
0
|
|
|
533 / 438 / 47
Регистрация: 17.07.2013
Сообщений: 2,236
|
||
| 05.02.2021, 09:51 | ||
|
Сделайте отладочный кусок программы - из десятка строк создайте, сохраните и загрузите модель. Разбираться в сотнях строках Вашей программы времени и желания нет
0
|
||
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
||||||
| 05.02.2021, 19:09 [ТС] | ||||||
K=from tensorflow.keras import backend as K
0
|
||||||
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|
| 06.02.2021, 01:24 [ТС] | |
|
Хотя странно, простая модель для классификации mnist легко сохранилась
0
|
|
|
533 / 438 / 47
Регистрация: 17.07.2013
Сообщений: 2,236
|
|
| 06.02.2021, 09:48 | |
|
0
|
|
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|
| 06.02.2021, 10:16 [ТС] | |
|
X.shape = (20000, 2, 1, 56, 46)
Y.shape = (20000, 1)
0
|
|
|
|
||||||||||||
| 06.02.2021, 16:24 | ||||||||||||
Сообщение было отмечено Andrei_ как решение
Решение
Правда, ошибка будет и в этом случае, но уже задуманная самими разработчиками:
P.S. А вообще нужно использовать более свежую версию tensorflow. Та что у тебя, видимо, имеет или баги или просто не умеет сохранять некоторые модели.
0
|
||||||||||||
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|||||||||||||||||||||
| 07.02.2021, 01:16 [ТС] | |||||||||||||||||||||
|
Нет, там такого нет:
https://github.com/f040225/ten... 7/CPU/sse2 Добавлено через 24 минуты Установил посвежее версию-2.0.0, это самая свежая версия CPU, которую я смог найти История та же:
Здесь все падает на 208 строке: File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow_core\python\keras\ut ils\generic_utils.py", line 208, in deserialize_keras_object obj = module_objects.get(object_name) AttributeError: 'NoneType' object has no attribute 'get' Но, что интересно, в файле generic_utils.py на 162 строке такая проверка есть:
Дописал проверку, но теперь obj=None:
File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow_core\python\keras\ut ils\generic_utils.py", line 212, in deserialize_keras_object raise ValueError('Unknown ' + printable_module_name + ':' + object_name) ValueError: Unknown function in Lambda layer:euclidean_distance Видимо я неправильно Lambda-слой объявил
0
|
|||||||||||||||||||||
|
|
|||||||
| 07.02.2021, 01:17 | |||||||
0
|
|||||||
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|||||||||||
| 07.02.2021, 01:20 [ТС] | |||||||||||
|
Я оставил только самую свежую версию tensorflow
Вот, к слову, Lambda-слой, на который и жалуется tensorflow:
Функция euclidean_distance(находится в классе):
0
|
|||||||||||
|
|
|||||||
| 07.02.2021, 01:23 | |||||||
0
|
|||||||
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|
| 07.02.2021, 01:58 [ТС] | |
|
А откуда вы ее ставили?
0
|
|
| 07.02.2021, 01:58 | |
|
Помогаю со студенческими работами здесь
17
Как сохранить координаты маркера из ГуглМап в модель ГеоДжанго? Flask-WTF: как сохранить модель со связью One-to-Many в базу данных? Как отобразить результат модели в keras? Автоматически сохранить модель в файл после внесённых изменений? Как обучить LSTM (Keras) на видео переменной длины? Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
SDL3 для Web (WebAssembly): сборка C/C++ проекта из консоли
8Observer8 30.01.2026
Содержание блога
Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
|
Установка Emscripten SDK (emsdk) и CMake на Windows для сборки C и C++ приложений в WebAssembly (Wasm)
8Observer8 30.01.2026
Чтобы скачать Emscripten SDK (emsdk) необходимо сначало скачать и уставить Git: Install for Windows. Следуйте стандартной процедуре установки Git через установщик. Система контроля версиями Git. . .
|
Подключение Box2D v3 к SDL3 для Android: физика и отрисовка коллайдеров
8Observer8 29.01.2026
Содержание блога
Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .
|
Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT
bedvit 28.01.2026
Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования.
Часть библиотеки BedvitCOM
Использованы. . .
|
|
Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL_LoadPNG (без SDL3_image)
8Observer8 28.01.2026
Содержание блога
SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .
|
Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL3_image
8Observer8 27.01.2026
Содержание блога
SDL3_image - это библиотека для загрузки и работы с изображениями. Эта пошаговая инструкция покажет, как загрузить и вывести на экран смартфона картинку с альфа-каналом, то есть с. . .
|
Влияние грибов на сукцессию
anaschu 26.01.2026
Бифуркационные изменения массы гриба происходят тогда, когда мы уменьшаем массу компоста в 10 раз, а скорость прироста биомассы уменьшаем в три раза. Скорость прироста биомассы может уменьшаться за. . .
|
Воспроизведение звукового файла с помощью SDL3_mixer при касании экрана Android
8Observer8 26.01.2026
Содержание блога
SDL3_mixer - это библиотека я для воспроизведения аудио. В отличие от инструкции по добавлению текста код по проигрыванию звука уже содержится в шаблоне примера. Нужно только. . .
|