|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
||||||
Как сохранить модель keras?03.02.2021, 09:35. Показов 4631. Ответов 16
Доброго времени суток, есть модель keras, при попытке сохранить через pickle вылетает ошибка:
TypeError: can't pickle _thread.RLock objects При попытке сохранить базовыми средствами keras:
Traceback (most recent call last): File "main.py", line 677, in run.main() File "main.py", line 673, in main model = load_model("model.h5") File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\engine\ saving.py", line 229, in load_model model_config = json.loads(model_config.decode('utf-8')) AttributeError: 'str' object has no attribute 'decode' Что я не так делаю?
0
|
||||||
| 03.02.2021, 09:35 | |
|
Ответы с готовыми решениями:
16
Keras - классификация текста - оверфиттинг, и как улучшить модель Как уменьшить размер тензора keras? Как сохранить модель Компас из V16 в V12? |
|
533 / 438 / 47
Регистрация: 17.07.2013
Сообщений: 2,236
|
|
| 03.02.2021, 18:57 | |
|
0
|
|
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|
| 04.02.2021, 20:22 [ТС] | |
|
Да, читал документацию
Дело в том, что при использовании версии h5py==3.0.0 и выше вылетает ошибка: AttributeError: 'str' object has no attribute 'decode' А при использовании версий ниже летит: AttributeError: 'NoneType' object has no attribute 'get'
0
|
|
|
533 / 438 / 47
Регистрация: 17.07.2013
Сообщений: 2,236
|
|
| 04.02.2021, 21:07 | |
|
0
|
|
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|
| 04.02.2021, 22:51 [ТС] | |
|
У меня Python 3.7.0, tensorflow 1.12.0, h5py 2.9.0
Но все равно при попытке загрузки модели получаю: Traceback (most recent call last): File "main.py", line 679, in <module> run.main() File "main.py", line 674, in recognition model = load_model("main.h5") File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\engine\ saving.py", line 230, in load_model model = model_from_config(model_config, custom_objects=custom_objects) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\engine\ saving.py", line 310, in model_from_config return deserialize(config, custom_objects=custom_objects) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\layers\ serialization.py", line 64, in deserialize printable_module_name='layer') File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\utils\g eneric_utils.py", line 173, in deserialize_keras_object list(custom_objects.items()))) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\engine\ network.py", line 1292, in from_config process_layer(layer_data) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\engine\ network.py", line 1278, in process_layer layer = deserialize_layer(layer_data, custom_objects=custom_objects) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\layers\ serialization.py", line 64, in deserialize printable_module_name='layer') File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\utils\g eneric_utils.py", line 173, in deserialize_keras_object list(custom_objects.items()))) File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\layers\ core.py", line 800, in from_config printable_module_name='function in Lambda layer') File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow\python\keras\utils\g eneric_utils.py", line 190, in deserialize_keras_object fn = module_objects.get(function_name) AttributeError: 'NoneType' object has no attribute 'get'
0
|
|
|
533 / 438 / 47
Регистрация: 17.07.2013
Сообщений: 2,236
|
||
| 05.02.2021, 09:51 | ||
|
Сделайте отладочный кусок программы - из десятка строк создайте, сохраните и загрузите модель. Разбираться в сотнях строках Вашей программы времени и желания нет
0
|
||
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
||||||
| 05.02.2021, 19:09 [ТС] | ||||||
K=from tensorflow.keras import backend as K
0
|
||||||
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|
| 06.02.2021, 01:24 [ТС] | |
|
Хотя странно, простая модель для классификации mnist легко сохранилась
0
|
|
|
533 / 438 / 47
Регистрация: 17.07.2013
Сообщений: 2,236
|
|
| 06.02.2021, 09:48 | |
|
0
|
|
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|
| 06.02.2021, 10:16 [ТС] | |
|
X.shape = (20000, 2, 1, 56, 46)
Y.shape = (20000, 1)
0
|
|
|
|
||||||||||||
| 06.02.2021, 16:24 | ||||||||||||
Сообщение было отмечено Andrei_ как решение
Решение
Правда, ошибка будет и в этом случае, но уже задуманная самими разработчиками:
P.S. А вообще нужно использовать более свежую версию tensorflow. Та что у тебя, видимо, имеет или баги или просто не умеет сохранять некоторые модели.
0
|
||||||||||||
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|||||||||||||||||||||
| 07.02.2021, 01:16 [ТС] | |||||||||||||||||||||
|
Нет, там такого нет:
https://github.com/f040225/ten... 7/CPU/sse2 Добавлено через 24 минуты Установил посвежее версию-2.0.0, это самая свежая версия CPU, которую я смог найти История та же:
Здесь все падает на 208 строке: File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow_core\python\keras\ut ils\generic_utils.py", line 208, in deserialize_keras_object obj = module_objects.get(object_name) AttributeError: 'NoneType' object has no attribute 'get' Но, что интересно, в файле generic_utils.py на 162 строке такая проверка есть:
Дописал проверку, но теперь obj=None:
File "C:\Users\user\AppData\Local\Programs\Py thon\Python37\lib\site-packages\tensorflow_core\python\keras\ut ils\generic_utils.py", line 212, in deserialize_keras_object raise ValueError('Unknown ' + printable_module_name + ':' + object_name) ValueError: Unknown function in Lambda layer:euclidean_distance Видимо я неправильно Lambda-слой объявил
0
|
|||||||||||||||||||||
|
|
|||||||
| 07.02.2021, 01:17 | |||||||
0
|
|||||||
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|||||||||||
| 07.02.2021, 01:20 [ТС] | |||||||||||
|
Я оставил только самую свежую версию tensorflow
Вот, к слову, Lambda-слой, на который и жалуется tensorflow:
Функция euclidean_distance(находится в классе):
0
|
|||||||||||
|
|
|||||||
| 07.02.2021, 01:23 | |||||||
0
|
|||||||
|
0 / 0 / 0
Регистрация: 04.08.2020
Сообщений: 231
|
|
| 07.02.2021, 01:58 [ТС] | |
|
А откуда вы ее ставили?
0
|
|
| 07.02.2021, 01:58 | |
|
Помогаю со студенческими работами здесь
17
Как сохранить координаты маркера из ГуглМап в модель ГеоДжанго? Flask-WTF: как сохранить модель со связью One-to-Many в базу данных? Как отобразить результат модели в keras? Автоматически сохранить модель в файл после внесённых изменений? Как обучить LSTM (Keras) на видео переменной длины? Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
Программный контроль заполнения реквизита табличной части документа
Maks 02.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2.
Задача: реализовать контроль заполнения реквизита "ПричинаСписания". . .
|
wmic не является внутренней или внешней командой
Maks 02.04.2026
Решение:
DISM / Online / Add-Capability / CapabilityName:WMIC~~~~
Отсюда: https:/ / winitpro. ru/ index. php/ 2025/ 02/ 14/ komanda-wmic-ne-naydena/
|
Программная установка даты и запрет ее изменения
Maks 02.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2.
Задача: при создании документов установить период списания автоматически. . .
|
Вывод данных в справочнике через динамический список
Maks 01.04.2026
Реализация из решения ниже выполнена на примере нетипового справочника "Спецтехника" разработанного в конфигурации КА2.
Задача: вывести данные из ТЧ нетипового документа. . .
|
|
Программное заполнения текстового поля в реквизите формы документа
Maks 01.04.2026
Алгоритм из решения ниже реализован на нетиповом документе "ВыдачаОборудованияНаСпецтехнику" разработанного в конфигурации КА2, в дополнении к предыдущему решению.
На форме документа создается. . .
|
К слову об оптимизации
kumehtar 01.04.2026
Вспоминаю начало 2000-х, университет, когда я писал на Delphi. Тогда среди программистов на форумах активно обсуждали аккуратную работу с памятью: нужно было следить за переменными, вовремя. . .
|
Идея фильтра интернета (сервер = слой+фильтр).
Hrethgir 31.03.2026
Суть идеи заключается в том, чтобы запустить свой сервер, о чём я если честно мечтал давно и давно приобрёл книгу как это сделать. Но не было причин его запускать. Очумелые учёные напечатали на. . .
|
Модель здравосоХранения 6. ESG-повестка и устойчивое развитие; углублённый анализ кадрового бренда
anaschu 31.03.2026
В прикрепленном документе раздумья о том, как можно поменять модель в будущем
|