|
2 / 2 / 0
Регистрация: 13.07.2017
Сообщений: 63
|
||||||
Чтение и модификация больших JSON файлов09.08.2022, 09:58. Показов 1359. Ответов 3
Есть файлы JSON, в которым мне нужно найти определенные поля , модифицировать их и сохранить обратно. при небольших размерах это не составляет труда, но файлы по размеру могут доходить до 2 гигов и более. все мои поиски по этому делу так или иначе приводят к паре ответов на стаковерфлоу
(https://stackoverflow.com/ques... -in-node-j https://stackoverflow.com/ques... -in-nodejs), но у меня так и не получилось разобраться как со всем этим потом работать. подключил все необходимые библиотеки (JSONStream и JSONStream event-stream) прописал вот такой вариант
т.е. у меня очень большая структура JSON (это проект анимации moho, в котором все данные по ключам и действиям записаны в виде JSON) и мне не надо изменять все, нужно только найти определенные пункты (path, image_path, relativeTo), считать с них данные (по факту я просто буду копировать картинки в новую папку и заменять тут пути) и сохранить новые данные (пути к картинкам) в то же место. вот не могу догнать как сохранить новые данные в то же место, откуда я их считал.
0
|
||||||
| 09.08.2022, 09:58 | |
|
Ответы с готовыми решениями:
3
Чтение и модификация существующего json файла Чтение больших файлов Чтение больших файлов |
|
2 / 2 / 0
Регистрация: 13.07.2017
Сообщений: 63
|
||||||
| 09.08.2022, 10:10 [ТС] | ||||||
|
вот полный код
0
|
||||||
|
2 / 2 / 0
Регистрация: 13.07.2017
Сообщений: 63
|
|
| 09.08.2022, 10:41 [ТС] | |
|
и все это работает только с небольшими объемами. как только я ему подсунул большой файл (1,7Gb) - все сразу сдохло. в консоль вообще не выводится никаких результатов
Добавлено через 21 минуту а нет, все работает, только нужно подождать. но это не проблема.
0
|
|
|
2 / 2 / 0
Регистрация: 13.07.2017
Сообщений: 63
|
|
| 11.08.2022, 15:06 [ТС] | |
|
в общем проблема пришла откуда не ждали... после парсинга JSON и обратного stingyfy() значения "1.0" превращаются в "1", что при открытии в программе приводит к ошибке. так что пошел другим путем, через line-stream. читаю построчно и обрабатываю только нужные мне элементы
0
|
|
| 11.08.2022, 15:06 | |
|
Помогаю со студенческими работами здесь
4
Чтение больших файлов из blob
Чтение в память больших файлов Многопоточное чтение больших файлов Чтение больших текстовых файлов Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
Загрузка PNG-файла с альфа-каналом с помощью библиотеки SDL3_image на Android
8Observer8 27.01.2026
Содержание блога
SDL3_image - это библиотека для загрузки и работы с изображениями. Эта пошаговая инструкция покажет, как загрузить и вывести на экран смартфона картинку с альфа-каналом, то есть с. . .
|
влияние грибов на сукцессию
anaschu 26.01.2026
Бифуркационные изменения массы гриба происходят тогда, когда мы уменьшаем массу компоста в 10 раз, а скорость прироста биомассы уменьшаем в три раза. Скорость прироста биомассы может уменьшаться за. . .
|
Воспроизведение звукового файла с помощью SDL3_mixer при касании экрана Android
8Observer8 26.01.2026
Содержание блога
SDL3_mixer - это библиотека я для воспроизведения аудио. В отличие от инструкции по добавлению текста код по проигрыванию звука уже содержится в шаблоне примера. Нужно только. . .
|
Установка Android SDK, NDK, JDK, CMake и т.д.
8Observer8 25.01.2026
Содержание блога
Перейдите по ссылке: https:/ / developer. android. com/ studio и в самом низу страницы кликните по архиву "commandlinetools-win-xxxxxx_latest. zip"
Извлеките архив и вы увидите. . .
|
|
Вывод текста со шрифтом TTF на Android с помощью библиотеки SDL3_ttf
8Observer8 25.01.2026
Содержание блога
Если у вас не установлены Android SDK, NDK, JDK, и т. д. то сделайте это по следующей инструкции: Установка Android SDK, NDK, JDK, CMake и т. д.
Сборка примера
Скачайте. . .
|
Использование SDL3-callbacks вместо функции main() на Android, Desktop и WebAssembly
8Observer8 24.01.2026
Содержание блога
Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
|
моя боль
iceja 24.01.2026
Выложила интерполяцию кубическими сплайнами www. iceja. net
REST сервисы временно не работают, только через Web.
Написала за 56 рабочих часов этот сайт с нуля. При помощи perplexity. ai PRO , при. . .
|
Модель сукцессии микоризы
anaschu 24.01.2026
Решили писать научную статью с неким РОманом
|