Запись на SD карту в bin файл

День добрый, возникла такая проблема:

Написал программу, которая делает следующее: принимает данные из UDP и пишет в файл на SD карте.
Есть два варианта записи: 1) в bin файл, просто содержимое пакетов
2) в pcap файл (вместе с pcap заголовками и ethernet заголовками)

По сути в способе записи разницы практически и нету.

Но получается следующее:
Ставлю карту на 64 гига, работают оба способа.
Ставлю карту на 256 гигов, запись pcap работает, а запись bin - файл создает, а внутрь ничего не пишет.

Обе карты форматнул в формат ext, монтирую командой umount.
Разница только в том, что 1ю я форматнул из под виртуалки с 16й ubuntu, а вторую из под арма с 14й ubuntu.

Подскажите пожалуйста, в чем может быть проблема со 2 флешкой

Добавлено через 1 час 55 минут
Уточню.
Проблема не повторяется от раза к разу. После нескольких выниманий флешки и ребутов арма - вроде начало нормально писать.
Но ошибка иногда повторяется.

От чего это может зависеть?

0

umount() всегда нормально завершается? Возвращаемое значение анализируете?
Можно ещё перед umount() выполнить sync() на всякий случай.

0

Humanoid, Вроде нормально, ошибок не выдает.
Да и между разными вариантами записи я не делаю umount.
Т.е. когда пишу в файл с расширением pcap при помощи fprintf, все ок, затем безо всякого umount пытаюсь писать в файл с расширением bin - файл создает, но не пишет.

Команду использую одну и ту же по идее.

0

А вы не забываете закрывать файл через fclose() ? Просто файл создаётся при открытии. При записи данные вначале попадают в буфер в оперативной памяти, и только когда буфер заполняется или происходит закрытие файла, то тогда данные записываются на диск. Так же, если файл не закрыть, а внезапно отключить носитель информации, то тоже он может оказаться пустым (я такое ещё давно на NTFS наблюдал).
В общем, поведение очень похоже на то, что файл не закрывается. Может, у вас в коде какое-то условие есть, по которому вы прерываете запись, а сразу отключаете SD-карту? Хотя, при открытом файле umount() не должен проходить.
Проверьте ещё, что при вызове fprintf() указываете правильный файловый дескриптор. У меня других идей нет.

0

Humanoid, Да, причем открытие происходит, когда udp connect есть, т.е. с соединением все в порядке.
Носитель я до fclose точно не отключаю.
А насчет буффера - я с таким тоже сталкивался, но сомневаюсь, что тут такая ситуация. Как минимум по двум причинам: 1) запись в pcap проходит нормально, т.е. я в реальном времени вижу как изменяется место на карте; 2) на другой сд карте даже при записи в bin я вижу так же изменение размеров.

Мне кажется, что тут есть что-то, что я не учитываю и что зависит скорее от sd карты или системы. Например если ее форматнуть с 16й убунты, то после этого она сразу начинает писать. А вот как повторить такую ошибку - я пока не разобрался

0

Может, стоит писать на создавая файловой системы? Считать потом сырой файл через dd и анализировать без спешки

0

COKPOWEHEU, Это как? поясните пожалуйста?

0

например так

0

COKPOWEHEU, а понял, у меня mmcblk2p1, но думаю принципиально это ничего не меняет... попробовать можно. Хотя звучит странно... писать то будет, в другом формате ведь работает все....

0

Только имейте ввиду, что эти действия уничтожат файловую систему.
На мой взгляд, лучше попробовать какие-нибудь костыли с добавлением задержек перед размонтированием, дописать в конец файла пару МБ нулей и т.п. А запись в файл устройства - это не самый хороший вариант. Особенно, когда нужно несколько файлов... фактически, придётся изобретать свою файловую систему.

0

Humanoid, не, такой вариант тогда не пойдет. Мне надо чтобы была стандартная файловая система.
А вот насчет размонтирования я не совсем понимаю - как оно будет влиять?

0

Сообщение от Leardjiny А вот насчет размонтирования я не совсем понимаю - как оно будет влиять?

У вас получается, что портится тот файл, с которым вы работаете в последнюю очередь. Похоже, что это какие-то проблемы при работе с кешами... кеш в stdlib, кеш в файловой системе, возможно, у самой карты тоже есть какое-то кеширование. Поэтому, если вы уверены, что у вас правильная последовательность действий (открыли файл, записали, закрыли), то можно после закрытия файла сразу не отмонтировать ФС, а подождать секунд 10, что ФС успела сбросить свой кеш.

А вообще, я предлагаю написать вам совсем простенькую программу... например:
И проверить, что файл создаётся и имеет правильное содержимое. Если эта программа будет работать правильно, то ищите отличия в последовательности действий.
А если и с этой простой программой файл будет создаваться повреждённым, то тут уже можно начать экспериментировать и искать ситуацию, когда баг не проявляется. Например, перед umount() можно добавить
или добавить
И исходя из результатов можно будет строить какие-то предположения.

Если не секрет... зачем для записи бинарных данных использовать fprintf() ? Конечно, это дело вкуса... но для бинарных данных я бы использовал fwrite().

0

Сообщение от Humanoid У вас получается, что портится тот файл, с которым вы работаете в последнюю очередь.

Я, наверно, неправильно выразился. Тут от порядка как раз не зависит. Т.е. на самом деле ситуация такая:
1) делаю mount;
2) пишу в bin - не работает, файл создается, но не пишется;
3) пишу в pcap - все нормально пишется;
4) в bin - не работает;
5) pcap - работает;
....и таких итераций несколько, причем неважно с какого типа начинать (можно начать с pcap и будет работать так же)
N) в конце уже делаю umount.

Так что ситуация не меняется от того, с какого формата начать, и каким закончить.

Сообщение от Humanoid Если не секрет... зачем для записи бинарных данных использовать fprintf() ? Конечно, это дело вкуса... но для бинарных данных я бы использовал fwrite().

Тут Вы правы, я просто опечатался. В программе C я и вправду делаю fwrite - fprintf я по привычке из matlaba указал выше. Но по сути вот попробовал и его тоже, ничего не поменялось.

0

Сообщение от Leardjiny Тут от порядка как раз не зависит

Тогда добавьте проверку возвращаемых значений функций fwrite() и fclose().
fwrite() должен возвращать количество элементов (3 аргумент)... например, fwrite(buf, 1, 45, f) должен вернуть число 45.
fclose() должен возвращать 0. Если вернул что-то другое, то то это ошибка и нужно анализировать errno.

У убедитесь, что записываете не пустой буфер. А может, просто для bin в коде ошибка и в функции fwrite() указываете нулевой размер. Сразу после вызова fwrite() выведите в консоль отладочную информацию и посмотрите, какие размеры записываются и какой результат вернула функция.

0