Быстрота QByteArray::append()

@Koptina · Регистрация: 30.09.2017

Студворк — интернет-сервис помощи студентам

Для начала схема: есть слушалка, она биндиться на порт, как только пакет пришёл - пишет его в очередь на обработку, в потоке обработчика он забирает 1 пакет из очереди мурыжит его по-всякому, после чего нужно записать его в накомпляющий буфер.

Ситуация такая

Принимаю пакеты, которые пронумерованы, от 1 до 255 и так заново, принимаю по UDP, при этом они 100% высылаются и доходят.

Но есть такая проблема.

Мне нужно обработать пакет и с этим всё ок, и какую-то часть, например, 50 байт из 80 (условно) записать в накапливающий буфер, который запишет это всё в файл, как станет равен 1 мегабайту.

Так вот, пополняю я буфер примерно следующим образом:

C++ (Qt)
1
buffer.apend(datagram)

; Если что, то в его качестве я использую

C++ (Qt)
1
QByteArray buffer;

и ставлю проверку, что

C++ (Qt)
1
 buffer.size <=1024*1024

(может, нужно делать это буфер по-другому? грамотнее как-то. если да, то как правильно).

И вот тут где-то проблема, если убрать это добавление, то пакеты не будут теряться, т.е. писалка примет и запишет в очередь (из которой пакеты берутся на обработку) всё, но при использовании append() иногда теряются пакеты. Такое ощущение, что эта операция занимает слишком много времени что ли. Например, если я поставлю вывод какой-нибудь или подобное, то всё ок. А если напишу

C++ (Qt)
1
buffer.append("a")

(казалось бы, один символ),
то всё равно часть пакетов будет теряться (т.е. они не прочитаются и не запишутся в будущем в очередь). И я не могу понять, в чём дело. Что-то надо использовать вместо append? Или я что-то неправильно делаю? В общем, буду признателен за подсказки

@Dmitriy_M · 12.04.2018, 13:40

append тут не виноват. Проблема в вашем коде и UDP

@Koptina · 12.04.2018, 13:58 **[ТС]**

Dmitriy_M, допустим, но почему при таком все пакеты принимаются:

C++ (Qt)
1
2
3
4
5
6
7
8
9
 if (m >= 1024*1024) 
{
   m = 0; 
}
 else
      
     m += 2*5+78*94+ 1*3*5*5*4*46 + 1*2*3*4*5*6*8;
 
}

а при таком часть не принимается:

C++ (Qt)
1
2
3
4
5
6
7
8
9
 if (buffer.size() >= 1024*1024)
{
  
        buffer = buffer.clear();
     }
 else
      buffer.append("a");
 
}

@Dmitriy_M · 13.04.2018, 11:43

Я не телепат, что бы не видя всего кода, говорить, где у вас косяк. Тем более, если buffer это QByteArray, то и компилироваться не должно, т.к. void QByteArray::clear() ничего не возвращает.

@icpu · 13.04.2018, 12:37

Если у тебя буффер в мегабайт, делай своему буфферу reserve в мегабайт, а лучше в полтора. А ещё нужно собирать в релизе и смотреть профилировщиком, где нашлось бутылочное горлышко.

oxotnik · 16.04.2018, 22:05

разнести по разным потокам сокет и парсер, чтобы парсер не лочил тред сокета во время обработки.

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Web (WebAssembly): Работа со звуком через SDL3_mixer 8Observer8 08.02.2026 Содержание блога Пошагово создадим проект для загрузки звукового файла и воспроизведения звука с помощью библиотеки SDL3_mixer. Звук будет воспроизводиться по клику мышки по холсту на Desktop и по. . .	SDL3 для Web (WebAssembly): Основы отладки веб-приложений на SDL3 по USB и Wi-Fi, запущенных в браузере мобильных устройств 8Observer8 07.02.2026 Содержание блога Браузер Chrome имеет средства для отладки мобильных веб-приложений по USB. В этой пошаговой инструкции ограничимся работой с консолью. Вывод в консоль - это часть процесса. . .	SDL3 для Web (WebAssembly): Обработчик клика мыши в браузере ПК и касания экрана в браузере на мобильном устройстве 8Observer8 02.02.2026 Содержание блога Для начала пошагово создадим рабочий пример для подготовки к экспериментам в браузере ПК и в браузере мобильного устройства. Потом напишем обработчик клика мыши и обработчик. . .	Философия технологии iceja 01.02.2026 На мой взгляд у человека в технических проектах остается роль генерального директора. Все остальное нейронки делают уже лучше человека. Они не могут нести предпринимательские риски, не могут. . .
SDL3 для Web (WebAssembly): Вывод текста со шрифтом TTF с помощью SDL3_ttf 8Observer8 01.02.2026 Содержание блога В этой пошаговой инструкции создадим с нуля веб-приложение, которое выводит текст в окне браузера. Запустим на Android на локальном сервере. Загрузим Release на бесплатный. . .	SDL3 для Web (WebAssembly): Сборка C/C++ проекта из консоли 8Observer8 30.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .	SDL3 для Web (WebAssembly): Установка Emscripten SDK (emsdk) и CMake для сборки C и C++ приложений в Wasm 8Observer8 30.01.2026 Содержание блога Для того чтобы скачать Emscripten SDK (emsdk) необходимо сначало скачать и уставить Git: Install for Windows. Следуйте стандартной процедуре установки Git через установщик. . . .	SDL3 для Android: Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 29.01.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .

@Dmitriy_M 1443 / 1326 / 131 Регистрация: 20.03.2009 Сообщений: 4,689 Записей в блоге: 11
	12.04.2018, 13:40
	append тут не виноват. Проблема в вашем коде и UDP 0

@Dmitriy_M 1443 / 1326 / 131 Регистрация: 20.03.2009 Сообщений: 4,689 Записей в блоге: 11
	13.04.2018, 11:43
	Я не телепат, что бы не видя всего кода, говорить, где у вас косяк. Тем более, если buffer это QByteArray, то и компилироваться не должно, т.к. void QByteArray::clear() ничего не возвращает. 0

@icpu 487 / 365 / 93 Регистрация: 10.03.2011 Сообщений: 1,513 Записей в блоге: 5
	13.04.2018, 12:37
	Если у тебя буффер в мегабайт, делай своему буфферу reserve в мегабайт, а лучше в полтора. А ещё нужно собирать в релизе и смотреть профилировщиком, где нашлось бутылочное горлышко. 0

oxotnik 1665 / 1134 / 80 Регистрация: 21.08.2008 Сообщений: 4,734 Записей в блоге: 1
	16.04.2018, 22:05
	разнести по разным потокам сокет и парсер, чтобы парсер не лочил тред сокета во время обработки. 0