Ускорить работу с формированием запроса - C/C++ - Ответ 9286751

@akrufar · Регистрация: 19.05.2016

Author24 — интернет-сервис помощи студентам

Всем привет!
Помогите решить задачу:
Необходимо добавить через запрос большое количество строк в MySql. Проблему с быстрым добавлением строк за один запрос решается следующим методом:

SQL

1
2

INSERT INTO Provider_Price (A1, A2, .... , An)
VALUES ('текст 11', 'текст 12',  .... , 'текст 1n'), ('текст 2', 'текст 22',  .... , 'текст 2n'), .... , ('текст k1', 'текст k2',  .... , 'текст kn');

т.е. за раз можно добавить много строк, причем скорость в принципе быстрая, чем добавлять построчно.
Проблема сейчас стоит в том, чтобы быстро сформировать этот запрос.
Сейчас формируется через циклический проход по всем строкам из массива строк и добавляется в строку типа AnsiString

C++

AnsiString asSQL;
for(int iRow=1; iRow<=i_RowCount; iRow++){ 
    for(int j = 0; j < slColumnListProviderPrice->Count-1; j++){
        asSQL = asSQL + ", '" + "12345678900987654321" + "'";
    }
}

, где slColumnListProviderPrice - список столбцов таблицы. "12345678900987654321" - данные, которые нужно записать в конкретную ячейку

В данном цикле формируется именно часть ('текст 11', 'текст 12', .... , 'текст 1n'), ('текст 2', 'текст 22', .... , 'текст 2n'), .... , ('текст k1', 'текст k2', .... , 'текст kn').

Так вот при формировании именно таким способом время работы программы при 3000 строках и 18 столбцах составляет примерно в районе 1 минуты, что ОЧЕНЬ долго. когда сама запись в базу уже сформированного запроса занимает меньше 1-2 секунд. Как ускорить формирование такого запроса???

Добавлено через 1 час 0 минут
Для интереса вот время работы:
Время запуска Excel: 3,062 cек.
Время на вычисление кол-ва строк и столбцов: 0,062 cек.
Последний столбец: 18
Последняя строка: 3222
Загрузка данных из Excel в память: 0,375 cек.
Количество загруженных в память строк: 3222
Время на создание запроса: 26,719 cек.
Время на обновление прайса: 0,219 cек.
Общее время импорта: 30,672 cек.

Время на создание запроса включает в себя: поиск позиций в базе по 4 параметрам. Если сам запрос не создавать, то на поиск уходит меньше секунды: Время на поиск товаров: 0,656 cек. При тех же параметрах исходной Excel.
Кто поможет ускорить создание самого запроса???
И второй вопрос: какая максимальная память под запрос может выделяться? Что если в исходном файле будет не 3000 строк и 18 столбцов, а скажем 50 000 строк? + значения ячеек может быть разным. Есть какие-то ограничения? Может стоит добавлять, например, за раз по 10 000 строк ну или как-то контролировать по объему памяти?

Вернуться к обсуждению:
Ускорить работу с формированием запроса C/C++

Следующий ответ

Другие темы раздела
C/C++ GUID и регистрация сервера Изучая com этой статье возникло два вопроса: 1) Как формируется GUID? 2) И как мне, допустим, нужно зарегистрировать сервер, при отправке проекта на другой пк? Что сделать нужно? https://www.cyberforum.ru/ c-cpp/ thread1763474.html	C/C++ Фильтр DirectShow. Query Interface выдает E_NOINTERFACE В общем, ситуация следующая: есть самописный transfer-фильтр DirectShow, который успешно регистрируется в системе и с помощью которого удачно строится граф.DEFINE_GUID(CLSID_GPUTextureFilter, 0x2899ced4, 0x9428, 0x481b, 0xb8, 0x8e, 0x95, 0x98, 0x6b, 0x65, 0x3b, 0x77); class GPUTextureFilter : public CTransformFilter, public IDummyTransfrm { public: static CUnknown* __stdcall...
C/C++ GUID, CLSID, ProgID Что это? Доброго времени суток форумчане. Вот готовлюсь к экзамену и стретился такой вот вопрос. "Понятие и назначение GUID, CLSID, ProgID и т.п." Погуглив я понял что GUID CLSID ProgID это в принцепи одно и тоже. Это 16-байтовое целое число и все такое. Однако в примерах кода я вижу как используют и CLSID и ProgID. И тут я понимаю что это не совсем одно и тоже, иначе в программе не использовалось... https://www.cyberforum.ru/ c-cpp/ thread1750932.html	C/C++ Работа в Excel из VS Добрый день! Пишу программу в Visual Studio. В программе создаю экселевский файл. В него программно записываю данные. Можно теперь с помощью COM & OLE что-нибудь поменять в этом файле: значение ячейки, цвет, шрифт, фон? Приведите, пожалуйста, пример кода, как подключиться и как что-нибудь простое поменять в excel. Несколько лет назад использовала OLE в билдере. Там вроде вообще несложно было. А... https://www.cyberforum.ru/ c-cpp/ thread1750588.html
C/C++ Вкладки на окне Подскажите ,пожалуйста, как создать вкладки на окне:такие как в браузере, например.Или где хотя бы искать материал по этому поводу.	C/C++ Программа всегда открывает один и тот же файл excel https://www.cyberforum.ru/ c-cpp/ thread1742719.html Всем здрасти. Помогите разобраться. Пытаюсь работать с Excel через OLE. Могу считывать данные с вкладок, ячеек, редактировать данные и т.д. Но почему-то всегда программа открывает файл экселя, который был открыт в самый первый раз - например, со старта я работаю с файлом test1.xlsx, провожу с ним необходимые манипуляции, после чего закрываю программу. Затем я хочу открыть файл test2.xslx, но...
C/C++ Ошибка при работе с Excel https://www.cyberforum.ru/ c-cpp/ thread1741323.html Определяю количество занятых ячеек (ячеек с информацией) в столбце файл-Excel, точнее номер последнего занятого столбца. При выполнении следующей команды: //Активация последней известной ячейки v_Var_Sheet.OlePropertyGet("Cells").OlePropertyGet("SpecialCells", 11).OleProcedure("Activate"); //Узнать номер последнего известного столбца int i_ColLast =...	C/C++ Как получить progid dll? Здравствуйте! Возникла проблема, для работы с драйвером принтера нужен progid его класса, dll от драйвера нашел, а вот progid в реестре не могу никак, может кто делал подобное?
C/C++ Bad SAFEARRAY Создаю функцию которая получает данные из объекта типа _variant_t, мне нужно получить из него 2 значения типа double. Я плохо знаю SAFEARRAY, и у меня получилось получать только одно значение, как получить второе я не понимаю :( на скриншоте видно что объект хранит 2 значения. Как их получить? double GetValue_2(_variant_t x){ SAFEARRAY safe = x.parray; VARIANT values = (VARIANT... https://www.cyberforum.ru/ c-cpp/ thread1738504.html	C/C++ Ошибка при выводе в Word https://www.cyberforum.ru/ c-cpp/ thread1735563.html Добрый день. Решил вывести данные в ворд, сначала решил потестить вывод. Написал такой код: Variant vVarApp = CreateOleObject("Word.Application"); vVarApp.OlePropertySet("Visible", true); Variant vVarDocs=vVarApp.OlePropertyGet("Documents"); vVarDocs.OleProcedure("Add"); Variant vVarDoc=vVarDocs.OleFunction("Item",1); vVarDoc.OleProcedure("Activate"); Variant...
C/C++ Построение графика в Exel по данным из файла полученного в ходе выполнения программы Допустим есть программа которая вычисляет значения системы диф ур I(t) и U(t) , затем выводи их в файл xls который создается в папке проекта visual studio 2015 pro, в нем четыре графы i(порядковый номер) t I(t) U(t) выходит по 2000 значений каждого параметра, так вот как по этим значениям построить два графика в этом же файле , графики зависимости I(t) и U(t) , заранее весьма благодарен ...	C/C++ Передача произвольного обьекта com объекту Доброго времени суток. Задача такая. Два приложения, у второго com объект. В первом TTable, TDataSource. Во втором DBgrid. Первое приложение запускает ком обьект второго и должно в качестве параметра передать указатель на DataSourse, который будит работать с TTable. Читал что указатели между разными процессами не имеют смысла. Как реализовать этот механизм? https://www.cyberforum.ru/ c-cpp/ thread1723194.html

	18.06.2016, 12:18