SqLite первые шаги

@Belju · Регистрация: 03.10.2018

Студворк — интернет-сервис помощи студентам

В моем проекте до сих пор куча массивов, решил заменить базой SQlite, но на первом же примере затормозил.
Пример взят отсюда: https://docwiki.embarcadero.co... pplication
При нажатии кнопки Connect в Мемо ничего не появляется, и через пару секунд окно само закрывается, вот код:

C++
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
void __fastcall TForm1::connectButtonClick(TObject* Sender)
{
    // Use double backslash in Windows Paths as the backslash character (\) must be escaped with another one to be treated literally.
    SQLConnection1->Params->Add(
        "D:\\Employees.s3db");
    try {
        // Establish the connection.
        SQLConnection1->Connected = true;
        executeButton->Enabled = true;
        //   connectButton->Enabled = true;
 
        outputMemo->Text = "Connection established!";
    } catch (EDatabaseError &E) {
        ShowMessage("Exception raised with message" + E.Message);
    }
}

База с таким именем существует, библиотеку sqlite3.dll закинул в C:\Windows\SysWOW64, хотя есть там она или нет - ничего не меняет, результат тот же.
В чем дело?

У меня Embarcadero® RAD Studio 11 Version 28.0.48361.3236

Добавлено через 12 минут
Может где то путь прописать надо к этой библиотеке?

@D1973 · 06.02.2024, 17:41

Сообщение от TrollHammer

но в SQLite-е строки заключаются в одинарные кавычки.

SQLite , насколько мне мой склероз не изменяет, это, в общем-то, без разницы, главное, чтобы они одинаковые были

Сообщение от TrollHammer

FDQuery->Active = true;

Для неселективных запросов это просто не имеет смысла: установка свойства Active в true - это то же самое, что выполнить метод Open() - открыть возвращаемый запросом набор данных и позиционироваться на первую запись этого набора. В случае же запроса, выполняющего действие, возвращаемого набора данных просто нет, нечего открывать.

Сообщение от Belju

query->DisposeOf();

Бог мой! Они там вообще справку обновляют? Эта деректива была устаревшей еще в прошлом тысячелетии! Чтобы не быть голословным:

но, поскольку Free() в С++ не используется

заменяем ее на дерективу delete

@Belju · 06.02.2024, 21:09 **[ТС]**

Сообщение от D1973

Для неселективных запросов это просто не имеет смысла: установка свойства Active в true - это то же самое, что выполнить метод Open() - открыть возвращаемый запросом набор данных и позиционироваться на первую запись этого набора.

Действительно, наличие строки FDQuery->Active = true при выполнении всякий раз выскакивает окно предупреждения, хотя все работает как надо, поэтому лучше ее удалить.

Есть ли какая функция для копирования массива в базу, а еще лучше структуры массивов? Или это делается обычным перебором в цикле?

@TrollHammer · 07.02.2024, 08:41

Не по теме:

Сообщение от D1973

Для неселективных запросов это просто не имеет смысла:

Это просто у меня тянется с незапамятных времен, была какая-то ошибка Query, лечилась таким образом. Может уже это и не надо, но привычка...

Добавлено через 4 минуты

Сообщение от Belju

Есть ли какая функция для копирования массива в базу

Если массивы создаются в программе, то циклом. Если из внешнего файла, то запросом в БД.

@Belju · 07.02.2024, 16:11 **[ТС]**

Снова затормозил, как добавить запись если такой вид:

C++
1
2
3
AnsiString a1 =  "Foreget";
// query->SQL->Text = "INSERT INTO Holdem (Name) VALUES (\"Foreget\")";  // ОК
query->SQL->Text = "INSERT INTO Holdem (Name) VALUES (a1)";  //    нужно по другому

@D1973 · 07.02.2024, 18:29

Сообщение от Belju

// нужно по другому

еще бы. Но это уже как бы не относится непосредственно к работе с БД, это элементарнейшие операции с строками.
Тупо как молоток - простейшая конкатенация:

C++
1
query->SQL->Text = "INSERT INTO Holdem (Name) VALUES (" + a1 + ")";

Через строку форматирования:

C++
1
query->SQL->Text = String().sprintf(L"INSERT INTO Holdem (Name) VALUES (%s)", QuotedStr(a1));

Праметрический запрос. Путь самый грамотный, но, на мой взгляд, зачастую несколько избыточный и ненаглядный, хотя, в принципе, эта "избыточность" лихвой окупается в сложных запросах.

C++
1
2
query->SQL->Text = "INSERT INTO Holdem (Name) VALUES (:a1)";
query->Params->ParamByName("a1")->AsString = a1;

@Belju · 07.02.2024, 19:32 **[ТС]**

Сообщение от D1973

это элементарнейшие операции с строками.

По разному пробовал, но до такого не дошел, спасибо.
Есть ли разница в скорости обработки запроса? Массивы больше 100к элементов

@D1973 · 08.02.2024, 07:21

Сообщение от Belju

Массивы больше 100к элементов

Не уверен, что движок FireDAC прожует 100К подряд идущих Инсертов в запросе. Есть 2 пути:
1. Если это разовая процетура - оформить свой массив в виде файла *.CSV и уже этот файл спокойно импортировать в таблицу средствами самой СУБД, не привдекая никаких прослоек в виде C++ Builder-а с его FireDAC-ом
2. Если же такое надо делать регулярно - я бы советовал пересмотреть алгоритм работы. Не может 100К данных взяться единомоментно из ниоткуда: вот и писать эти данные в базу по мере их поступления, а не тогда, когда их уже 100500...

@Belju · 08.02.2024, 13:05 **[ТС]**

Сообщение от D1973

Если же такое надо делать регулярно - я бы советовал пересмотреть алгоритм работы.

Это нужно сделать единожды, причем есть два пути, первый это готовую структуру из 15 массивов перенести в базу, второй - по новой парсить файлы, а их около 5к и около 5 млн строк, и заполнить базу. Для парсинга всех файлов в структуру массивов уходит около 15 минут на компе с Ryzen 7 7700X и около 40мин на ноуте с Ryzen 7 4700U. Потом уже база будет пополняться по мере появления файлов.
Попробую оба способа заполнить базу и потом сюда отпишусь

@Belju · 08.02.2024, 22:24 **[ТС]**

Пробная запись в базу только имен парсингом прошла успешно за 4,5 минуты. С числом записей я ошибся, их чуть меньше 20к, но со временем будет и больше 100к, а файлов и строк столько же как писал выше, и почему то на две записи больше чем в массиве, хотя с массивами может где какая то неточность в коде. Стоит добавить что бэкап файлов хранится на домашнем сервере, а не на ССД компа.
Скрин не получилось в спойлер вставить.
Код такой:

C++
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
for (int w = 0; w < u; w++) {
 .......................................................
........................................................
                                string s = st.substr(0, y - 1);
                                PlayName = s.c_str();
                             query->Connection = FDConnection1;
                            try {
                                query->SQL->Text =
                                    "INSERT INTO Holdem (Name) VALUES (:PlayName)";
                                query->Params->ParamByName("PlayName")
                                    ->AsString = PlayName;
                                query->ExecSQL();
                            } catch (Exception &E) {
                                continue;
                            }
}

Может если бы запрос был короче, то и время ушло бы меньше, но два других примера запросов, подсказанные D1973 у меня не работают.

C++
1
2
3
        AnsiString a1 = "Foreget";
    query->SQL->Text = "INSERT INTO Holdem (Name) VALUES (" + a1 + ")";
        query->SQL->Text = String().sprintf(L"INSERT INTO Holdem (Name) VALUES (%s)", QuotedStr(a1));

Первый нет такого поля
Второй [bcc64 Error] Write_card.cpp(1427): cannot pass object of non-trivial type 'System::UnicodeString' through variadic method; call will abort at runtime

Есть вопросы по запросам)), но не хочу пока никого напрягать

@Belju · 09.02.2024, 22:25 **[ТС]**

Итого имеем окончательный результат:
Парсинг текста, 5к файлов с 5М строк, с сохранение данных в структуру из 21 массива(в каждом 20к элементов), и запись структуры в бинарный файл уходит 15мин 14сек
То же самое сохранение в базе данных потрачено 5мин 52сек
Вывод очевиден, + наглядность и доступ к данным
Тема закрыта! Всем спасибо!

Новые блоги и статьи Все статьи Все блоги /
Запустил конкурс "тем и промптов для текстовых квестов созданных почти чисто ИИ" Adler 06.10.2026 Всем привет! За последние три-четыре дня я создал более 16 текстовых квестовых игр используя преимущественно по одному запросу к ИИ на игру. Мне так понравилось смотреть все ветки/ сцены во всех. . .	ИИ не может найти нужный язык в списке Supersumestria 05.10.2026 Я ему даю вот такое изображение и прошу найти и подчеркнуть немецкий язык. Возвращает он вот это: https:/ / i. **********/ vqBWLe2. png Нужную строчку в 3й колонке просто выдумал. . Это. . .	Новая последняя моя музыка в SUNO zorxor 05.10.2026 Здравствуйте, дорогие мои друзья! С большой радостью я хотел бы представить вам свою новую последнею музыку, которую сгенерировала мне по моей просьбе нейросеть SUNO. С уважением, zorxor. Это. . .	Программный домашний кинотеатр russiannick 27.09.2026 Сподобился на программный домашний кинотеатр. В качестве ЯВУ по традиции выбрал js. В помощники взял Яндекс-Алису. Было создано три зала на разные интересы. исторические и ретро сериал Хичкок. . .
Беседа с ИИ о программистах, недопускающих к созданию и правке кода генеративные ИИ и причины этого zorxor 21.09.2026 Раньше я радовался или получал некоторые эмоции, пусть небольшие, но всё же, от самого процесса написания кода, рекомпиляции и запуска, видя постепенное развитие программы и прочее. А теперь лень. . .	Мобильное приложение ColorStep pavlinmavlin 17.09.2026 Реализовал приложение Красный, Зеленый, Синий в Unity3d + c#. Название изменил на ColorStep. Приложение прошло модерацию и теперь доступно для скачивания. Делал его сам, шаг за шагом — и вот,. . .	Запрет дублирования строк в табличной части Maks 13.09.2026 Реализация из решения ниже выполнена на нетиповом справочнике "Нормы ТО" с табличной часть "Виды ТО", разработанного в КА2, со следующими реквизитами: - ВидТО (СправочникСсылка. ВидыТО); - ВидГСМ. . .	Скрипты Tampermonkey для CyberForum, ChatGPT, Claude и пр. Jin X 06.09.2026 Скрипты Tampermonkey для CyberForum, ChatGPT, Claude и пр. Работая с форумом и нейросетями в браузере часто хочется что-то подкорректировать или добавить какого-то функционала. Ниже прикреплён. . .

@Belju 3 / 3 / 0 Регистрация: 03.10.2018 Сообщений: 249
	09.02.2024, 22:25 [ТС]
	Итого имеем окончательный результат: Парсинг текста, 5к файлов с 5М строк, с сохранение данных в структуру из 21 массива(в каждом 20к элементов), и запись структуры в бинарный файл уходит 15мин 14сек То же самое сохранение в базе данных потрачено 5мин 52сек Вывод очевиден, + наглядность и доступ к данным Тема закрыта! Всем спасибо! 0