Форум программистов, компьютерный форум, киберфорум
C#: Базы данных
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.57/7: Рейтинг темы: голосов - 7, средняя оценка - 4.57
10 / 10 / 4
Регистрация: 12.07.2009
Сообщений: 86

Как можно ускорить работу данной програмы с базой?

10.05.2011, 11:50. Показов 1507. Ответов 1
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Есть XML с книгами, тысяч эдак 200 - 300. Есть база. В каталог с товарам, среди которых книги и еще одна таблица, в которой для id в каталоге указаны соответствующие ISBN. Надо чтобы программа пробежалась по XML и с учетом цен на книги в XML скорректировала цены в каталоге. Соответствие устанавливается по ISBN. Сейчас у меня организовано это дело так: с помощью SQLXMLBULKLOADLib весь xml грузиться во временную таблицу. Потом идет такой код, который в другую временную таблицу заносит цены

C#
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
var yml =
    from y in DC.tblCompetitorYMLs
    select y;
 
SqlConnection conn =
    new SqlConnection(
    ConfigurationManager.
    ConnectionStrings["StockPriceCorrectionCompetitorsBased.Properties.Settings.zoneConnectionString"].
    ConnectionString);
 
int cnt = 0;
SqlDataAdapter sda = new SqlDataAdapter("", conn);
conn.Open();
 
foreach (var yml_entry in yml)
{
    if (yml_entry.ISBN == null)
    {
        continue;
    }
    string[] isbn_collection =
        yml_entry.ISBN.ToUpper().Replace("-", "").Split(',');
    sda.SelectCommand.CommandText = string.Format(@"
        SELECT c.cat_id FROM catalog c
        INNER JOIN tblBookIsbn i ON c.cat_id = i.cat_id
        WHERE REPLACE(UPPER(bi_Name), '-', '') in ('{0}');",
        string.Join("','", isbn_collection));
    DataTable dt = new DataTable();
    sda.Fill(dt);
    foreach (DataRow r in dt.Rows)
    {
        tblCompetitorPrice cp = new tblCompetitorPrice();
        cp.competitor_id = competitor_id;
        cp.competitor_item_id = Convert.ToInt32(yml_entry.id);
        cp.price = Convert.ToDecimal(yml_entry.price);
        cp.cat_id = Convert.ToInt32(r["cat_id"]);
        DC.tblCompetitorPrices.InsertOnSubmit(cp);
    }
    if (cnt++ % 1024 == 0)
    {
        logger.Trace("Обработано " + cnt);
    }
}
conn.Close();
DC.SubmitChanges();
Замес в том, что это всё очень медленно работает - обработка сотен тысяч записей затягивается на несколько дней. Будут ли какие-нибудь концептуальные предложения или указания на мои ошибки чтобы ускорить всё это дело?

P.S.: Кстати, почему у меня посреди LINQ торчит один кусок с ADO, я не помню, не то остатки старого кода, не то какая-то причина была, ггг.
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
10.05.2011, 11:50
Ответы с готовыми решениями:

Как ускорить работу. Ссылка или указатель
У меня следующая ситуация. Обработка изображений с EMGUCV. Объект Image весит очень много. Этот объект надо передавать в мой класс. ...

Как организовать работу приложения с базой данных?
Планируется: - написать приложение WinForm, которое будет работать с базой данных (например: кадры или CRM); - отдать приложение...

Подскажите, как можно ускорить работу программы
Условие: Первая строка входных данных содержит натуральное число N - количество элементов массива (1 ≤ N ≤ 1000). Следующая...

1
 Аватар для d0s'A
153 / 113 / 25
Регистрация: 23.06.2008
Сообщений: 320
13.05.2011, 13:59
Проанализируй, где больше времени тратится? Если ты преобразуешь xml в структуру БД, а потом сравниваешь две таблицы, то само преобразование наверное много занимает. Возможно есть смысл использовать XmlReader.
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
13.05.2011, 13:59
Помогаю со студенческими работами здесь

Можно ли как нибудь ускорить работу цикла for?
Подскажите пожалуйста - можно ли как нибудь ускорить работу цикла for? Заранее сильно благодарен!

Как можно ускорить работу макроса Excel с большим кол-вом итерационных циклов?
Есть задача, которую решил, но хотел бы ускорить работу. Проблема в том что суть программы пройти по строкам и столбцам в 1 таблице,...

Можно ли ускорить работу макроса
Здравствуйте!) У меня вот такой вопрос...возможно ли каким то образом ускорить работу макроса? Если на С++ перенести ускорится?

Можно ли ускорить работу с Excel
Вопрос по скорости работы: Excel vs .NET В экселе тоже самое летает. перенес в приложение - уходит почти 15 минут. Вопрос к Гуру -...

Можно ли ускорить работу программы?
#!/bin/bash bills=(=1 =2 =3 =4 =5 =6) declare -a am=( $(for i in {1..10001}; do echo 0; done) ) read T ((m = 0)) while(( m < T ))...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
2
Ответ Создать тему
Новые блоги и статьи
Философия технологии
iceja 01.02.2026
На мой взгляд у человека в технических проектах остается роль генерального директора. Все остальное нейронки делают уже лучше человека. Они не могут нести предпринимательские риски, не могут. . .
SDL3 для Web (WebAssembly): Вывод текста со шрифтом TTF с помощью SDL3_ttf
8Observer8 01.02.2026
Содержание блога В этой пошаговой инструкции создадим с нуля веб-приложение, которое выводит текст в окне браузера. Запустим на Android на локальном сервере. Загрузим Release на бесплатный. . .
SDL3 для Web (WebAssembly): Сборка C/C++ проекта из консоли
8Observer8 30.01.2026
Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
SDL3 для Web (WebAssembly): Установка Emscripten SDK (emsdk) и CMake для сборки C и C++ приложений в Wasm
8Observer8 30.01.2026
Содержание блога Для того чтобы скачать Emscripten SDK (emsdk) необходимо сначало скачать и уставить Git: Install for Windows. Следуйте стандартной процедуре установки Git через установщик. . . .
SDL3 для Android: Подключение Box2D v3, физика и отрисовка коллайдеров
8Observer8 29.01.2026
Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .
Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT
bedvit 28.01.2026
Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования. Часть библиотеки BedvitCOM Использованы. . .
SDL3 для Android: Загрузка PNG с альфа-каналом с помощью SDL_LoadPNG (без SDL3_image)
8Observer8 28.01.2026
Содержание блога SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .
SDL3 для Android: Загрузка PNG с альфа-каналом с помощью SDL3_image
8Observer8 27.01.2026
Содержание блога SDL3_image - это библиотека для загрузки и работы с изображениями. Эта пошаговая инструкция покажет, как загрузить и вывести на экран смартфона картинку с альфа-каналом, то есть с. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru