Форум программистов, компьютерный форум, киберфорум
C++: Сети
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск  
 
 
Рейтинг 4.68/22: Рейтинг темы: голосов - 22, средняя оценка - 4.68
0 / 0 / 0
Регистрация: 07.04.2014
Сообщений: 18

Архитектура взаимодействия приложения C++ и БД веб-сайта

09.04.2014, 13:09. Показов 5427. Ответов 42
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Коллеги,
прошу помочь мне с архитектурой программного решения.

Имеется следующая задача:
Есть некоторый сайт с базой данных. По запросу пользователя над определенными данными из базы данных сайта будут производиться некоторые математические расчеты, а результаты должны оперативно передаваться пользователю.
Для обеспечения коммерческой безопасности расчеты будет реализованы через приложение в виде скомпилированного с языка С++ и зашифрованного исполняемого модуля.
Вопрос следующий, каким наилучшим образом можно реализовать взаимодействие БД и исполняемого модуля, на какой платформе, какие протоколы использовать?

Критически важно обеспечить быстрое взаимодействие между базой данных и приложением.

Если это не будет противоречить вышеуказанному требованию, желательно также обеспечить:
- возможность размещения исполняемого модуля на другом сервере (не там где база данных),
- отсутствие следов взаимодействия с исполняемым модулем в базе данных.

Всем признателен за помощь!
0
Лучшие ответы (1)
IT_Exp
Эксперт
34794 / 4073 / 2104
Регистрация: 17.06.2006
Сообщений: 32,602
Блог
09.04.2014, 13:09
Ответы с готовыми решениями:

Архитектура веб-приложения
Добрый вечер! Собираюсь писать веб-приложение с использование asp.net core(клиентская и серверная часть, бд). 1)Подскажите, какая часть...

Архитектура веб-приложения
Ребят, я запутался. Помогите распутаться, пожалуйста. Проект очень схож с интернет-магазином. Человек заходит, выбирает категории...

Подробная архитектура веб-приложения
Доброго времени суток! 1)Подскажите как расширить имеющуюся схему архитектуры веб-приложения 2)будет ли правильно если между браузером...

42
503 / 352 / 94
Регистрация: 22.03.2011
Сообщений: 1,112
16.04.2014, 00:48
Студворк — интернет-сервис помощи студентам
DrOffset, я считаю что в Вашей архитектуре есть некоторая некорректность, позвольте я ее подправлю:
1. Пользователь, через web-interface, делает запрос на web-server. (Реализуется через JavaScript + PHP/Python).
Тот в свою очередь, через любой RPC по средствам UDP, информирует вычислительный модуль о поставленной задаче.
2. Вычислительный обращается к модулю БД, через тот-же RPC, за необходимой информацией.
3. После вычислений модуль возвращает ответ web серверу, тот в свою очередь пользователю.

Как видите я переставил модуль БД и расчетный модуль местами. В моем понимании БД не должна обладать знаниями о генерации запроса, а должна лишь хранить данные. Так же я добавил путь возврата, так как в Вашем варианте не понятно кто будет забирать(web server)/генерировать ивент(BD) конечный результат.

Добавлено через 6 минут
п.с. В принципе, если Вам интересно, я смогу проконсультировать, так как реализовывал аналогичную архитектуру для разрабатываемого мной облачного сервера.
0
19506 / 10109 / 2464
Регистрация: 30.01.2014
Сообщений: 17,834
16.04.2014, 08:57
Цитата Сообщение от stima Посмотреть сообщение
DrOffset, я считаю что в Вашей архитектуре есть некоторая некорректность
Сильно сказано, архитектура. Это всего лишь набросок на коленке. Говорить о корретности вашего или моего решения можно только после макетирования и результатов тестовых испытаний, в которых учтется и скорость работы и архитектурные изъяны.

Цитата Сообщение от stima Посмотреть сообщение
Так же я добавил путь возврата, так как в Вашем варианте не понятно кто будет забирать(web server)/генерировать ивент(BD) конечный результат.
Результат отдается коду сайта как результат запроса SQL. Так, как будто бы он был выбран из БД. Мне кажется вы не верно поняли суть "модуля БД", в вашей схеме он как бы работает автономно, но это не так. Он работает только при инициации запроса из самой БД, это сделано в том числе и для того, чтобы минимизировать взаимодействие через какой-либо RPC. В вашей же схеме такой модуль вообще не нужен, можно сразу обращаться к БД из расчетника посредством обычного SQL.

Цитата Сообщение от stima Посмотреть сообщение
В моем понимании БД не должна обладать знаниями о генерации запроса, а должна лишь хранить данные.
БД и не обладает такими знаниями. Ими обладает модуль, по сути plugin на С, который связывает расчетный модуль и интерфейс хранимой процедуры через некий канал связи. С идеологической точки зрения не принципиально является ли этот канал программным интерфейсом, или RPC, или еще чем.
0
0 / 0 / 0
Регистрация: 07.04.2014
Сообщений: 18
18.04.2014, 15:27  [ТС]
stima, для меня ваш вариант плох тем, что в сценариях веб-сервера будет открытая информация о взаимодействии с расчетчиком. а мне важно скрыть его существование.

Добавлено через 20 минут
stima, с другой стороны мне также важно разделить разработчиков расчетника и сайта и минимизировать необходимость их производственного взаимодействия. в этом смысле ваш вариант кажется предпочтительней.
0
503 / 352 / 94
Регистрация: 22.03.2011
Сообщений: 1,112
18.04.2014, 16:51
Цитата Сообщение от satoru Посмотреть сообщение
stima, для меня ваш вариант плох тем, что в сценариях веб-сервера будет открытая информация о взаимодействии с расчетчиком. а мне важно скрыть его существование.
Это не совсем "правда", одна сторона должна знать в любом слуае к кому обращается иначе этого обращение впринципе быть не может. Можно только минимизировать, а вернее переложить, знание о типе обращения и саммих данных.
0
19506 / 10109 / 2464
Регистрация: 30.01.2014
Сообщений: 17,834
18.04.2014, 16:57
Цитата Сообщение от stima Посмотреть сообщение
Это не совсем "правда", одна сторона должна знать в любом слуае к кому обращается иначе этого обращение впринципе быть не может.
Это так, но скорее всего он имел в виду, что если мы делаем RPC запрос из скрипта сайта, то в этом же скрипте должны быть параметры соединения с расчетником. Если же эти параметры упрятаны в бинарник (который может быть к тому же зашифрован), то вытащить их оттуда несколько сложнее.
0
503 / 352 / 94
Регистрация: 22.03.2011
Сообщений: 1,112
18.04.2014, 17:02
На сколько я понял данные хранятся в БД, сайт только ставит задачу, на основе задачи выбираются данные. Т.е. сайт не владеет информацией о самих данных, а только типом поставленной задачи, и возможно общедоступных знаний.
При этом никто не отменяет возможности сеарилизации и шифрования тогоже RPC.
0
19506 / 10109 / 2464
Регистрация: 30.01.2014
Сообщений: 17,834
18.04.2014, 17:11
stima, о разных вещах говорим. Автор, насколько я понял, имел в виду ту ситуацию, когда злоумышленник получает доступ к коду сайта.

Добавлено через 2 минуты
Цитата Сообщение от stima Посмотреть сообщение
Т.е. сайт не владеет информацией о самих данных
Я нигде не имел в виду противоположное.
0
503 / 352 / 94
Регистрация: 22.03.2011
Сообщений: 1,112
18.04.2014, 17:13
Возможно. Впринципе автору было предложенно достаточно для начала, при тех данных, что он предоставил. Остальное требует более подробной поставленной задачи. Иначе это рассуждение о сферическом коне в вакууме))
0
19506 / 10109 / 2464
Регистрация: 30.01.2014
Сообщений: 17,834
18.04.2014, 17:29
stima, Да-да. В любом случае, раз предложены требования к быстродействию, без макета и замеров на реальном железе не получится в полной мере оценить потенциал того или иного решения. А раз макет все равно надо делать, то и остальные требования на нем будет проще проверить и сравнить с другими вариантами, чем теоретизировать.
0
0 / 0 / 0
Регистрация: 07.04.2014
Сообщений: 18
18.04.2014, 19:34  [ТС]
stima, в варианте DrOffset информация о взаимосвязи с расчетником может быть скрыта внутри скомпилированного модуля, pluginа для БД, как я понял.
0
19506 / 10109 / 2464
Регистрация: 30.01.2014
Сообщений: 17,834
18.04.2014, 19:42
Цитата Сообщение от satoru Посмотреть сообщение
pluginа для БД, как я понял.
Правильно.
В принципе можно и не связываться с плагином для БД, учитывая, что не все БД это поддерживают. Можно сделать модуль для PHP (или для другого языка) на С++ и впихнуть всю функциональность по взаимодействию с расчетником в него. В остальном использовать схему stima:
Скрипт сайта обращается к модулю;
RPC запрос из модуля PHP к расчетнику;
Расчетник запрашивает данные из базы и производит расчет;
Отдает через RPC данные обратно в модуль PHP;
Модуль отдает данные в скрипт сайта.
1
503 / 352 / 94
Регистрация: 22.03.2011
Сообщений: 1,112
18.04.2014, 20:03
Я не совсем понял зачем Вам скрывать взаимосвязь с модулем расчетов. И что Вы вообще подразумеваете под сокрытием? Все равно будет "след" веб-сервер->сервер-плагин. Тем более "скрыть" "возврат" результатов никак не удастся.
0
0 / 0 / 0
Регистрация: 07.04.2014
Сообщений: 18
18.04.2014, 20:42  [ТС]
Цитата Сообщение от stima Посмотреть сообщение
Я не совсем понял зачем Вам скрывать взаимосвязь с модулем расчетов. И что Вы вообще подразумеваете под сокрытием? Все равно будет "след" веб-сервер->сервер-плагин. Тем более "скрыть" "возврат" результатов никак не удастся.
Скрывать нужно, чтобы у Злоумышленника, взломавшего сайт, не было следующей очевидной цели для атаки. Будет видно, что сайт работает с плагином, но то что плагин работает с удаленным расчетником, будет совсем не очевидно.

Добавлено через 19 минут
В целом, коллеги, мне схема стала достаточно ясна для подготовки ТЗ)) Спасибо!
0
0 / 0 / 0
Регистрация: 07.04.2014
Сообщений: 18
01.07.2014, 23:55  [ТС]
Коллеги,
в продолжение разговора отправляю на ваш суд ТЗ по теме, которую мы обсуждали)

Хотелось бы узнать ваше мнение о ясности требований и сколько это будет стоить.

Некоторые расчетные функции в ТЗ искажены или скрыты, чтобы сохранить конфиденциальность, но все они примерно одинаковые по сложности.
Вложения
Тип файла: zip ТЗ_CPP_open.zip (28.5 Кб, 10 просмотров)
0
503 / 352 / 94
Регистрация: 22.03.2011
Сообщений: 1,112
02.07.2014, 00:25
1. Сроки. Вы возьметесь реалиазовать это за 10 дней? Вы тех задание писали больше месяца. Минимум 1 неделя на вьехать что к чему. 1 неделю на обвес. 1-2 неделя на прототип комуниции. 1-2 неделю на функции. 1-2 на баг фикс. Заметьте без оптимизации, защиты информации и рефакторинга(вылизывания). (И это для "Senior" разраба, который вертится в сетях).
2. Что это за принцип без RTTI?
3. Почему это Ваш "КК" должен быть в виде php экстеншена если он находится удаленно от вашего "РК"? Вы удаленно php сервак подымать будете? Вы слышали что-то про rpc? Или что-то про месенджеры, к примеру rabbit-mq?.
4. Ну а далее по тексту прописан прямой ход, что не есть проблема. Вот обработки исключений вообще нет. А с ними у разраба таки вопросы и появятся.

Добавлено через 3 минуты
п.с. И это при этом что разраб такой логики должен не только знать c++, но еще и php, и администратирование lionux серверов и быть про тестером всего этого. А это как минимум уже 2-3 человека если по хорошему.

Добавлено через 2 минуты
п.с.с. Делть обфускацию с++ кода бесполезно.
1
0 / 0 / 0
Регистрация: 07.04.2014
Сообщений: 18
02.07.2014, 01:04  [ТС]
1. Я бы не взялся, только потому что я не программист и это не моя работа)) Я рассчитываю на то, что смогу привлечь специалиста, у которого уже есть опыт реализации аналогичной коммуникационной схемы, и это должно занять большую часть времени. А математические расчеты относительно простые, аналогичные функции для меня кодировали на basic очень быстро. ТЗ было написано за 2 рабочих дня)) Пауза в моих сообщениях обусловлена общепроектными разработками.
Насчет ваших сроков, уверен в ваших словах есть доля истины. Но давайте разберемся детальнее. Во-первых, подписывать контракт до того, как человек разберется в вопросе не имеет никакого смысла. Для этого есть ТЗ и собственный опыт. Поэтому первую неделю "на разобраться" я исключаю из графика работ. Что такое обвес и зачем на это нужна неделя, я просто не знаю. На коммуникации и функции, Вы по минимуму предлагаете 14, а я 10 дней. На баги и оптимизацию вы предлагаете по минимуму еще 7 дней, а я на все остальное 20. Т.е в сумме, у вас на ясные мне работы по минимуму 21 день, а у меня 30. Так что мы очень близки в оценках.
2. Это динамическая идентификация типов.
3. КК лежит на стороне сайта (также на php написанного) и им же вызывается.
4. Если появятся вопросы, будем решать)
5. Да, разраб должен знать и php и C++, иначе написать php extension на C++ не выйдет, это очевидно. В администрировании Linux я не вижу необходимости исходя из требований. Разраб должен описать требования к программному окружению необходимо для работы его ПО и инструкцию по установке, иначе никак. Это может сделать технический писатель, конечно, никаких ограничений на это в ТЗ нет.
0
503 / 352 / 94
Регистрация: 22.03.2011
Сообщений: 1,112
02.07.2014, 01:42
1. Я Вам скажу так. Реализовав аналогично описанную Вами структуру за последний год два раза. Я бы не взялся ее реализовывать еще раз меньше чем месяца за два.

"Обвес": установка/настройка всех необходимых библиотек/фреймворков, написание вспомогательного кода (парсинг конфига).

Никогда не исключайте из графика работ, даже то, что человек будет ходить пить кофе, разговаривать по телефону, и обсуждать с Вами же нужную реализацию, даже после того как он полностью сказал что все понял, а Вы его заверили, что это 110% конечные требования.

2. Я знаю что такое RTTI. Зачем ее отключать?
3. Я не знаю, зачем вы влепили туда php-extension. Я Вам уже намекнул, почитайте про месенджеры. Это Вам в дальнейшем поможет балансить нагрузку и сильно упростит работу с протоколом и rpc.

From The Pragmatic Programmer: From Journeyman to Master:

What to Say When Asked for an Estimate

You say "I'll get back to you."

You almost always get better results if you slow the process down and spend some time going through the steps we describe in this section. Estimates given at the coffee machine will (like the coffee) come back to haunt you.
Вообще эстимейты советуют умножать на 4. Т.е Ваши 10 дней это мои реалистические 1-2 месяца.
2
1443 / 1326 / 131
Регистрация: 20.03.2009
Сообщений: 4,689
Записей в блоге: 11
02.07.2014, 10:22
Цитата Сообщение от stima Посмотреть сообщение
2. Я знаю что такое RTTI. Зачем ее отключать?
Проверено на практике. RTTI может существенно снижать производительность, что не очень хорошо к системам близким к real-time.
Цитата Сообщение от stima Посмотреть сообщение
Я Вам уже намекнул, почитайте про месенджеры.
толсто.
Цитата Сообщение от stima Посмотреть сообщение
Это Вам в дальнейшем поможет балансить нагрузку
нет проблем в балансировке.

Проверено, при помощи swig легко и быстро делается php расширение.

Добавлено через 14 минут
Прочитал ТЗ, там же расписана архитектура.
1
503 / 352 / 94
Регистрация: 22.03.2011
Сообщений: 1,112
02.07.2014, 12:16
Цитата Сообщение от Dmitriy_M Посмотреть сообщение
Сообщение от stima
2. Я знаю что такое RTTI. Зачем ее отключать?
Проверено на практике. RTTI может существенно снижать производительность, что не очень хорошо к системам близким к real-time.
Моя практика говорит, что внос RTTI это мизер, по сравнению с тем что Вы теряете таких помощников как boost, qt.

Уйдите от экстеншена. Почитайте про RabbitMQ или любой другой месенджер. Получите FIFO, RPC, транспорт в одном флаконе.
0
0 / 0 / 0
Регистрация: 07.04.2014
Сообщений: 18
02.07.2014, 12:30  [ТС]
to stima:
1. Не ясно, для чего именно, если есть уже аналогичные наработки, требуется столько времени. В моем ТЗ требования к процессу коммуникации минимальные.
2. Скорость/безопасность... есть много рассуждений на эту тему в интернете.
3. Все обсуждение в этой теме ранее свелось к тому, что нужно использовать php/python/perl модуль для отправки и данных расчетнику, посмотрите свой же комментарий от 16.04.2014, 00:48. Требований к протоколам и платформам, я не устанавливал, это на усмотрение разраба. Если rpc и rabbit-mq подходят для реализации, пожалуйста, можно использовать. Главное чтобы КК -был скомпилирован на C++ в php ext, а что там внутри не важно.
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
BasicMan
Эксперт
29316 / 5623 / 2384
Регистрация: 17.02.2009
Сообщений: 30,364
Блог
02.07.2014, 12:30

Веб-приложение мониторинг БД в реалтайме. Архитектура приложения
Посоветуйте куда смотреть, какие выбрать технологии, для следующего. Вообщем есть БД (MariaDB / MySQL). В эта БД постоянно обновляется,...

Архитектура веб сайта и парсинга фотографий
Доброго времени суток! Помогите придумать архитектурное решение для веб сайта (ASP.NET MVC 4). В кратце, веб сайт отображает...

Архитектура веб-приложения: обход same origin policy в ajax
Добрый день, Я разрабатываю веб-приложение, которое должно динамически подгружать данные. В целом схема такая, как на прикрепленном...

В указанном dsn архитектура драйвера и архитектура приложения не соответствуют друг другу
Добрый день. При запуске программы выскакивает вот такая вот ошибка. В чем может быть проблема и как ее исправить?

Архитектура взаимодействия UI компонентов
Hello world! Имеем WYSIWYG редактор, его UI разбит на виджеты. Предположим что анализ выявил следующие типы виджетов: Список ресурсов,...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
40
Ответ Создать тему
Новые блоги и статьи
Транслитерация текста с кириллицы на латиницу (вариант №5)
Maks 17.11.2026
Дабы оставить позади все споры о том, какая буква каким образом должна транслитерироваться на латиницу - решил таки доработать данное решение и довести его до мало-мальски логического завершения. . . .
Просмотровщик HLP и конвертер в CHM
Argus19 16.11.2026
Просмотровщик HLP и конвертер в CHM Давно хотел переделать справку Microsoft® Win32® Programmer's Reference, чтобы иметь её под рукой. Но использовать несколько программ не удобно. Искал другие. . .
BitTorrent (версия 7.11 English) и Меню Настройки
russiannick 15.11.2026
Пункты, отвечающие за отключение обновлений в BitTorrent версии 7. 11 (английской) Options Preferences General Language
Транслитерация текста с кириллицы на латиницу (вариант №4)
Maks 15.11.2026
Что-то я перемудрил с предыдущими версиями, в этот раз сделал всё проще, обратившись к функции "СтрокаЛатиницей" из типового общего модуля "СтроковыеФункцииКлиент". В данной функции нет апострофов,. . .
BitTorrent (версия 4.3.9) и Меню Настройки
russiannick 15.11.2026
В меню Настройки можно отключить автоматическое обновление программы. Карта этого меню приложена ниже. Нужный пункт выделен красным. Сервис Настройки Поведение
Транслитерация текста с кириллицы на латиницу (вариант №3)
Maks 15.11.2026
Обновленная версия предыдущей обработки. Изменения коснулись букв: Ъ, Ы, Ь, Э, отображения которых зависят от положения реквизита "Транслитерация имён". Изменено отображение буквы Й. Добавлена. . .
Транслитерация текста с кириллицы на латиницу (вариант №2)
Maks 13.11.2026
Обновленная версия ранее созданной обработки. Добавлено: - Проверка исходного текста на кириллицу, через обращение к стандартной функции "ТолькоКириллицаВСтроке" из общего модуля. . .
Часы с термометром и праздничным календарем
yariko 12.11.2026
Сегодня мы рассмотрим как можно сделать отличные многофункциональные часы. Итак, поставим конкретную задачу: разработать часы с календарем, двумя термодатчиками, выводом поздравительных сообщений. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru