Возможности Delphi в плане работы с видео

Привет всем! Есть весьма важный и волнующий меня вопрос по возможностям работы с видео в среде Delphi.

Вопрос следующего плана. Снимаем на видеокамеру едущий автомобиль. Автомобиль просто едет и ничего не делает. Грузим видео на комп и в Delphi. Итак, можно ли на Делфях написать прогу, которая могла бы вычислять марку автомобиля, расстояние до него и контструкцию (макет) данной модели автомобиля, исходя из данных заложенных в базу данных?

Насколько это возможно?

И каким образом это можно реализовать? Хотя бы в теории, в общих чертах?

P.S. Важен профессиональный ответ, конкретный, без флуда

0

Совсем в общих чертах:
1) для точного определения марки нужны будут изображения с нескольких ракурсов;
2) если расстояние до автомобиля нужно определять с точностью до см/долей см, то вам понадобится 2 камеры (бинокулярное зрение).
Про конструкцию не понял.

0

1) для точного определения марки нужны будут изображения с нескольких ракурсов;

Не проблема. Это можно решить распознав по нескольким ключевым точкам изображение автомобиля с ракурса, который снимает камера. Потом, сопоставив с уже внесенными в базу данных изображениями, ключевыми точками можно вывести марку автомобиля.

если расстояние до автомобиля нужно определять с точностью до см/долей см, то вам понадобится 2 камеры (бинокулярное зрение).

Ну чем точнее, тем лучше. Можно подробнее про бинокулярное зрение...

Давайте распределю на этапы. Сейчас меня волнует вопрос: Как можно вытащить автомобиль из общего видео? Как это программно реализовать в Delphi?

0

Сообщение от ВеликийГуру Не проблема. Это можно решить распознав по нескольким ключевым точкам изображение автомобиля с ракурса, который снимает камера. Потом, сопоставив с уже внесенными в базу данных изображениями, ключевыми точками можно вывести марку автомобиля.

Это как раз очень большая проблема. Что считать ключевой точкой? Какое их минимальное количество должно быть, чтобы нейронная сеть с вероятностью не менее 0.7 распознала конкретную марку? Я уже молчу про всякие пре-обработки и подготовку кадра. Так вот это все - чрезвычайно сложная задача для исследования. Именно для исследования, потому что нужно брать, пробовать, ошибаться, брать что-то новое/изобретать и по новой. Плюс, база с материалом должна быть огромной. По настоящему огромной, чтобы сеть обучить. При всем при этом я вообще не беру в рассмотрение алгоритмы. Их в любом случае в одиночку не написать.

Сообщение от ВеликийГуру Можно подробнее про бинокулярное зрение...

У человека в норме глаза смотрят не параллельно, а оба глаза "наведены" в одну точку. То есть. Левый глаз не может смотреть на одну точку, а правый на 1см левее/правее/выше и т.д. Это как раз и позволяет определять расстояние до объектов. В разных областях этот принцип активно применяется. И главное значение имеет точная установка камер относительно друг друга. Как правило их располагают в одной плоскости, но у одной изменяют угол рысканья на заданную величину. Попробуйте порыть на эту тему стерео алгоритм Census или ему подобный.

0

Ну начну с того, что у меня появилась идейка, понимаю что реализовать ее будет очень сложно поэтому я на стадии подготовки к исследованию. Хочу понять, насколько это возможно и насколько лично мне возможно реализовать все это. Поэтому сейчас пока я так сказать прицеливаюсь))))

Что считать ключевой точкой? Какое их минимальное количество должно быть, чтобы нейронная сеть с вероятностью не менее 0.7 распознала конкретную марку?

Вот хорошо что вы обратили внимание на это. Ключевым моментом на первом этапе будет:
1. Выработка системы опознавания ключевых точек для распознавания марки автомобиля
2. Хочу узнать как вообще автомобиль хотя бы получить из видео?
Каким образом это можно программно в Делфях реализовать? Мне не нужен код, мне хотя бы теорию, так чтобы знать куда двигаться

Насчет бинокулярного зрения спасибо.
Но я думал подойти несколько по другому.

Если правильно выработать систему точек и распознать марку, тогда зная размеры иозбражения и взяв из базы данных реальные размеры автомобиля конкретной марки можно их сопоставить, а остальное по законам геометрии))) Думаю так будет намного проще

0

Сообщение от ВеликийГуру Вот хорошо что вы обратили внимание на это. Ключевым моментом на первом этапе будет: 1. Выработка системы опознавания ключевых точек для распознавания марки автомобиля 2. Хочу узнать как вообще автомобиль хотя бы получить из видео?

Мне кажется последовательность неверная. Сначала вам нужно разработать теоретическую модель автомобиля. А именно: совокупность каких критериев (точек или еще чего) на изображении позволит 100% разделять автомобиль от всего остального. А уже из них определить такие, которые будут дифференцировать автомобили между собой.

0

Хорошо. Но чтобы разработать верную последовательность, скажите, каким образом в Делфи можно вытащить изображение этого самого автомобиля из видео? Только поимка кадра тут не проканает, нужно иметь возможность определять положение автомобиля в любой момент времени

0

Для большинства случаев я бы начал с поиска больших одноцветных пятен. Большое цветное пятно (одного цвета) - 90% автомобиль.

0

Сообщение от aaleksander Большое цветное пятно (одного цвета) - 90% автомобиль.

Дерево на заднем плане?
Кстати камера какая ч/б или цветная?

0

...тут < https://www.cyberforum.ru/post2927113.html > про распознавание автономеров авто, но не только (общий подход сохраняется).

просто едет и ничего не делает. ...написать прогу, которая могла бы вычислять ...расстояние до него

более надежный метод - эхолокация, ультразвуковая, инфракрасная ...существуют готовые дальномеры.

Впрочем, алгоритмы по определению дистанции до авто на основе камеры существуют, но обладают большими погрешностями, ввиду необходимости постоянного уточнения векторов движения. Правда можно упростить задачу использовав наведение на объект лазерного луча, тогда можно отслеживать яркую точку, но тогда возникает задача механики управления. Отсюда, использование вышеуказанных дальномеров гораздо практичнее.

каким образом в Делфи можно вытащить изображение этого самого автомобиля из видео? Только поимка кадра тут не проканает, нужно иметь возможность определять положение автомобиля в любой момент времени

OpenCV ...наборчик VisionLAB.

0

Кстати камера какая ч/б или цветная?

Разумеется цветная. Просто камера обыкновенная и я спрашивал про возможность создания алгоритма и программного кода для вышеописанных целей на основе простой видеозаписи.

...тут < Литература по ЦОС и алгоритмам > про распознавание автономеров авто, но не только (общий подход сохраняется).

Уже знакомлюсь и кое-что интересного почерпнул. Но гораздо интереснее

OpenCV ...наборчик VisionLAB.

Вот про него можно поподробнее? Что это, как им пользоваться? Если эта штука действительно поможет вытащить автомобиль из кадра и даст возможность определять его положение в пространстве в любой момент времени, то остальное можно решить простенько и со вкусом))

Пример! Вытаскиваю я изображение автомобиля. Разрешение и зум я стандартизирую ( а то зум сильно будет влиять на мое решение). Определяем марку авто, вытягиваем из БД параметры реальной модели, сравниваем размеры картинки и по законам геометрии определяем расстояние... Все просто) Главное вытащить изображение авто из видео.

Добавлено через 13 минут
Так, я нашел про Vision Lab. Отличная штука насколько я понял. Но у меня несколько вопросов?

1. С его помощью можно выдрать и обработать изображение хотя бы чтобы тупо выдрать автомобиль из кадра и определить его марку при помощи данных вбитых в БД?

2. Он подвязывается к Делфи 7.0? Если да как его туда подвязать? Есть ли инструкции, мануалы, примеры как программно работать с VisionLab?

0

тупо выдрать автомобиль из кадра

можно, но не спрашивайте как ...кому-то за это заплатят.

Вот про него можно поподробнее? Что это, как им пользоваться? Есть ли инструкции, мануалы, примеры как программно работать с VisionLab?

можно, зайдите на официальный сайт, скачайте 200 метров инсталлятора и установите версию для некоммерческого использования. Там будет и подробнейший HELP и море примеров использования.

Он подвязывается к Делфи 7.0? Если да как его туда подвязать?

некоммерческая версия дается в виде DCU файлов, скомпилированных под выбранную версию Delphi. Cкачайте, начните ставить и вопросы отпадут.

0