AR Распознавание изображений фронтальной камерой

@MrFelix · Регистрация: 08.03.2020

Студворк — интернет-сервис помощи студентам

Всем привет!
Друзья, такой вопрос, работаю над проектом, в котором необходимо распознавать изображения с помощью фронтальной камеры (селфи-камеры), пытался использовать Vuforia, но у них нет поддержки фронтальной камеры, ARCore также не поддерживает распознавание с фронтальной камерой, но я знаю, что это возможно.

Я ищу SDK для Unity3D, нужно только распознать изображение и получить его тег.

Может кто знает, какой SDK можно было бы использовать для этой задачи?

@Steroid · 08.03.2020, 19:57

Сообщение от MrFelix

нужно только распознать изображение и получить его тег.

чтоб я правильно понял
наводишь камеру на детский рисунок или на рисунок мона лизы и камера показывает тебе "тег"???

@MrFelix · 08.03.2020, 21:26 **[ТС]**

Знаете, есть такая игра когда тебе на лоб клеят картинку или рисунок и кидают намёки и ты должен отгадать кто ты, так вот мне это и нужно, поэтому нужна именно селфи камера, включаем камеру наводишь на себя и она опознав рисунок воспроизводит анимацию согласно тегу картинки или названию картинки, тут уже не важно, мне главное в коде как то обозначить, что за рисунок и какую анимацию воспроизвести.

@DarkPtect · 08.03.2020, 21:59

MrFelix, может быть я ошибаюсь, но вы в сторону машинного обучения клоните?

@MrFelix · 08.03.2020, 22:03 **[ТС]**

Сообщение от DarkPtect

MrFelix, может быть я ошибаюсь, но вы в сторону машинного обучения клоните?

Немного не понял вопроса.. Если это позволит реализовать задачу, и сделать это на Unity, то можно попробовать.

@DarkPtect · 08.03.2020, 22:33

MrFelix, смотря, что вы имеете в виду, когда говорите о распознавании изображения. Если изображение рисуется пользователем вне приложения, то, мне кажется, осуществить такое сложновато будет даже команде. Если изображения будут сгенерированы/загружены заранее и выбираться из приложения, то это уже не сложно. Что интересует вас?

@MrFelix · 08.03.2020, 22:46 **[ТС]**

DarkPtect, понял вас, спасибо за пояснения. 2 вариант. В приложении будет база данных, в которой уже будут загружены эталоны изображений, и нужно только понять какое из них на голове у человека. Точно так же как это делается в Vuforia или ARcore, только фронтальной.

@Mc X · 09.03.2020, 00:45

Сообщение от MrFelix

Точно так же как это делается в Vuforia или ARcore, только фронтальной.

а они не могут этого? т.е. там нигде нету выбора с какой камеры необходимо изображение получить?

@MrFelix · 09.03.2020, 08:18 **[ТС]**

В vuforia раньше была поддержка фронталки, но сейчас нет. ARcore поддерживает фронталку, но только для распознования лица и наложения масок.

@Mc X · 09.03.2020, 13:40

Сообщение от MrFelix

раньше была поддержка фронталки, но сейчас нет

Ок. На днях уже отвечал по поводу AR тут
Если хватит навыков, то как минимум в ARToolKit, учитывая что он open source, возможно получить полную свободу как использовать AR технологию.

Добавлено через 3 минуты
Можешь поискать и другие библиотеки для AR. Я всеже не ставил задачу найти все возможные решения

В любом случае попробуй, ты ничего не теряешь

@MrFelix · 09.03.2020, 14:50 **[ТС]**

Сообщение от Mc X

Если хватит навыков, то как минимум в ARToolKit, учитывая что он open source, возможно получить полную свободу как использовать AR технологию.

К сожалению навыков не хватает, чтобы дорабатывать open source проекты, поэтому и ищу, какой-то готовый проект типа ARcore или Vuforia

@Mc X · 09.03.2020, 15:39

Сообщение от MrFelix

дорабатывать open source проекты

речь не про дорабатывать, а в большей доступности к API.
насколько вижу ARToolKit есть и для Unity.
вот к слову такой же вопрос про переключение камер
https://stackoverflow.com/ques... lkit-unity
попробуй ARToolKit, поизучай вопрос настройки камеры и в других AR SDK
как-то не верится что в них нельзя определять устройство захвата, возможно ARCore гугловском, но насколько заметил другие библиотеки вобще не упираются в то, что камера вобще в мобильном, а значит должен быть выбор устройства из доступных.

@MrFelix · 09.03.2020, 16:56 **[ТС]**

В ARCore можно выбрать камеру переднюю, но почему-то не работает для распознания изображений.

Новые блоги и статьи Все статьи Все блоги /
Символьное дифференцирование igorrr37 13.02.2026 / * Логарифм записывается как: (x-2)log(x^2+2) - означает логарифм (x^2+2) по основанию (x-2). Унарный минус обозначается как ! */ #include <iostream> #include <stack> #include <cctype>. . .	Камера Toupcam IUA500KMA Eddy_Em 12.02.2026 Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .	И ясному Солнцу zbw 12.02.2026 И ясному Солнцу, и светлой Луне. В мире покоя нет и люди не могут жить в тишине. А жить им немного лет.	«Знание-Сила» zbw 12.02.2026 «Знание-Сила» «Время-Деньги» «Деньги -Пуля»
SDL3 для Web (WebAssembly): Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 12.02.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами и вызывать обработчики событий столкновения. . . .	SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 11.02.2026 Содержание блога Библиотека SDL3 содержит встроенные инструменты для базовой работы с изображениями - без использования библиотеки SDL3_image. Пошагово создадим проект для загрузки изображения. . .	SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL3_image 8Observer8 10.02.2026 Содержание блога Библиотека SDL3_image содержит инструменты для расширенной работы с изображениями. Пошагово создадим проект для загрузки изображения формата PNG с альфа-каналом (с прозрачным. . .	Установка Qt-версии Lazarus IDE в Debian Trixie Xfce volvo 10.02.2026 В общем, достали меня глюки IDE Лазаруса, собранной с использованием набора виджетов Gtk2 (конкретно: если набирать текст в редакторе и вызвать подсказку через Ctrl+Space, то после закрытия окошка. . .

@MrFelix 75 / 53 / 25 Регистрация: 08.03.2020 Сообщений: 243

	AR Распознавание изображений фронтальной камерой 08.03.2020, 19:07. Показов 3459. Ответов 12 Метки ar, sdk, unity engine (Все метки) Всем привет! Друзья, такой вопрос, работаю над проектом, в котором необходимо распознавать изображения с помощью фронтальной камеры (селфи-камеры), пытался использовать Vuforia, но у них нет поддержки фронтальной камеры, ARCore также не поддерживает распознавание с фронтальной камерой, но я знаю, что это возможно. Я ищу SDK для Unity3D, нужно только распознать изображение и получить его тег. Может кто знает, какой SDK можно было бы использовать для этой задачи? 0

@MrFelix 75 / 53 / 25 Регистрация: 08.03.2020 Сообщений: 243
	08.03.2020, 21:26 [ТС]
	Знаете, есть такая игра когда тебе на лоб клеят картинку или рисунок и кидают намёки и ты должен отгадать кто ты, так вот мне это и нужно, поэтому нужна именно селфи камера, включаем камеру наводишь на себя и она опознав рисунок воспроизводит анимацию согласно тегу картинки или названию картинки, тут уже не важно, мне главное в коде как то обозначить, что за рисунок и какую анимацию воспроизвести. 0

@DarkPtect 109 / 81 / 37 Регистрация: 13.01.2016 Сообщений: 409
	08.03.2020, 21:59
	MrFelix, может быть я ошибаюсь, но вы в сторону машинного обучения клоните? 0

@DarkPtect 109 / 81 / 37 Регистрация: 13.01.2016 Сообщений: 409
	08.03.2020, 22:33
	MrFelix, смотря, что вы имеете в виду, когда говорите о распознавании изображения. Если изображение рисуется пользователем вне приложения, то, мне кажется, осуществить такое сложновато будет даже команде. Если изображения будут сгенерированы/загружены заранее и выбираться из приложения, то это уже не сложно. Что интересует вас? 1

@MrFelix 75 / 53 / 25 Регистрация: 08.03.2020 Сообщений: 243
	08.03.2020, 22:46 [ТС]
	DarkPtect, понял вас, спасибо за пояснения. 2 вариант. В приложении будет база данных, в которой уже будут загружены эталоны изображений, и нужно только понять какое из них на голове у человека. Точно так же как это делается в Vuforia или ARcore, только фронтальной. 0

@MrFelix 75 / 53 / 25 Регистрация: 08.03.2020 Сообщений: 243
	09.03.2020, 08:18 [ТС]
	В vuforia раньше была поддержка фронталки, но сейчас нет. ARcore поддерживает фронталку, но только для распознования лица и наложения масок. 0

@MrFelix 75 / 53 / 25 Регистрация: 08.03.2020 Сообщений: 243
	09.03.2020, 16:56 [ТС]
	В ARCore можно выбрать камеру переднюю, но почему-то не работает для распознания изображений. 0