Opencv. Как найти фигуру на фотографии и получить координаты его части ?

@Quad · Регистрация: 23.05.2020

Студворк — интернет-сервис помощи студентам

Доброго времени суток, Форумчане. Возникла необходимость в скрипте, который должен найти черный паззл на фотографии и получить координаты x,y его части, определенно центра его круга (или ближе), относительно всей фотографии. Как это можно сделать? буду рад если подскажите примерами или скинете ссылку на материал с которого лучше начать.

Фотографии:

Кликните здесь для просмотра всего текста

Название: Снимок.PNG
Просмотров: 368

Размер: 60.0 Кб

Название: Снимок2.PNG
Просмотров: 371

Размер: 56.0 Кб

@Nick07 · 15.03.2021, 08:28

Сообщение от Quad

найти черный паззл

Для начала выделите те области, где значения пикселей = 0

@Quad · 15.03.2021, 12:39 **[ТС]**

Я на столько продвинулся (рис 1), и даже нашел координаты этого паззла, но как теперь узнать координаты кружка этого черного паззла? код кстати находит координаты относительно всей фотографии, чего я и хотел))

Кликните здесь для просмотра всего текста

Opencv. Как найти фигуру на фотографии и получить координаты его части ?

Код:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
import cv2
import numpy as np
 
img = cv2.imread("screen.png")
hsv= cv2.cvtColor(img,cv2.COLOR_BGR2HSV)
 
lower_range = np.array([0,0,0])
upper_range = np.array([0,0,0])
 
mask = cv2.inRange(hsv,lower_range,upper_range)
 
contours,hierarchy = cv2.findContours(mask,cv2.RETR_EXTERNAL,cv2.CHAIN_APPROX_SIMPLE)
 
if len(contours) !=0:
    for contour in contours:
        if cv2.contourArea((contour)) > 500:
            x,y,w,h = cv2.boundingRect(contour)
            cv2.rectangle(img,(x,y),(x+w,y+h),(0,255,),1)
            print("Координаты пазла x:",x,"y",y)
cv2.imshow("Image",img)
#cv2.imshow("Mask",mask)
cv2.waitKey(0)
cv2.destroyAllWindows()

@u235 · 15.03.2021, 15:19

Просто измерить смещение в пикселях относительно левого верхнего угла разве нельзя?

Добавлено через 2 минуты
Что-тотипа x=x+0.8*w, y=y+0.5*h

@Quad · 15.03.2021, 15:56 **[ТС]**

Конечно можно, Сэр! вопрос лишь в том как это сделать.

@u235 · 15.03.2021, 17:59

Quad, легко и непринужденно.

Python
1
2
x=int(x+0.833*w)
y=int(y+0.6*h)

Как получил такие числа?
Открыл ваш скриншот с пазлом в XnView. Кропнул пазл, в строке состояния увидел, что размеры пазла 60х60 пикселей.
Перевел курсор мыши в центр правого круглого черного элемента-зацепки, увидел в строке состояния координаты х=50, у=36. 50/60=0.83333, 36/60=0.6 . Все.

@Quad · 16.03.2021, 14:22 **[ТС]**

u235, Как вы наверное, поняли, я делал этот скрипт чтобы решать капчу, я синхронизировал его со своим проектом на BAS (это комплекс для браузерной автоматизации) в общем, со вчерашнего дня пытаюсь понять, почему слайдер не перетягивается к координатам, что я получил по вашей формуле. Я попробовал поиграться со значениями в формуле, но это тоже мало помогло, иногда капча решается а иногда нет, каждая 5-я капча решается, это очень плохой результат, я не думаю что это погрешность OpenCv, ведь он распознает этот черный паззл на любом фоне.

Видео, как работает скрипт.

Может у вас есть предположение почему так происходит?

@Quad · 16.03.2021, 14:27 **[ТС]**

P.S OpenCv распознает фигуру очень хорошо даже на целой странице

Кликните здесь для просмотра всего текста

@u235 · 17.03.2021, 20:24

Quad, думаю, что кроме фигуры (пустого пазла) вам надо распознать положение пазла, который надо двигать. Также вы в примерах совсем не упоминали о том, что пазлы могут частично пересекаться.

@Quad · 17.03.2021, 20:50 **[ТС]**

u235, извиняюсь, я забыл про это упомянуть. А зачем нужно заморачиваться с тем паззлом что нужно сдвинуть? ведь.. у меня все там логично, получаю скрин web страницы, получаю координаты второго паззла относительно страницы и двигаю по координатам. Ну если вы предполагайте, что так надо , то как же мне получить сначала координаты двигаемого паззла ?

P.S скрипт иногда воспринимает соприкасаемые паззлы как единое целое, как этого тоже избежать?))

Кликните здесь для просмотра всего текста

@u235 · 17.03.2021, 21:26

Quad, я не знаю как там на сайте сделано, вам виднее, но по логике от пользователя ожидают следующих действий:
1. поместить указатель мыши на пазл.
2. зажать левую кнопку мыши.
3. переместить указатель на соответствующее место пустого пазла.
4. отпустить левую кнопку мыши.
Так вот если конечная точка - правый выступ пустого пазла, то стартовая точка должна быть правым выступом перемещаемого пазла. Т.е. нельзя схватить пазл, например, за верхний левый угол и переместить этот угол в правый круглый выступ. Отсюда следует, что нужно знать положение как конечного (черного) пазла, так и стартового.
Про соприкасаемые пазлы: избавьтесь от тонких линий морфологическими операциями типа открытие/закрытие.

@Hevarus · 22.06.2021, 18:12

u235, здравствуйте. Не могу написать Вам личное сообщение)

@user-ganz · 22.06.2021, 18:42

Quad,

Python
1
2
    result = cv2.matchTemplate(little,big, cv2.TM_SQDIFF_NORMED)
    _,_,(x,y),_=cv2.minMaxLoc(result)

Добавлено через 1 минуту
находит даже то чего нет (((

@u235 · 22.06.2021, 19:10

user-ganz, попробуйте поменять местами litle -образец, и big - изображение. И то и другое одноканальные картинки?

Новые блоги и статьи Все статьи Все блоги /
Отчёт о затраченных материалах за определенный период с макетом печатной формы Maks 21.04.2026 Отчёт из решения ниже размещён в конфигурации КА2. Задача: показать затраченные материалы за определённый период, с возможностью вывода печатной формы отчёта с шапкой и подвалом. В качестве. . .	Отчёт о спецтехнике находящейся в ремонте Maks 20.04.2026 Отчёт из решения ниже размещен в конфигурации КА2. Задача: отобразить спецтехнику, которая на данный момент находится в ремонте. Есть нетиповой документ "Заявка на ремонт спецтехники" который. . .	Памятка для бота и "визитка" для читателей "Semantic Universe Layer (Слой семантической вселенной)" Hrethgir 19.04.2026 Сгенерировано для краткого описания по случаю сборки и компиляции скелета серверного приложения. И пусть после этого скажут, что статьи сгенерированные AI - туфта и не интересно. И это не реклама -. . .	Запрет удаления строк ТЧ документа при определённом условии Maks 19.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "Аккумуляторы", разработанного в конфигурации КА2. У данного документа есть ТЧ, в которой в зависимости от прав доступа. . .
Модель заражения группы наркоманов alhaos 17.04.2026 Условия задачи сформулированы тут Суть: - Группа наркоманов из 10 человек. - Только один инфицирован ВИЧ. - Колются одной иглой. - Колются раз в день. - Колются последовательно через. . .	Мысли в слух. Про "навсегда". kumehtar 16.04.2026 Подумалось тут, что наверное очень глупо использовать во всяких своих установках понятие "навсегда". Это очень сильное понятие, и я только начинаю понимать край его смысла, не смотря на то что давно. . .	My Business CRM MaGz GoLd 16.04.2026 Всем привет, недавно возникла потребность создать CRM, для личных нужд. Собственно программа предоставляет из себя базу данных клиентов, в которой можно фиксировать звонки, стадии сделки, а также. . .	Знаешь почему 90% людей редко бывают счастливыми? kumehtar 14.04.2026 Потому что они ждут. Ждут выходных, ждут отпуска, ждут удачного момента. . . а удачный момент так и не приходит.

@Quad 0 / 0 / 0 Регистрация: 23.05.2020 Сообщений: 62

	Opencv. Как найти фигуру на фотографии и получить координаты его части ? 14.03.2021, 23:45. Показов 13672. Ответов 13 Метки opencv, как найти фигуру (Все метки) Доброго времени суток, Форумчане. Возникла необходимость в скрипте, который должен найти черный паззл на фотографии и получить координаты x,y его части, определенно центра его круга (или ближе), относительно всей фотографии. Как это можно сделать? буду рад если подскажите примерами или скинете ссылку на материал с которого лучше начать. Фотографии: Кликните здесь для просмотра всего текста 0

@u235 5521 / 2874 / 572 Регистрация: 07.11.2019 Сообщений: 4,770
	15.03.2021, 15:19
	Просто измерить смещение в пикселях относительно левого верхнего угла разве нельзя? Добавлено через 2 минуты Что-тотипа x=x+0.8w, y=y+0.5h 0

@Quad 0 / 0 / 0 Регистрация: 23.05.2020 Сообщений: 62
	15.03.2021, 15:56 [ТС]
	Конечно можно, Сэр! вопрос лишь в том как это сделать. 0

@Quad 0 / 0 / 0 Регистрация: 23.05.2020 Сообщений: 62
	16.03.2021, 14:22 [ТС]
	u235, Как вы наверное, поняли, я делал этот скрипт чтобы решать капчу, я синхронизировал его со своим проектом на BAS (это комплекс для браузерной автоматизации) в общем, со вчерашнего дня пытаюсь понять, почему слайдер не перетягивается к координатам, что я получил по вашей формуле. Я попробовал поиграться со значениями в формуле, но это тоже мало помогло, иногда капча решается а иногда нет, каждая 5-я капча решается, это очень плохой результат, я не думаю что это погрешность OpenCv, ведь он распознает этот черный паззл на любом фоне. Видео, как работает скрипт. Может у вас есть предположение почему так происходит? 0

@Quad 0 / 0 / 0 Регистрация: 23.05.2020 Сообщений: 62
	16.03.2021, 14:27 [ТС]
	P.S OpenCv распознает фигуру очень хорошо даже на целой странице Кликните здесь для просмотра всего текста 0

@u235 5521 / 2874 / 572 Регистрация: 07.11.2019 Сообщений: 4,770
	17.03.2021, 20:24
	Quad, думаю, что кроме фигуры (пустого пазла) вам надо распознать положение пазла, который надо двигать. Также вы в примерах совсем не упоминали о том, что пазлы могут частично пересекаться. 0

@Quad 0 / 0 / 0 Регистрация: 23.05.2020 Сообщений: 62
	17.03.2021, 20:50 [ТС]
	u235, извиняюсь, я забыл про это упомянуть. А зачем нужно заморачиваться с тем паззлом что нужно сдвинуть? ведь.. у меня все там логично, получаю скрин web страницы, получаю координаты второго паззла относительно страницы и двигаю по координатам. Ну если вы предполагайте, что так надо , то как же мне получить сначала координаты двигаемого паззла ? P.S скрипт иногда воспринимает соприкасаемые паззлы как единое целое, как этого тоже избежать?)) Кликните здесь для просмотра всего текста 0

@u235 5521 / 2874 / 572 Регистрация: 07.11.2019 Сообщений: 4,770
	17.03.2021, 21:26
	Quad, я не знаю как там на сайте сделано, вам виднее, но по логике от пользователя ожидают следующих действий: 1. поместить указатель мыши на пазл. 2. зажать левую кнопку мыши. 3. переместить указатель на соответствующее место пустого пазла. 4. отпустить левую кнопку мыши. Так вот если конечная точка - правый выступ пустого пазла, то стартовая точка должна быть правым выступом перемещаемого пазла. Т.е. нельзя схватить пазл, например, за верхний левый угол и переместить этот угол в правый круглый выступ. Отсюда следует, что нужно знать положение как конечного (черного) пазла, так и стартового. Про соприкасаемые пазлы: избавьтесь от тонких линий морфологическими операциями типа открытие/закрытие. 1

@Hevarus 0 / 0 / 0 Регистрация: 18.06.2021 Сообщений: 10
	22.06.2021, 18:12
	u235, здравствуйте. Не могу написать Вам личное сообщение) 0

@u235 5521 / 2874 / 572 Регистрация: 07.11.2019 Сообщений: 4,770
	22.06.2021, 19:10
	user-ganz, попробуйте поменять местами litle -образец, и big - изображение. И то и другое одноканальные картинки? 0

Опции темы