Opencv. Как найти фигуру на фотографии и получить координаты его части ?

@Quad · Регистрация: 23.05.2020

Студворк — интернет-сервис помощи студентам

Доброго времени суток, Форумчане. Возникла необходимость в скрипте, который должен найти черный паззл на фотографии и получить координаты x,y его части, определенно центра его круга (или ближе), относительно всей фотографии. Как это можно сделать? буду рад если подскажите примерами или скинете ссылку на материал с которого лучше начать.

Фотографии:

Кликните здесь для просмотра всего текста

Название: Снимок.PNG
Просмотров: 368

Размер: 60.0 Кб

Название: Снимок2.PNG
Просмотров: 371

Размер: 56.0 Кб

@Nick07 · 15.03.2021, 08:28

Сообщение от Quad

найти черный паззл

Для начала выделите те области, где значения пикселей = 0

@Quad · 15.03.2021, 12:39 **[ТС]**

Я на столько продвинулся (рис 1), и даже нашел координаты этого паззла, но как теперь узнать координаты кружка этого черного паззла? код кстати находит координаты относительно всей фотографии, чего я и хотел))

Кликните здесь для просмотра всего текста

Opencv. Как найти фигуру на фотографии и получить координаты его части ?

Код:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
import cv2
import numpy as np
 
img = cv2.imread("screen.png")
hsv= cv2.cvtColor(img,cv2.COLOR_BGR2HSV)
 
lower_range = np.array([0,0,0])
upper_range = np.array([0,0,0])
 
mask = cv2.inRange(hsv,lower_range,upper_range)
 
contours,hierarchy = cv2.findContours(mask,cv2.RETR_EXTERNAL,cv2.CHAIN_APPROX_SIMPLE)
 
if len(contours) !=0:
    for contour in contours:
        if cv2.contourArea((contour)) > 500:
            x,y,w,h = cv2.boundingRect(contour)
            cv2.rectangle(img,(x,y),(x+w,y+h),(0,255,),1)
            print("Координаты пазла x:",x,"y",y)
cv2.imshow("Image",img)
#cv2.imshow("Mask",mask)
cv2.waitKey(0)
cv2.destroyAllWindows()

@u235 · 15.03.2021, 15:19

Просто измерить смещение в пикселях относительно левого верхнего угла разве нельзя?

Добавлено через 2 минуты
Что-тотипа x=x+0.8*w, y=y+0.5*h

@Quad · 15.03.2021, 15:56 **[ТС]**

Конечно можно, Сэр! вопрос лишь в том как это сделать.

@u235 · 15.03.2021, 17:59

Quad, легко и непринужденно.

Python
1
2
x=int(x+0.833*w)
y=int(y+0.6*h)

Как получил такие числа?
Открыл ваш скриншот с пазлом в XnView. Кропнул пазл, в строке состояния увидел, что размеры пазла 60х60 пикселей.
Перевел курсор мыши в центр правого круглого черного элемента-зацепки, увидел в строке состояния координаты х=50, у=36. 50/60=0.83333, 36/60=0.6 . Все.

@Quad · 16.03.2021, 14:22 **[ТС]**

u235, Как вы наверное, поняли, я делал этот скрипт чтобы решать капчу, я синхронизировал его со своим проектом на BAS (это комплекс для браузерной автоматизации) в общем, со вчерашнего дня пытаюсь понять, почему слайдер не перетягивается к координатам, что я получил по вашей формуле. Я попробовал поиграться со значениями в формуле, но это тоже мало помогло, иногда капча решается а иногда нет, каждая 5-я капча решается, это очень плохой результат, я не думаю что это погрешность OpenCv, ведь он распознает этот черный паззл на любом фоне.

Видео, как работает скрипт.

Может у вас есть предположение почему так происходит?

@Quad · 16.03.2021, 14:27 **[ТС]**

P.S OpenCv распознает фигуру очень хорошо даже на целой странице

Кликните здесь для просмотра всего текста

@u235 · 17.03.2021, 20:24

Quad, думаю, что кроме фигуры (пустого пазла) вам надо распознать положение пазла, который надо двигать. Также вы в примерах совсем не упоминали о том, что пазлы могут частично пересекаться.

@Quad · 17.03.2021, 20:50 **[ТС]**

u235, извиняюсь, я забыл про это упомянуть. А зачем нужно заморачиваться с тем паззлом что нужно сдвинуть? ведь.. у меня все там логично, получаю скрин web страницы, получаю координаты второго паззла относительно страницы и двигаю по координатам. Ну если вы предполагайте, что так надо , то как же мне получить сначала координаты двигаемого паззла ?

P.S скрипт иногда воспринимает соприкасаемые паззлы как единое целое, как этого тоже избежать?))

Кликните здесь для просмотра всего текста

@u235 · 17.03.2021, 21:26

Quad, я не знаю как там на сайте сделано, вам виднее, но по логике от пользователя ожидают следующих действий:
1. поместить указатель мыши на пазл.
2. зажать левую кнопку мыши.
3. переместить указатель на соответствующее место пустого пазла.
4. отпустить левую кнопку мыши.
Так вот если конечная точка - правый выступ пустого пазла, то стартовая точка должна быть правым выступом перемещаемого пазла. Т.е. нельзя схватить пазл, например, за верхний левый угол и переместить этот угол в правый круглый выступ. Отсюда следует, что нужно знать положение как конечного (черного) пазла, так и стартового.
Про соприкасаемые пазлы: избавьтесь от тонких линий морфологическими операциями типа открытие/закрытие.

@Hevarus · 22.06.2021, 18:12

u235, здравствуйте. Не могу написать Вам личное сообщение)

@user-ganz · 22.06.2021, 18:42

Quad,

Python
1
2
    result = cv2.matchTemplate(little,big, cv2.TM_SQDIFF_NORMED)
    _,_,(x,y),_=cv2.minMaxLoc(result)

Добавлено через 1 минуту
находит даже то чего нет (((

@u235 · 22.06.2021, 19:10

user-ganz, попробуйте поменять местами litle -образец, и big - изображение. И то и другое одноканальные картинки?

Новые блоги и статьи Все статьи Все блоги /
Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост. Programma_Boinc 28.12.2025 Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост. Налог на собак: https:/ / ********/ gallery/ V06K53e Финансовый отчет в Excel: https:/ / ********/ gallery/ bKBkQFf Пост отсюда. . .	Кто-нибудь знает, где можно бесплатно получить настольный компьютер или ноутбук? США. Programma_Boinc 26.12.2025 Нашел на реддите интересную статью под названием Anyone know where to get a free Desktop or Laptop? Ниже её машинный перевод. После долгих разбирательств я наконец-то вернула себе. . .	Thinkpad X220 Tablet — это лучший бюджетный ноутбук для учёбы, точка. Programma_Boinc 23.12.2025 Рецензия / Мнение/ Перевод Нашел на реддите интересную статью под названием The Thinkpad X220 Tablet is the best budget school laptop period . Ниже её машинный перевод. Thinkpad X220 Tablet —. . .	PhpStorm 2025.3: WSL Terminal всегда стартует в ~ and_y87 14.12.2025 PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .	Как объединить две одинаковые БД Access с разными данными VikBal 11.12.2025 Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.
Новый ноутбук volvo 07.12.2025 Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro	Музыка, написанная Искусственным Интеллектом volvo 04.12.2025 Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .	От async/await к виртуальным потокам в Python IndentationError 23.11.2025 Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .	Поиск "дружественных имён" СОМ портов Argus19 22.11.2025 Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .	Сколько Государство потратило денег на меня, обеспечивая инсулином. Programma_Boinc 20.11.2025 Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .

@Quad 0 / 0 / 0 Регистрация: 23.05.2020 Сообщений: 62

	Opencv. Как найти фигуру на фотографии и получить координаты его части ? 14.03.2021, 23:45. Показов 13407. Ответов 13 Метки opencv, как найти фигуру (Все метки) Доброго времени суток, Форумчане. Возникла необходимость в скрипте, который должен найти черный паззл на фотографии и получить координаты x,y его части, определенно центра его круга (или ближе), относительно всей фотографии. Как это можно сделать? буду рад если подскажите примерами или скинете ссылку на материал с которого лучше начать. Фотографии: Кликните здесь для просмотра всего текста 0

@u235 5514 / 2867 / 571 Регистрация: 07.11.2019 Сообщений: 4,752
	15.03.2021, 15:19
	Просто измерить смещение в пикселях относительно левого верхнего угла разве нельзя? Добавлено через 2 минуты Что-тотипа x=x+0.8w, y=y+0.5h 0

@Quad 0 / 0 / 0 Регистрация: 23.05.2020 Сообщений: 62
	15.03.2021, 15:56 [ТС]
	Конечно можно, Сэр! вопрос лишь в том как это сделать. 0

@Quad 0 / 0 / 0 Регистрация: 23.05.2020 Сообщений: 62
	16.03.2021, 14:22 [ТС]
	u235, Как вы наверное, поняли, я делал этот скрипт чтобы решать капчу, я синхронизировал его со своим проектом на BAS (это комплекс для браузерной автоматизации) в общем, со вчерашнего дня пытаюсь понять, почему слайдер не перетягивается к координатам, что я получил по вашей формуле. Я попробовал поиграться со значениями в формуле, но это тоже мало помогло, иногда капча решается а иногда нет, каждая 5-я капча решается, это очень плохой результат, я не думаю что это погрешность OpenCv, ведь он распознает этот черный паззл на любом фоне. Видео, как работает скрипт. Может у вас есть предположение почему так происходит? 0

@Quad 0 / 0 / 0 Регистрация: 23.05.2020 Сообщений: 62
	16.03.2021, 14:27 [ТС]
	P.S OpenCv распознает фигуру очень хорошо даже на целой странице Кликните здесь для просмотра всего текста 0

@u235 5514 / 2867 / 571 Регистрация: 07.11.2019 Сообщений: 4,752
	17.03.2021, 20:24
	Quad, думаю, что кроме фигуры (пустого пазла) вам надо распознать положение пазла, который надо двигать. Также вы в примерах совсем не упоминали о том, что пазлы могут частично пересекаться. 0

@Quad 0 / 0 / 0 Регистрация: 23.05.2020 Сообщений: 62
	17.03.2021, 20:50 [ТС]
	u235, извиняюсь, я забыл про это упомянуть. А зачем нужно заморачиваться с тем паззлом что нужно сдвинуть? ведь.. у меня все там логично, получаю скрин web страницы, получаю координаты второго паззла относительно страницы и двигаю по координатам. Ну если вы предполагайте, что так надо , то как же мне получить сначала координаты двигаемого паззла ? P.S скрипт иногда воспринимает соприкасаемые паззлы как единое целое, как этого тоже избежать?)) Кликните здесь для просмотра всего текста 0

@u235 5514 / 2867 / 571 Регистрация: 07.11.2019 Сообщений: 4,752
	17.03.2021, 21:26
	Quad, я не знаю как там на сайте сделано, вам виднее, но по логике от пользователя ожидают следующих действий: 1. поместить указатель мыши на пазл. 2. зажать левую кнопку мыши. 3. переместить указатель на соответствующее место пустого пазла. 4. отпустить левую кнопку мыши. Так вот если конечная точка - правый выступ пустого пазла, то стартовая точка должна быть правым выступом перемещаемого пазла. Т.е. нельзя схватить пазл, например, за верхний левый угол и переместить этот угол в правый круглый выступ. Отсюда следует, что нужно знать положение как конечного (черного) пазла, так и стартового. Про соприкасаемые пазлы: избавьтесь от тонких линий морфологическими операциями типа открытие/закрытие. 1

@Hevarus 0 / 0 / 0 Регистрация: 18.06.2021 Сообщений: 10
	22.06.2021, 18:12
	u235, здравствуйте. Не могу написать Вам личное сообщение) 0

@u235 5514 / 2867 / 571 Регистрация: 07.11.2019 Сообщений: 4,752
	22.06.2021, 19:10
	user-ganz, попробуйте поменять местами litle -образец, и big - изображение. И то и другое одноканальные картинки? 0