Серый форум — AHK: Оптическое распознавание символов (OCR) с UWP API

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (Next) — Thu, 27 Jun 2024 12:39:08 +0000

Malcev, у меня появился вопрос по коду из поста 13.
Перестроить, чтобы поиск производился в нужных мне координатах, а не по действиям мыши, мне удалось. Но к сожалению всё работает в абсолютных координатах, а мне желательно именно для окна. По идее так и чуть быстрее будет. Не нашёл в каком месте кода определяется этот параметр.
Подскажите, пожалуйста!

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (Next) — Wed, 26 Jun 2024 15:35:56 +0000

Код из 13 замечательный. Мне нужно суметь задавать программно регионы поиска, а с преобразованием результатов я думаю проблем не будет.

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (teadrinker) — Mon, 10 Apr 2023 19:15:18 +0000

kol4p пишет:

А как мне получить эту переменную?

Какую?

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (kol4p) — Mon, 10 Apr 2023 17:19:08 +0000

А как мне получить эту переменную? Вот я хочу делать скриншот потом искать по скрину цифры и потом делать все тоже самое с другой половиной и искать совпадения.

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (Malcev) — Tue, 07 Jun 2022 15:47:32 +0000

Ну, если так хотите через uwp и подзапариться, то можете поискать или натренировать сами onnx модель и запустить её через uwp machine learning api.
http://forum.script-coding.com/viewtopic.php?id=16766

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (fkhlamingo) — Tue, 07 Jun 2022 14:26:47 +0000

opencv знаю, видел примеры с контурами, но не видел где он определяет к какой фигуре он принадлежит. Ну и таскать библиотеку конечно не хочется, при наличии альтернативы.

teadrinker пишет:

Вряд ли тут кто-то знает все возможности UWP API. Вы можете поизучать их здесь.

Изучал прежде чем написать. Но насколько я понял функций распознавания там с гулькин нос.

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (Malcev) — Mon, 06 Jun 2022 20:47:04 +0000

fkhlamingo, распозновайте с помощью opencv.

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (teadrinker) — Mon, 06 Jun 2022 17:49:44 +0000

Вряд ли тут кто-то знает все возможности UWP API. Вы можете поизучать их здесь.

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (fkhlamingo) — Mon, 06 Jun 2022 17:00:09 +0000

Добрый вечер.
Подскажите пожалуйста UWP API может распознавать геометрические фигуры? Квадрат, круг, прямоугольник, треугольник.

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (Phoenixxx_Czar) — Tue, 01 Feb 2022 04:19:15 +0000

Я тоже об этом думал, но читал, что оно не распознает цифры без букв, хотя после проверок - все нормально.
У меня получилось что-то такое, но можно это сделать как-то более элегантно что-ли?
hBitmap := Gdip_HBitmapFromScreen(900, 55, 780, 50)

	pBitmap := Gdip_CreateBitmapFromHBITMAP(hBitmap)
	DllCall("DeleteObject", "Ptr", hBitmap)

	pBrush := Gdip_BrushCreateSolid(0xFF000000)
	pGraphics := Gdip_GraphicsFromImage(pBitmap)

	Gdip_FillRectangle(pGraphics, pBrush, 0, 0, 60, 105)
	loop, 9
	{
		x := 60 + (51 * A_Index) + (20 * (A_Index - 1))
		Gdip_FillRectangle(pGraphics, pBrush, x, 0, 25, 105)
	}

	Gdip_DeleteBrush(pBrush)

	Gdip_DrawImage(pGraphics, pBitmap)
	Gdip_DeleteGraphics(pGraphics)

	hBitmap := Gdip_CreateHBITMAPFromBitmap(pBitmap)
	; SetImage(hpControl, hBitmap)
	Gdip_DisposeImage(pBitmap)

	pIRandomAccessStream := HBitmapToRandomAccessStream(hBitmap)
	text := ocr(pIRandomAccessStream, "en-US")
	ObjRelease(pIRandomAccessStream)

	DllCall("DeleteObject", "Ptr", hBitmap)

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (Malcev) — Mon, 31 Jan 2022 20:57:36 +0000

Закрашивайте лишние участки черным, а потом уже распознавайте.

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (Phoenixxx_Czar) — Mon, 31 Jan 2022 20:32:38 +0000

hBitmap := Gdip_HBitmapFromScreen(900, 55, 780, 50)
pIRandomAccessStream := HBitmapToRandomAccessStream(hBitmap)
DllCall("DeleteObject", "Ptr", hBitmap)
text := ocr(pIRandomAccessStream, "en-US")
ObjRelease(pIRandomAccessStream)

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (ypppu) — Mon, 31 Jan 2022 20:16:33 +0000

Phoenixxx_Czar пишет:

У меня не распознаются числа

А как Вы организовали распознавание? Я как-то давно сохранял все возможные цифры в виде картинок, и у меня получалось через ImageSearch.

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (__Михаил__) — Mon, 31 Jan 2022 19:31:52 +0000

Что если через поиск картинки (этих символов-иконок) организовать определение координат, затем можно например OCR текст определять начиная с этих координат.
Муторно правда выйдет.

Re: AHK: Оптическое распознавание символов (OCR) с UWP API

null@example.com (Phoenixxx_Czar) — Mon, 31 Jan 2022 19:05:24 +0000

Хотел бы поднять данную шикарную тему. У меня не распознаются числа, рядом с числом находится какая-то иконка и для многих иконок оно придумывает какую-то букву, а для какой-то похоже не всегда. Можно ли как-то это побороть? Приложу изображение, в данном случае не распознается "1730".
Используется английский язык (на русском все еще куда хуже и появлялись лишние цифры), сейчас выдает такой результат:

\"1910 02150 \"1610 m 2500 • 2520 • 1880 @ 3400 *3190 z 3390