Автоматизация поиска изображение и нажатия ЛКМ

[IvanCapone]

Доброго времени суток!
Помогите/подскажите как правильно реализовать автоматизацию в другом окне.
Нужно постоянно искать кнопку на активном окне, после того как нашли нужно нажать ЛКМ и продолжать процес без остановки.. ищем нажимаем, ищем нажимаем..
спасибо

 

[All2khoff]

Чтобы чтото найти надо знать что искать.
Как минимум пара скриншотов бы пригодилась.
так же щелчок мыша должен быть по кнопке? или по случайному месту? или по расположению курсора...
Чем более подробную задачу вы опишите тем больше шансов что вы получите желаемый результат.

Данный код бесконечно ищет красный по всему окну окна paint и делает щелчок мышки в цент экрана при нахождении искомого.

; Установим активное окно Paint
WinActivate("Безымянный - Paint")

; Задать цвет красный в формате RGB
Global $redColor = 0xFF0000  ; Значение RGB для красного цвета

; Основной бесконечный цикл
While True
    ; Определить размеры активного окна
    $hWnd = WinGetHandle("Безымянный - Paint")
    $coord = WinGetPos($hWnd)

    ; Определяем область поиска
    $xStart = $coord[0]
    $yStart = $coord[1]
    $xEnd = $xStart + $coord[2]
    $yEnd = $yStart + $coord[3]

    ; Сканируем область на наличие красного цвета
    For $x = $xStart To $xEnd
        For $y = $yStart To $yEnd
            $pixelColor = PixelGetColor($x, $y)
            If $pixelColor = $redColor Then
                ; Если нашли красный цвет, щелкаем по центру экрана
                MouseClick("left", @DesktopWidth / 2, @DesktopHeight / 2)
                ExitLoop 2  ; Выход из обоих циклов
            EndIf
        Next
    Next

    ; Небольшая пауза, чтобы не нагружать процессор
    Sleep(100)  ; 100 миллисекунд
WEnd

 

[IvanCapone]

Чтобы чтото найти надо знать что искать.
Как минимум пара скриншотов бы пригодилась.
так же щелчок мыша должен быть по кнопке? или по случайному месту? или по расположению курсора...
Чем более подробную задачу вы опишите тем больше шансов что вы получите желаемый результат.

Данный код бесконечно ищет красный по всему окну окна paint и делает щелчок мышки в цент экрана при нахождении искомого.

; Установим активное окно Paint
WinActivate("Безымянный - Paint")

; Задать цвет красный в формате RGB
Global $redColor = 0xFF0000  ; Значение RGB для красного цвета

; Основной бесконечный цикл
While True
    ; Определить размеры активного окна
    $hWnd = WinGetHandle("Безымянный - Paint")
    $coord = WinGetPos($hWnd)

    ; Определяем область поиска
    $xStart = $coord[0]
    $yStart = $coord[1]
    $xEnd = $xStart + $coord[2]
    $yEnd = $yStart + $coord[3]

    ; Сканируем область на наличие красного цвета
    For $x = $xStart To $xEnd
        For $y = $yStart To $yEnd
            $pixelColor = PixelGetColor($x, $y)
            If $pixelColor = $redColor Then
                ; Если нашли красный цвет, щелкаем по центру экрана
                MouseClick("left", @DesktopWidth / 2, @DesktopHeight / 2)
                ExitLoop 2  ; Выход из обоих циклов
            EndIf
        Next
    Next

    ; Небольшая пауза, чтобы не нагружать процессор
    Sleep(100)  ; 100 миллисекунд
WEnd
[/AUTO
[/QUOTE]

Спасибо за ответ.
Задача состоит переключать трансляцию в discord.. после того как пользователь завершил видеочат нужно перейти на активную трансляцию..

Сообщение автоматически объединено: 25 Янв 2025

После окончания видеочата пользователь выключает видео и мы видим данное изображение.. требуется в данный момент ЛКМ 1 раз в любом месте

Сообщение автоматически объединено: 25 Янв 2025

Далее после 1 ЛКМ

Спасибо за ответ.
Задача состоит переключать трансляцию в discord.. после того как пользователь завершил видеочат нужно перейти на активную трансляцию..

Сообщение автоматически объединено: 25 Янв 2025

После окончания видеочата пользователь выключает видео и мы видим данное изображение.. требуется в данный момент ЛКМ 1 раз в любом месте

после первого изображения и одного нажатия ЛКМ нужно найти в окне и опять 1 ЛКМ по кнопке. Интересно чтобы работать именно по поиску изображения если эти возможно

 

[All2khoff]

Поиско по изображению есть... но большинство форумчан не устраивает его работа... медленно и ненадёжно(по отзывам).
информацию можно искать по названии библиотеки

ImageSearch.au3

Но я бы рекомендовал изучить варианты функций

PixelGetColor
PixelSearch

к стати скриншоты ваши больше похожи на фотографию, сделанную в прыжке...
Хотите готовый результат? потрудитесь предоставить нормальный материал для работы.
Скриншот должен быть максимального качества и размера... воспользуйтесть кнопкой на картинке... затем сохраните в графическом файле.
либо используйте программы для скриншотов типа "ножницы", "lightshot" и тд.

 

[mmalinovskij]

Поиско по изображению есть... но большинство форумчан не устраивает его работа... медленно и ненадёжно(по отзывам).
информацию можно искать по названии библиотеки

ImageSearch.au3

Но я бы рекомендовал изучить варианты функций

PixelGetColor
PixelSearch

к стати скриншоты ваши больше похожи на фотографию, сделанную в прыжке...
Хотите готовый результат? потрудитесь предоставить нормальный материал для работы.
Скриншот должен быть максимального качества и размера... воспользуйтесть кнопкой на картинке... затем сохраните в графическом файле.Посмотреть вложение 6384
либо используйте программы для скриншотов типа "ножницы", "lightshot" и тд.

Здравствуйте, у меня похожий вопрос, мне нужно найти "искомый текст" на странице "Скрин страницы" Я пробовал искать с помощью "ImageSearch" но он ничего не находил, я так понял что данный инструмент работает не стабильно, принял решение искать по группе пикселей, с помощью GPT юыл написан такой скрипт "
AutoItSetOption("PixelCoordMode", 0)
AutoItSetOption("MouseCoordMode", 0)

Local $x_start = 614
Local $x_end = 660 - 4 ; 5 пикселей по X
Local $y_start = 325
Local $y_end = 1125

Local $tolerance = 15

; Твой шаблон из 5 RGB-цветов
Local $patternRGB[5] = [ _
0xF0F2F5, _
0xBEC1C5, _
0x73767A, _
0xE0E2E5, _
0xF0F2F5 _
]

; Преобразуем в BGR
Local $patternBGR[5]
For $i = 0 To 4
$patternBGR[$i] = RGBtoBGR($patternRGB[$i])
Next

Func RGBtoBGR($hexColor)
Local $r = BitShift($hexColor, 16) And 0xFF
Local $g = BitShift($hexColor, 8) And 0xFF
Local $b = $hexColor And 0xFF
Return BitOR(BitShift($b, 16), BitOR(BitShift($g, 8), $r))
EndFunc

Func ColorsMatch($c1, $c2, $tol)
Local $r1 = BitAND($c1, 0xFF)
Local $g1 = BitAND(BitShift($c1, 8), 0xFF)
Local $b1 = BitAND(BitShift($c1, 16), 0xFF)

Local $r2 = BitAND($c2, 0xFF)
Local $g2 = BitAND(BitShift($c2, 8), 0xFF)
Local $b2 = BitAND(BitShift($c2, 16), 0xFF)

Return Abs($r1 - $r2) <= $tol And _
Abs($g1 - $g2) <= $tol And _
Abs($b1 - $b2) <= $tol
EndFunc

Local $found = False

MsgBox(64, "Поиск", "Ищем шаблон из 5 горизонтальных пикселей...")

For $y = $y_start To $y_end Step 2
For $x = $x_start To $x_end Step 2
Local $match = True

For $i = 0 To 4
Local $pxColor = PixelGetColor($x + $i, $y)
If Not ColorsMatch($pxColor, $patternBGR[$i], $tolerance) Then
$match = False
ExitLoop
EndIf
Next

If $match Then
MouseMove($x + 2, $y, 10) ; наведение в центр шаблона
MsgBox(64, "Найдено", "Пиксельный шаблон найден на X=" & $x & ", Y=" & $y)
$found = True
ExitLoop 2
EndIf
Next
Next

If Not $found Then
MsgBox(48, "Не найдено", "Шаблон не найден в указанной области.")
EndIf

"


который так же не выполняет нужные действия, как можно исправить ситуацию?