UIAutomate - автоматизация нестандартных элементов GUI
- Автор темы InnI
- Дата начала
Как вариант
Код:
#include <UIAutomate.au3>
$oPage = _UIA_GetElementFromHandle(ControlGetHandle("AutoIt — Википедия - Google Chrome", "", "Chrome_RenderWidgetHostHWND1"))
$aText = _UIA_FindAllElements($oPage, "ControlType", $UIA_TextControlTypeId)
$aFrom = _UIA_FindElementsInArray($aText, "Name", "Класс языка", False, True)
$aTo = _UIA_FindElementsInArray($aText, "Name", "Повлиял на" , False, True)
For $i = $aFrom[1] + 1 To $aTo[1] - 1
ConsoleWrite(_UIA_ElementGetPropertyValue($aText[$i], "Name") & @CRLF)
NextНадо кликнуть по строке в панели ($UIA_EditControlTypeId), куда
программа выводит и периодически обновляет текстовые данные.
Эти данные мой скрипт может считать и принять за юзера решение,
по какой строке кликать.
Первое, что пришло на ум - по координатам мыши. Но известен только размер
панели, и то, что там есть скроллбар. То есть невозможно определить, сколько
строк помещается в панель, чтобы высчитать координаты клика по нужной строке.
Какие еще есть варианты? В смысле не еще, а вообще, потому что тут тупик.
программа выводит и периодически обновляет текстовые данные.
Эти данные мой скрипт может считать и принять за юзера решение,
по какой строке кликать.
Первое, что пришло на ум - по координатам мыши. Но известен только размер
панели, и то, что там есть скроллбар. То есть невозможно определить, сколько
строк помещается в панель, чтобы высчитать координаты клика по нужной строке.
Какие еще есть варианты? В смысле не еще, а вообще, потому что тут тупик.
Последнее редактирование:
Элемент Edit не поддерживает шаблоны работы с текстом. Всё, что можно от него получить - это весь текст и положение скролла. Количество строк, положение каретки, наличие выделения Edit не возвращает. Без "костылей" не обойтись.
Если Edit поддерживает выделение (Shift + Down) и копирование (Ctrl + C), то можно построчно выделять текст, копировать в буфер обмена, сравнивать с искомой подстрокой, при совпадении искать цвет выделения текста и кликать в координаты цвета.
Жажда неизведанного погнала в другую сторону - _UIA_ElementMouseClick.
Задаю координаты для клика - кликает по 6 строке.
Опускаю окно (без ресайза) строго по игреку вниз - кликает по 17й.
Во-1х, почему не по 6й.
Во-2х, почему по строке ниже, а не выше.
Думал, координаты мыши абсолютные (относительно границ экрана), видно не так.
Скроллинга нет, специально вывел текста где-то на 80% высоты панели.
Задаю координаты для клика - кликает по 6 строке.
Опускаю окно (без ресайза) строго по игреку вниз - кликает по 17й.
Во-1х, почему не по 6й.
Во-2х, почему по строке ниже, а не выше.
Думал, координаты мыши абсолютные (относительно границ экрана), видно не так.
Скроллинга нет, специально вывел текста где-то на 80% высоты панели.
@breakin
Посмотрите координаты элемента через _UIA_ElementGetBoundingRectangle() до смещения окна и после. И сравните с Inspect. Возможно, после перемещения окна нужно обновить элемент (заново найти/создать).
Вот пример для блокнота. Работает корректно без обновления элемента - выделяет ту же строку.
Посмотрите координаты элемента через _UIA_ElementGetBoundingRectangle() до смещения окна и после. И сравните с Inspect. Возможно, после перемещения окна нужно обновить элемент (заново найти/создать).
Вот пример для блокнота. Работает корректно без обновления элемента - выделяет ту же строку.
Код:
#include <UIAutomate.au3>
Run("notepad.exe")
$hWnd = WinWaitActive("[class:Notepad]")
WinMove($hWnd, "", 50, 50, 400, 300)
$hEdit = ControlGetHandle($hWnd, "", "Edit1")
For $i = 1 To 9
ControlSend($hWnd, "", $hEdit, $i & @CR)
Next
$X = 80
$Y = 60
$oEdit = _UIA_GetElementFromHandle($hEdit)
_UIA_ElementMouseClick($oEdit, "", $X, $Y, 2)
Sleep(1111)
ControlSend($hWnd, "", $hEdit, "^{home}")
Sleep(1111)
WinMove($hWnd, "", 50, 300)
_UIA_ElementMouseClick($oEdit, "", $X, $Y, 2)Дело оказалось в другом. Координаты в _UIA_ElementMouseClick относительные (относительно границ элемента),
а в _UIA_ElementGetBoundingRectangle - абсолютные (т.е. относительно границ экрана).
Просто не обратил внимания на слова "координата клика (по умолчанию середина ширины элемента)" в описании
функции. Из которых можно было бы догадаться об относительности.
Когда вычел из координат клика координаты границ элемента - заработало.
а в _UIA_ElementGetBoundingRectangle - абсолютные (т.е. относительно границ экрана).
Просто не обратил внимания на слова "координата клика (по умолчанию середина ширины элемента)" в описании
функции. Из которых можно было бы догадаться об относительности.
Когда вычел из координат клика координаты границ элемента - заработало.
Плдскажите пожалуйста почему этот код не считывает ссылку из адресной строки Firefox?
Код:
#include "UIAutomate.au3"
Opt("WinTitleMatchMode", 2)
sleep(1000)
WinActivate("Mozilla Firefox")
sleep(5)
$hWnd = WinWait("Mozilla Firefox")
$oParent = _UIA_GetElementFromHandle($hWnd)
$oElement = _UIA_GetControlTypeElement($oParent, "UIA_EditControlTypeId", "Адресная строка и строка поиска")
$URL = _UIA_ElementGetPropertyValue($oElement, "Value.Value")
MsgBox(0, "URL", $URL)
Последнее редактирование:
Запустите скрипт из SciTE по F5 и посмотрите в консоле ошибки.
две ошибки
!> _UIA_GetControlTypeElement : çíà÷åíèå óêàçàííîãî ñâîéñòâà íàéäåííûõ ýëåìåíòîâ íå ñîîòâåòñòâóåò çàäàííîìó
!> _UIA_ElementGetPropertyValue : ïåðâûé ïàðàìåòð íå ÿâëÿåòñÿ îáúåêòîì
Вы можете подсказать как устранить эти ошибки?
Интересно это только у меня этот код не работает?
Дело в том что это код изначально был сделан под хром, я только изменил титл с хрома на лису, в надежде что всё остальное должно подойти.
У меня нет SDK inspect так как на диске Ц нет свободных 2,6Гб чтобы его установить. Так что есть подозрение что не подходит какойто параметр
Последнее редактирование:
Для начала найдите на форуме способ исправить вывод кириллицы в консоль SciTE.
И не надейтесь. Это совершенно разные браузеры. Большинство примеров на этом форуме для хром нужно переделывать под лису.
А он и не нужен. Достаточно утилиты в архиве с UDF.
Верно. В данном случае имя панели адреса будет другим. У меня, например, работает так
Код:
$oElement = _UIA_GetControlTypeElement($oParent, "UIA_EditControlTypeId", "Найдите в Яндекс или введите адрес")Спасибо!
С её помощью увидел что не так.
Но всё равно практически не работает!
Дело в том что браузер как бы замораживается на минуту и он вообще недоступен становится, через минуту размораживается и иногда ссылку считывает но чаще не считывает и выдает ошибки в консоле.. В этот период лиса на 40% повышает загрузку процессора.
Хром моментально всё выполняет.
Так что проблема именно с лисой. (у меня версия лисы 90,0,1 64-бит)
Из-за чего такое может быть?
Проверьте пожалуйста на своей лисе.
вот ошибки
!> _UIA_FindAllElementsEx : îøèáêà ñîçäàíèÿ îáúåêòà ìàññèâà
!> _UIA_FindAllElements : îøèáêà ñîçäàíèÿ ìàññèâà ýëåìåíòîâ (îáúåêòîâ)
!> _UIA_GetControlTypeElement : îøèáêà ñîçäàíèÿ ìàññèâà ýëåìåíòîâ (îáúåêòîâ)
!> _UIA_ElementGetPropertyValue : ïåðâûé ïàðàìåòð íå ÿâëÿåòñÿ îáúåêòîì
Код:
#include "UIAutomate.au3"
Opt("WinTitleMatchMode", 2)
sleep(1000)
WinActivate("Mozilla Firefox")
sleep(5)
$hWnd = WinWait("Mozilla Firefox") ; копирует ссылку из адресной строки лисы
$oParent = _UIA_GetElementFromHandle($hWnd)
$oElement = _UIA_GetControlTypeElement($oParent, "UIA_EditControlTypeId", "Найдите в Google или введите адрес")
$URL = _UIA_ElementGetPropertyValue($oElement, "Value.Value")
MsgBox(0, "URL", $URL)
Последнее редактирование:
Верно. Они были и есть. Особенно при поиске массивов элементов.
Текст строки адреса можно получить так
Код:
#include "UIAutomate.au3"
$oParent = _UIA_GetElementFromHandle(WinWait("[RegexpTitle:.*Mozilla Firefox]"))
$oTypeCond = _UIA_CreatePropertyCondition("ControlType", $UIA_EditControlTypeId)
$oNameCond = _UIA_CreatePropertyCondition("Name", "Найдите в Google или введите адрес")
$oLogicCond = _UIA_CreateLogicalCondition($oTypeCond, "AND", $oNameCond)
$oElement = _UIA_GetElementFromCondition($oParent, $oLogicCond)
If IsObj($oElement) Then
$URL = _UIA_ElementGetPropertyValue($oElement, "Value.Value")
ConsoleWrite($URL & @CRLF)
Else
ConsoleWrite("Элемент не найден" & @CRLF)
EndIfВозможно, из-за некорректной реализации метода FindAll интерфейса IUIAutomation.
Спасибо!
Считывает быстро, просто фантастика!
Код работает, но возник вопрос - с некоторых сайтов адрес возвращается не полностью, без приставки:
https://
http://
в некоторых случаях это:
Можно ли получить полный адрес ссылки из адресной строки?
about:config
browser.urlbar.trimURLs = false
Или так
Код:
WinActivate("[RegexpTitle:.*Mozilla Firefox]")
Send("{F6}^{ins}{F6}")
Sleep(111)
$URL = ClipGet()
ConsoleWrite($URL & @CRLF)Спасибо, сделал по другому - если нет протокола направляю полуссылку в скрытый браузер IE и получаю обратно через .LocationURL
Это работает для разных браузеров...
Сообщение автоматически объединено:
А для других браузеров случайно не подскажите где изменить подобную настройку?
Последнее редактирование:
IE всегда показывает. Для хрома
В Chrome 83 добавлена опция отображения полного URL-адреса
В браузерную платформу Chromium 83, которая является основой для Google Chrome, добавлен экспериментальный флаг для принудительного отображения полного URL в адресной строке для всех веб-страниц
www.comss.ru
Может кому будет полезно знать чтобы часами не разбираться как я, пока не понял в чем дело.
А дело в том, что если скачиваете Firefox любой версии то при получении ссылки из адресной строки по примеру Inni (см. выше) всё работает.
Но если ваш браузер обновился автоматически до последней версии то ссылка из адресной строки не считывается а вместо этого зависает скрипт и браузер и отключать всё это приходится через диспетчер задач.
Так что, чтобы скрипт работал, нельзя допускать автоматическое обновление браузера, а нужно скачивать ручками новую версию.
Вот такую закономерность обнаружил.
Кстати, на обычных версиях не знаю, а вот на портейбл именно так.
А дело в том, что если скачиваете Firefox любой версии то при получении ссылки из адресной строки по примеру Inni (см. выше) всё работает.
Но если ваш браузер обновился автоматически до последней версии то ссылка из адресной строки не считывается а вместо этого зависает скрипт и браузер и отключать всё это приходится через диспетчер задач.
Так что, чтобы скрипт работал, нельзя допускать автоматическое обновление браузера, а нужно скачивать ручками новую версию.
Вот такую закономерность обнаружил.
Кстати, на обычных версиях не знаю, а вот на портейбл именно так.
@hexin
У меня сейчас последняя версия 91.0.1 (не портабл). Оба кода работают.
Убедитесь в правильном названии строки адреса - её текст зависит от поиска по умолчанию (Google, Яндекс и т.д.)
Также, попробуйте после запуска Firefox вызвать функцию _FirefoxAccessInit
А если у вас открыто более двух вкладок с "длинными" страницами, то метод FindAll лучше не использовать.
У меня сейчас последняя версия 91.0.1 (не портабл). Оба кода работают.
Убедитесь в правильном названии строки адреса - её текст зависит от поиска по умолчанию (Google, Яндекс и т.д.)
Также, попробуйте после запуска Firefox вызвать функцию _FirefoxAccessInit
UIAutomate - автоматизация нестандартных элементов GUI
Приветствую. Попробовал я эту библиотеку, но почему-то не получается установить текст в адресную строку FireFox. Вроде находит объект, кликается, устанавливается фокус, но текст не вставляется. Устанавливает @error = 3 - ошибка выполнения метода. #include Local $h1 =...
autoit-script.ru
Сообщение автоматически объединено:
А если у вас открыто более двух вкладок с "длинными" страницами, то метод FindAll лучше не использовать.
Последнее редактирование:
