Инспектор

Инспектор — окно, которое отображается в режиме записи системы ELMA RPA и позволяет сократить время при автоматизации процесса. Инспектор позволяет просматривать записанные в текущей сессии действия и управлять процессом записи. Окно инспектора отображается в правом нижнем углу экрана и закреплено поверх всех окон. Можно разделить это окно на три блока.

1. Заголовок окна с указанием текущего режима поиска элементов. Наведите курсор на значок , чтобы просмотреть сочетание клавиш для вызова радиального меню (Ctrl+Alt+Q) в режиме записи. Справа от заголовка находится кнопка сворачивания/разворачивание окна.
2. Список действий, записанных пользователем (последние три). При этом отображается сгенерированное название активити с указанием текущего режима поиска элементов и скриншот захваченного элемента интерфейса. Нажмите на кнопку , чтобы удалить последнее действие.
3. Панель для управления записью процесса:

— завершение записи текущей сессии и сохранение процесса в Дизайнере ELMA RPA. При этом требуется подтвердить сохранение процесса.

— временное приостановление записи процесса. При этом красная рамка изменяет цвет и становится серой, а надпись «REC» в левом верхнем углу изменяется на «PAUSE». Чтобы вернуться в режим записи, нажмите на кнопку в окне инспектора.

— изменение режима поиска элементов (Native или Vision).

— завершение записи текущей сессии процесса без сохранения.

Режимы поиска элементов

При моделировании процессов можно взаимодействовать с разными программами. Однако не все программы позволяют получить системные данные о том элементе, который требуется нажать или считать. Например, сайт или программа могут быть составлены так, что при их распознавании невозможно получить некоторые метки или признаки.

Обычно это связано с технологией реализации. Например, RDP-клиент показывает только изображение экрана виртуальной машины, к которой мы подключены, но не передает всю информацию открытых окон, элементов и т. д.

Для решения этой задачи в системе ELMA RPA существует два метода поиска элементов, которые различаются принципом взаимодействия: Native и Vision.

1. Native — это метод поиска, при котором мы получаем системную информацию об объекте взаимодействия — некоторые признаки, по которым определяется тот или иной элемент среди других похожих.

2. Vision — это метод поиска, который используется, когда режим Native не может получить признаки объекта. При этом сохраняется изображение объекта, и с помощью алгоритмов компьютерного зрения среди всей рабочей области определяется необходимый элемент.

3. Internet — это метод поиска, который используется для точного распознавания элементов веб-интерфейса. Этот метод доступен только при установленном расширении ELMA Web Recognizer и определяется автоматически при работе с браузерами.

начало внимание

Алгоритмы компьютерного зрения — не простое сравнение искомого изображения с заданным. Эти алгоритмы включают в себя методы, которые помогают классифицировать объект взаимодействия, что позволяет увеличить скорость работы системы.

конец внимание