Инспектор

Инспектор — окно, которое отображается в режиме записи системы ELMA RPA и позволяет сократить время при автоматизации процесса. Инспектор позволяет просматривать записанные в текущей сессии действия и управлять процессом записи. Окно инспектора отображается в правом нижнем углу экрана и закреплено поверх всех окон. Можно разделить это окно на три блока.

inspector-1

  1. Заголовок окна с указанием текущего режима поиска элементов. Наведите курсор на значок 117, чтобы просмотреть сочетание клавиш для вызова радиального меню (Ctrl+Alt+Q) в режиме записи. Справа от заголовка находится кнопка сворачивания/разворачивание окна.
  2. Список действий, записанных пользователем (последние три). При этом отображается сгенерированное название активити с указанием текущего режима поиска элементов и скриншот захваченного элемента интерфейса. Нажмите на кнопку 118, чтобы удалить последнее действие.
  3. Панель для управления записью процесса:

119 — завершение записи текущей сессии и сохранение процесса в Дизайнере ELMA RPA. При этом требуется подтвердить сохранение процесса.

120 — временное приостановление записи процесса. При этом красная рамка изменяет цвет и становится серой, а надпись «REC» в левом верхнем углу изменяется на «PAUSE». Чтобы вернуться в режим записи, нажмите на кнопку 121 в окне инспектора.

122 — изменение режима поиска элементов (Native или Vision).

123 — завершение записи текущей сессии процесса без сохранения.

Режимы поиска элементов

При моделировании процессов можно взаимодействовать с разными программами. Однако не все программы позволяют получить системные данные о том элементе, который требуется нажать или считать. Например, сайт или программа могут быть составлены так, что при их распознавании невозможно получить некоторые метки или признаки.

Обычно это связано с технологией реализации. Например, RDP-клиент показывает только изображение экрана виртуальной машины, к которой мы подключены, но не передает всю информацию открытых окон, элементов и т. д.

Для решения этой задачи в системе ELMA RPA существует два метода поиска элементов, которые различаются принципом взаимодействия: Native и Vision.

  1. Native — это метод поиска, при котором мы получаем системную информацию об объекте взаимодействия — некоторые признаки, по которым определяется тот или иной элемент среди других похожих.

ELMARP~1_img45

  1. Vision — это метод поиска, который используется, когда режим Native не может получить признаки объекта. При этом сохраняется изображение объекта, и с помощью алгоритмов компьютерного зрения среди всей рабочей области определяется необходимый элемент.

ELMARP~1_img46     ELMARP~1_img47

  1. Internet — это метод поиска, который используется для точного распознавания элементов веб-интерфейса. Этот метод доступен только при установленном расширении ELMA Web Recognizer и определяется автоматически при работе с браузерами.

начало внимание

Алгоритмы компьютерного зрения — не простое сравнение искомого изображения с заданным. Эти алгоритмы включают в себя методы, которые помогают классифицировать объект взаимодействия, что позволяет увеличить скорость работы системы.

конец внимание