Публично анонсирован новый искусственный интеллект компьютерного зрения от компании UiPath

  • Дата публикации: 25.02.2019

Перевод статьи «The New UiPath AI Computer Vision Is Now in Public Preview», рассказывающей о новом революционном инструменте компьютерного зрения UiPath AI, основанного на глубоком обучении.

Надежная автоматизация виртуальных рабочих столов (Vdi), таких, как Citrix, VMware, VNC и Windows Remote Desktop, всегда была крепким орешком для взлома в роботизированной автоматизации процессов. Сотни тысяч предприятий во всем мире используют Vdi и виртуализация на предприятиях растет с каждым днем.

Поиск простых решений для сложных проблем — это, безусловно, непростая задача. Как говорится:«Кто умеет ждать — дождётся большего», поэтому компания UiPath так рада объявить публичный анонс того, что можно назвать настоящим прорывом для индустрии RPA: новый инструмент компьютерного зрения UiPath AI, основанный на глубоком обучении.

Проблема автоматизации VDI

Специфической проблемой при попытке автоматизировать VDI является традиционная зависимость RPA от селекторов. Эти селекторы работают с базовыми свойствами элементов пользовательского интерфейса и отлично подходят для идентификации элементов приложения (например, кнопок, текстовых полей и т. д.) при автоматизации собственных декстопных систем. Однако этот метод терпит поражение при попытке автоматизировать одно и то же программное обеспечение для VDI.

Причина разбивки заключается в том, что VDI передаёт изображение удаленного рабочего стола аналогично тому, как это делают службы потоковой передачи видео. Там просто нет селекторов, чтобы идентифицировать видео.

Были попытки решить эту проблему с использованием оптического распознавания символов (OCR) и сопоставления изображений, но они привели к проблемам надежности и обслуживания, поскольку даже незначительные изменения в пользовательском интерфейсе нарушают автоматизацию.

До сих пор на рынке не было решения, позволяющего эффективно автоматизировать среду VDI.

Бесшовная автоматизация в декстопных и VDI средах

UiPath решает проблемы, рассмотренные выше, с помощью алгоритма компьютерного зрения AI, который позволяет распознавать пользовательские интерфейсы, используя сочетание AI, OCR, нечеткого сопоставления текста и систем защиты, чтобы связать все это вместе.

Это позволяет роботам “видеть” экран и визуально идентифицировать все элементы, а не полагаться на их скрытые свойства, идентификаторы и другие метаданные.

На самом деле, этот новый искусственный интеллект компьютерного зрения не ограничивается только средой VDI. Он также может распознавать элементы в тех случаях, когда традиционные методы автоматизации пользовательского интерфейса, включая SAP, Flash, Silverlight, PDF-файлы и даже изображения, испытывают проблемы.

В отличии от автоматизации при работе с изображениями, компьютерное зрение ИИ UiPath не полагается на соответствие изображения. В результате оно стабильно и очень устойчиво к изменениям интерфейса, включая цвет, шрифт, размер и разрешение. ИИ компьютерного зрения сразу обрабатывает все эти изменения и находит для них предполагаемую цель.

Смотрите демонстрацию нового компьютерного зрения AI в действии:

Искусственный интеллект в компьютерном зрении — путь вперед

Вся эта технология ещё находится в зачаточном состоянии, но компания уже строит большие планы на её развитие. В течение года для текущей версии добавятся ещё несколько улучшений юзабилити, с поддержкой записи полной автоматизации, с использованием ИИ компьютерного зрения, а затем, во второй версии будет привнесён совершенно новый уровень возможностей и надежности.

Оригинал статьи читайте на сайте uipath.com

Теги
  • Продукты
  • Услуги
  • Школа NFP
  • О компании
  • Карьера
Оставить заявку на консультацию
Услуги
Школа NFP
Прошедшие и предстоящие события школы
Завершился ноябрьский курс — Автоматизация МСФО в 1С:УХ 8
Завершился ноябрьский курс — Автоматизация МСФО в 1С:УХ 8
C 14 по 16 ноября 2022 на базе учебного центра 1С на Дмитровском шоссе, прошел курс «Автоматизация МСФО в 1С:Управление холдингом 8». Также слушателям был доступен онлайн формат участия. 4 человека в офлайн- и 15 человек в онлайн-формате получили новые знания о подсистеме учета и отчетности МСФО в «1С:Управление холдингом» и навыки работы с ней. «1С:Управление […]
22.11.2022
Курсы и вебинары офиса NFP в ноябре
Курсы и вебинары офиса NFP в ноябре
Коллеги, приглашаем вас принять участие в курсах на базе УЦ 1С и бесплатных вебинарах офиса NFP компании Первый Бит, которые пройдут в ноябре 2022 года!
11.11.2022
Предстоящие курсы и вебинары офиса NFP в октябре
Предстоящие курсы и вебинары офиса NFP в октябре
Коллеги, приглашаем вас принять участие в курсах на базе УЦ 1С и бесплатных вебинарах офиса NFP компании Первый Бит, которые пройдут в октябре  2022 года!
14.10.2022
Предстоящие курсы офиса NFP в сентябре
Предстоящие курсы офиса NFP в сентябре
Коллеги, приглашаем вас принять участие в курсах на базе УЦ 1С и бесплатных вебинарах офиса NFP компании Первый Бит, которые пройдут в сентябре 2022 года!
06.09.2022
Предстоящие курсы офиса NFP в августе
Предстоящие курсы офиса NFP в августе
Коллеги, приглашаем вас принять участие в в курсах на базе УЦ 1С  офиса NFP компании Первый Бит, которые пройдут в августе 2022 года!
03.08.2022
Завершился курс — Бюджетный контроль в прикладном решении 1С: ERP. УХ 8
Завершился курс — Бюджетный контроль в прикладном решении 1С: ERP. УХ 8
Старший консультант NFP Надежда Павлиогло провела курс по продукту «1С: ERP. Управление холдингом 8» в Учебном центре 1С №1 .
25.07.2022
Завершился курс — Автоматизация МСФО в 1С:УХ 8
Завершился курс — Автоматизация МСФО в 1С:УХ 8
Старший консультант NFP Артем Кондрашов провел курс по продукту «1С:Управление Холдингом» в Учебном центре 1С №1 .
21.07.2022
Предстоящие вебинары и курсы офиса NFP в июле
Предстоящие вебинары и курсы офиса NFP в июле
Коллеги, приглашаем вас принять участие в в курсах на базе УЦ 1С и бесплатных вебинарах офиса NFP компании Первый Бит, которые пройдут в июле 2022 года!
05.07.2022