Распознавание текстовых элементов на графических пользовательских интерфейсах программ

Есть только название темы и аннотация

Один из подходов к автоматизации тестирования программ -

это роботы-кликеры. Робот находит на экране элемент по

заданной картинке-паттерну и взаимодействует с ним. При

этом для текстовых элементов гораздо удобнее использовать

не картинки-паттерны, а прямой текст. Возникает проблема

распознавания текстовых элементов на экране.

Существующие инструменты, например tesseract,

справляются с этой задачей плохо, так как интерфейсы

программ имеют различные цветовые темы, типы и размер

шрифтов, а также обладают нетипичной разметкой текста.

Требуется разработать подход, решающий обозначенные проблемы.

Это аннотация

Страниц 70