Как работает ABBYY FlexiCapture Studio
Создание шаблона происходит на двух уровнях – через диалоги программы (dialog boxes) и с использованием языка описания гибких форм FlexiCapture. Поэтому разработать шаблон сможет даже специалист, не имеющий навыков программирования.
Пользователь «обучает» программу искать нужные поля. Для этого в терминах FlexiCapture Studio создается описание структуры гибких форм – FlexiLayout, в котором содержится информация по расположению каждого поля формы через задание его окружения – стационарного текста, рисунков, разделителей, свободных участков и т.д. Опираясь на FlexiLayout, программа находит все похожие объекты и выбирает вариант, в наибольшей степени совпадающий с описанием. Если поля найдены правильно, гибкий шаблон FlexiLayout переносится в программу FormReader или FineReader Engine.
Итак, процесс разработки состоит из нескольких этапов: создание проекта, описание блоков и элементов, отладка FlexiLayout, экспорт FlexiLayout в FormReader или FineReader Engine.
Создание проекта
Разработка описания структуры гибких форм начинается с создания проекта, в котором будет храниться сам FlexiLayout и образцы форм, для которых FlexiLayout создается. Пользователю понадобится несколько десятков образцов. Чем больше количество форм, на которых протестирован FlexiLayout, тем лучше будут результаты их ввода с помощью FormReader или FineReader Engine.
Далее изображения распознаются в ускоренном режиме, на них автоматически выделяются объекты: текст, разделители, картинки, штрих-коды. Создается «карта» каждого изображения, все выделенные объекты можно посмотреть на странице одновременно или выборочно по типам. Пользователь проверяет качество распознавания текста, определяет, какие элементы встречаются на изображениях достаточно стабильно, чтобы можно было использовать их как отправную точку для поиска других элементов. Кроме того, пользователю желательно выбрать наиболее типичное, эталонное изображение, на котором есть характерные элементы и все (или большинство) полей и начать разработку гибкого описания FlexiLayout именно с него.
Описание блоков и элементов
На эталонной странице выбираются поля, из которых будут вводиться данные в программе FormReader, они определяются как блоки, им присваивается имя и выбирается тип блока. Для каждого блока пользователь старается обнаружить опорные элементы, которые могли бы служить ориентирами при поиске поля.
Но ведь и сами элементы надо найти! Для каждого из них задается область поиска в координатах или относительно других элементов, значения характеристик элемента (в зависимости от типа) или их диапазон, разрешённые или запрещённые символы (для тестовых блоков). Между элементами устанавливается взаимосвязь, например, через определение области поиска одного элемента (справа, сверху и т.д.) относительно другого, через указание ближайшего элемента, через объединение в составной элемент AND.
Созданный FlexiLayout нужно проверить – если не соблюдается иерархия элементов (описание элемента должно ссылаться только на элементы, расположенные выше по дереву) или допущена ошибка в использовании языка гибких шаблонов FlexiCapture, программа предупредит об этом.
Программа, основываясь на описании, находит на изображении несколько (число ограничивает пользователь) возможных вариантов расположения элемента. Для каждого варианта строится гипотеза – предположение, что найденный элемент соответствует искомому. Степень соответствия описания и найденного элемента оценивается качеством гипотезы, которое рассчитывается с учетом штрафа за невыполнение условий поиска и изменяется в диапазоне от 0 до 1. Гипотеза с наибольшим значением показателя качества считается правильной. Если выбор верен, пользователь может приступать к описанию других элементов и блоков.
В итоге мы получаем FlexiLayout для первого выбранного документа – описание того, какие существуют блоки и как их найти, опираясь на элементы. Если FlexiLayout без ошибок накладывается на эталонную страницу, его можно тестировать на всём массиве изображений.
Отладка гибкого шаблона
С большой вероятностью полученный гибкий шаблон FlexiLayout не будет одинаково хорош для всех изображений. Его можно совершенствовать. FlexiCapture Studio предлагает для этого продвинутые механизмы.
Так, пользователь может создать эталонную разметку для каждого образца, выделив реальное расположение блоков. Программа цветом показывает отклонения при сравнении эталонной разметки с результатом наложения FlexiLayout, а также подсвечивают ненайденные объекты. В программе существует классификация гипотез в зависимости от типа элементов и статуса гипотезы (найдена/не найдена). Каждому типу гипотезы соответствует особый значок, все гипотезы изображаются в виде дерева, что позволяет пользователю быстро сориентироваться в предложенных программой вариантах.
Перед тем как приступить к внесению изменений, FlexiLayout и результаты его наложения сохраняются; у пользователя всегда будет возможность к ним вернуться. Измененный FlexiLayout вновь тестируется сначала на одной странице, затем на всём массиве. В результате получаем версию FlexiLayout, обеспечивающую максимально качественное наложение для тестируемого массива.
Путь к дальнейшему улучшению качества наложения лежит через «тренировку» FlexiLayout на максимально возможном количестве документов. Для этого в пакет добавляются новые страницы, и процедура отладки изменений происходит снова. До тех пор, пока пользователь не будет удовлетворён результатом.