Система розпізнавання та перекладу текстової інформації в мобільних додатках з використанням бібліотеки Microsoft Cognitive OCR

Abstract

Розглянуто програмні засоби обробки як рукописного, так і друкованого тексту з подальшим його перекладом на мобільних платформах Android та IOS. Наведено метод реалізації повністю кросплатформних рішень для складних мобільних систем. Запропоновано реалізацію системи на базі алгоритму обробки тексту за допомогою бібліотеки Microsoft Cognitive OCR, наведено діаграму класів взаємодії модулів системи на основі технологій машинного навчання. Забезпечено кросплатформне рішення для мобільних систем Android та IOS. Досліджено ефективність розпізнавання різних шрифтів, написаних різними мовами, та виведено вірогідність правильного розпізнавання слів відносно кількості символів у кожному тесті.The solution of handwritten and printed text processing problem with subsequent translation in such mobile platforms like Android and IOS is proposed. It was demonstrated method of fully cross-platformsolutions development for large mobile systems. It was implemented system with the base on general algorithm of text recognition and processing using Microsoft Cognitive OCR, and illustrated main system modules communication with basics on machine learning, using class diagram. Cross-platform solution for Android and IOS mobile systems was provided. It was investigated different font types, which were used in recognized text. Also set of different language texts was investigated and probability of correct recognition was calculated.