Алгоритм відображення зміни лексичної насиченості тексту

Abstract

Описано запропонований алгоритм виявлення зміни відношення кількості різних слів до загальної кількості слів у тексті, який можна використовувати для вирішення питань визначення авторського стилю. Проблема порівняння стилів текстових творів є актуальною в наукових дослідженнях, зокрема в інформатиці. За допомогою цих методів можна покращити якість класифікації та впорядкування текстових колекцій, що актуально для пошукових систем і великих сховищ текстових даних. Відмінною ознакою алгоритму від аналогічних є його можливість аналізувати динаміку лексичної насиченості по тексту. Алгоритм програмно реалізовано в системі аналізу текстів. Described is the algorithm of detecting changes in the ratio of different words to the total number of words in the text which can be used to address the issues of determining the author's style. The problem of comparing text styles works is relevant in both philological and historical studies, as well as in computer science. The use of these comparison methods can improve the quality of classification and text collections management, which is important for search engines and large repositories of text data.