Методи опрацювання Великих даних у федеративному сховищі даних

Abstract

Подано визначення Великих даних та описано основні характеристики. Подано моделі асоціацій між сутностями та характеристиками для різних категорій Nosql баз даних. Подано модель федеративного сховища Великих даних. Для представлення великих даних використано простір даних, який дає змогу працювати з різнотипними даними. Проте основною операцією інтеграції є не консолідація, а федералізація, що дає змогу зменшувати ємнісну складність запитів. Розроблено метод обміну різнотипними даними та приведення реляційних даних до моделі “сутність–характеристика”. Апробовано розроблені методи і алгоритми. There is given the Big data defenition and described the main characteristics. The models associations between entities and properties for the different categories Nosql databases “entity-characteristic” is constructed. For the presentation of Big data space there is used data that allows to work with heterogeneous data. However, the main operation is federalisation but no consolidation of integration, This allows capacitive reduce the complexity of requests. The method of heterogeneous data sharing and bringing to relational data model “entity-characteristic” was created. Were tested developed methods and algorithms.