Программа для ЭВМ «Универсальное хранилище мета-данных Датсис» применяется для описания и структурированного управления метаданными загружаемых в хранилище данных и параметрами подключения к источникам данных. Подключение к широкому набору источников позволяет увеличить спектр решаемых задач и область применения решения. Описание метаданных и связей между ними позволяет сформировать единое информационное пространство для решения бизнес-задач. Хранение историчности изменений позволяет подстраиваться под изменения структур и связей между источниками. Программа может быть вызвана /исполнена из Web-интерфейса и/или из сторонних компонентов.
Функциональные возможности: - ввод данных о параметрах и атрибутах подключений к источникам данных;
- хранение и управление атрибутами подключений к источникам данных с возможностью использования в других компонентах системы, детализация атрибутов;
- подключение к источникам данных в виде текстовых файлов, а также к базам данных PostgreSQL, Greenplum, ClickHouse, Elasticsearch, Apache Cassandra, хранилищам данных Hive (Hadoop), объектным хранилищам S3 / Ozone (Apache Hadoop), очередям Kafka, Apache Spark, API (REST);
- хранение и управление метаданными всей информации, загруженной в хранилище;
- детальное описание связей между источниками данных;
- ведение историчности изменения параметров подключений, описаний метаданных и связей между источниками/сущностями.