Design of the Database structure for the NICA project

Abstract

Разработка трехуровневая архитектура хранилища данных для результатов магнитных измерений. Основной целью при разработке структуры базы данных для проекта NICA являлось создание универсального решения, реализующего систему хранения и обработки результатов магнитных измерений, представляющего также удобный интуитивно-понятный интерфейс для доступа к данным, хранящимся в СУБД. В качестве платформы выбрана распределенная колоночная СУБД Vertica. С помощью технологии Apache Airflow построены направленные ацикличные графы, которые позволяют параллельно запускать ETL-процессы.

Development of a three-tier data warehouse architecture for magnetic measurements of NICA project. The main purpose in developing the database structure for the NICA project was to create a universal solution that implements a system for storing and processing the results of magnetic measurements, which also provides a convenient intuitive interface for accessing data stored in the DBMS. As a platform is selected a distributed Vertica DBMS . Using Apache Airflow technology, directional acyclic graphs are built that allow to run ETL processes in parallel.