4 апреля 2025 года
Программный комплекс по управлению данными «ASOFT. Платформа» пополнился ETL-инструментом. Он поможет архитекторам и инженерам данных максимально оперативно наполнять витрины данных из разных источников.
ETL (Extract, Transform, Load) – так называются инструменты для извлечения, трансформации и загрузки данных. С их помощью можно загружать данные напрямую из информационных систем и обрабатывать их на месте. Рассмотрим подробнее, что происходит на каждом из этапов.
Extract или извлечение. С помощью SQL-запросов забираем данные напрямую из базы данных внешней информационной системы. Для максимально безопасного соединения используются специальные методы шифрования.
Transform или преобразование. Извлечённые данные преобразовываем, чтобы они соответствовали требованиям наборов данных. Например, избавляемся от дубликатов, применяем фильтр или изменяем формат.
Load или загрузка. Подготовленные данные загружаем в наборы данных. Они проходят форматно-логический контроль, то есть проверку того, что они правильно оформлены.
Команда «АСофт21» поможет настроить все этапы, чтобы они происходили автоматически. Мы возьмем все заботы на себя и организуем безопасный обмен данными между витриной и другими источниками данных.
Использование ETL-инструментов поможет работать с данными напрямую, без использования API и создания специальных адаптеров. Таким образом отпадает необходимость доработки информационных систем для наполнения витрин данных. Это значительно экономит бюджет наших заказчиков.
Инструмент незаменим при создании единой системы отчётности (так называемой «коммунальной витрины»). С помощью ETL можно наполнять витрины данных из разных информационных систем и не зависеть от вендоров. Неоцифрованные данные можно собирать с помощью конструктора региональных сервисов – еще одного компонента «ASOFT. Платформы». Таким образом, можно сформировать полноценный хаб данных, который будет содержать в себе данные для предоставления отчётности и оказания госуслуг.
«ASOFT.Платформа»: новые возможности для наполнения витрин данных