2.6. Организация ETL-операций #
Определите, как OLAP-данные добавляются в хранилища, и организуйте ETL-операции для сценариев развёртывания.
Добавить OLAP-данные в хранилища можно одним из следующих способов:
Из аналитических таблиц или напрямую из Parquet-файлов, используя ETL-операции.
Это самый простой и надёжный способ, поскольку он обеспечивает изменения OLAP-данных и метаданных в рамках транзакций.
Использование SQL-скриптов и пользовательских ETL-операций.
Рекомендуется использовать этот способ, только если необходимый результат невозможно достичь с помощью ETL-операций.
Важно
Если используется этот способ, правильная регистрация и целостность метаданных не гарантируются.
Для выполнения сложной обработки исходных OLAP-данных в ходе ETL-операций можно использовать операции Postgres Pro, временные таблицы и пользовательские скрипты для преобразования данных.