ETL

ETL (от англ. Extract, Transform, Load — дословно «извлечение, преобразование, загрузка») — один из основных процессов в управлении хранилищами данных, ETL – общий термин для всех процессов миграции данных из одного источника в другой (другие связанные с этим термины – экспорт, импорт, конвертация данных, парсинг файлов, web-scrapping и пр.)который включает в себя: * извлечение данных из внешних источников; * их трансформация и очистка, чтобы они соответствовали потребностям бизнес-модели; * и загрузка их в хранилище данных. С точки зрения процесса ETL, архитектуру хранилища данных можно представить в виде трёх компонентов: * источник данных: содержит структурированные данные в виде таблиц, совокупности таблиц или просто файла (данные в котором разделены символами-разделителями); * промежуточная область: содержит вспомогательные таблицы, создаваемые временно и исключительно для организации процесса выгрузки. * получатель данных: хранилище данных или база данных, в которую должны быть помещены извлечённые данные. Перемещение данных от источника к получателю называют потоком данных. Требования к организации потока данных описываются аналитиком. ETL следует рассматривать не только как процесс переноса данных из одного приложения в другое, но и как инструмент подготовки данных к анализу.