Консолидация (Consolidation)

Синонимы: Data consolidation, Консолидация данных

Разделы: Бизнес-задачи

Комплекс методов и процедур, направленных на извлечение данных из различных источников, обеспечение необходимого уровня их информативности и качества, преобразование к единому формату, в котором они могут быть загружены в хранилище данных или аналитическую систему.

Консолидация данных является начальным этапом реализации любой аналитической задачи или проекта. В основе консолидации лежит процесс сбора и организации хранения данных в виде, оптимальном с точки зрения их обработки на конкретной аналитической платформе или решения конкретной аналитической задачи. Консолидация часто осуществляется созданием хранилища данных. Сопутствующими задачами являются оценка качества данных и их обогащение.

Основные критерии оптимальности с точки зрения консолидации данных:

  • обеспечение высокой скорости доступа к данным;
  • компактность хранения;
  • автоматическая поддержка целостности структуры данных;
  • контроль непротиворечивости данных.

Основные задачи консолидации данных:

  • выбор источников данных;
  • разработка стратегии консолидации;
  • оценка качества данных;
  • обогащение;
  • очистка;
  • перенос в хранилище данных.