Чем корпоративное хранилище данных отличается от озера данных?

Некоторые отличия корпоративного хранилища данных (Data Warehouse, DWH) от озера данных (Data Lake):

• Целевое назначение. 1solution.ru bigdataschool.ru DWH востребованы руководителями, аналитиками и другими конечными бизнес-пользователями. 1solution.ru Озера данных используются в основном дата-сайентистами для быстрой отработки бизнес-гипотез с помощью алгоритмов машинного обучения. 1solution.ru
• Подход к проектированию. 1solution.ru bigdataschool.ru Структура DWH построена на классической реляционной логике работы с данными. 1solution.ru Проектирование озера данных основано на ETL-процессах с учётом многообразия источников и приёмников разноформатной информации. 1solution.ru
• Качество данных. 1solution.ru В DWH можно хранить только структурированные данные, которые прошли обработку. 1solution.ru В Data Lake могут содержаться неструктурированные и полуструктурированные данные. 1solution.ru Из-за этого в Data Lake могут встречаться дубликаты, ошибочные и непроверенные данные. 1solution.ru
• Производительность. 1solution.ru DWH предназначены для максимально быстрой обработки запросов. 1solution.ru В Data Lake запросы обрабатываются не так быстро. 1solution.ru
• Совокупная стоимость владения. 1solution.ru Для проектирования и поддержки DWH необходимо приобрести дорогостоящую специализированную платформу. 1solution.ru Озера данных обычно строятся на базе бюджетных серверов или облака. 1solution.ru

Пользователь

Время добавления