Система хранения банковских данных в крупных финансовых учреждениях работает следующим образом: 1
- Сбор данных. 1 Банки собирают информацию из множества систем-источников, включая транзакционные (данные из основных банковских систем, транзакции через банкоматы, по кредитным картам и платформы онлайн-банкинга), операционные (информация из систем управления взаимоотношениями с клиентами (CRM), систем обработки кредитов и операций филиалов) и внешние источники (рыночные данные, кредитные бюро, регулирующие органы и сторонние финансовые службы). 1
- Архитектура хранилища. 1 Количество слоёв может варьироваться в зависимости от размера банка, нормативной среды и потребностей бизнеса. 1 Типичная архитектура включает несколько ключевых слоёв: 1
- ODS (Operational Data Store) — область хранения оперативных данных. 1 Данные в этом слое такие же, как и в системах-источниках. 1
- STG (Staging) — область обработки данных. 1 Прежде чем данные будут интегрированы в хранилище, они сначала попадают в область обработки, где подвергаются первичной очистке и преобразованию. 1
- DDS (Data Detail Store) — область детальных данных. 1 В данном слое собирается консолидированная модель детальных данных. 1
- Слой PRE_DM (Previous Data Mart) содержит данные в формате, удобном для расчёта нескольких витрин DM, так же используется для разделения тяжёлых расчётов на более мелкие части или, при необходимости, хранения истории расчётов за небольшой промежуток времени. 1
- Data Marts — это витрины данных. 1 Они предназначены для конечных пользователей — аналитиков и других сотрудников банка. 1 Витрины Data Mart представляют собой срез данных или аналитический отчёт хранилища, массив тематической, узконаправленной информации, ориентированный на пользователей одной рабочей группы или департамента. 1
С целью защиты информации и для непрерывной работы финансовых учреждений, необходимо устанавливать дублирующие друг друга системы обработки данных. 4 Часто резервные центры обработки данных по своим техническим характеристикам превосходят базовые и устанавливаются на специализированных площадках, обеспечивающих более высокий уровень надёжности системы. 4