Построение хранилищ данных на технологиях open source

Создание хранилища данных (ХД) – важная задача, в рамках реализации которой объединяются все данные для использования в аналитической отчетности и других информационных системах. Использование технологий на базе открытого кода (open source) минимизирует инвестиции в построение ХД, так как отсутствуют затраты на лицензии, и одновременно позволяет соответствовать всем требованиям импортозамещения. Дополнительно, для реализации проектов по созданию хранилищ данных могут применяться передовые российские технологии

При выборе технологий для создания хранилища данных мы руководствуемся факторами, которые позволяют увеличить эффективность использования ХД для целей компании и минимизировать риски, связанные с применением коммерческих программных продуктов, разработанных за рубежом.

Преимущества наших решений:

• Высокая производительность при экономичном горизонтальном масштабировании;

• Отказоустойчивость и высокая доступность;

• Разделяемая нагрузка и гарантированный уровень SLA;

• ELT-обработка и трансформация данных;

• Совместимость с существующими информационными системами;

• Ролевая модель доступа и полное обеспечение информационной безопасности.

В рамках направления «Построение хранилища данных на технологиях open source» «КОРУС Консалтинг» предлагает следующие услуги:

• Аудит существующей ИТ-инфраструктуры компании для сбора требований для создания ХД;
• Аудит существующего ХД (при наличии);
• Рекомендации по использованию технологических средства на основе открытого кода и программных продуктов, соответствующих требованиям импортозамещения;
• Сбор и обсуждение методик, реализованных в существующих управленческих отчетах (при наличии);
• Формулирование требований и методологий для управленческих отчетов;
• Систематизация бизнес-требований к составу атрибутов данных хранилища данных;
• Разработка логической модели хранилища данных;
• Разработка структуры физической модели хранилища данных;
• Разработка концептуальной схемы, подходов ETL-процессов по загрузке данных из учетных систем в хранилище данных;
• Технологическая реализация ETL/ELT -процессов;
• Разработка хранилища данных;
• Создание документации по ХД;
• Тестирование.

Корпоративное хранилище можно сравнить с большим и умным складом данных. Этот «склад» помогает компаниям решать следующие задачи в области управления данными:

• Моментальный доступ к необходимой информации

Это особенно актуально для крупных компаний, с большим количеством источником данных и подразделений, которые эти данные генерят.

• Длительная сохранность данных

ХД могут годы поддерживать данные в корректном состоянии.

• Исключение влияния аналитики данных на другие процессы и системы

ХД – отдельное решение, поэтому при выгрузке из него информации нельзя повлиять на работоспособность других корпоративных систем.

Другие направления

• Системы бизнес-аналитики (Business Intelligence)
• Импортозамещение BI-систем
• Машинное обучение и Большие данные
• Управление данными
• Клиентская аналитика (Customer Intelligence)
• Ценообразование
• Построение хранилищ данных
• Оптимизация рабочих графиков персонала (WFM)

Решение может быть реализовано с помощью следующих технологий: