Хранение и обработка данных

Управление корпоративными данными

Объемы корпоративных данных увеличиваются с большой скоростью. Данные накапливаются в самых различных ИТ-системах и бизнес-приложениях(CRM, ERP, billing, monitoring и т.д.). Установлено, что объем данных в больших приложениях увеличивается на 50% ежегодно. Такой рост значительно влияет на IT-инфраструктуру и IT-бюджет. Существует острая необходимость в управлении растущими объемами данных, при этом уделяя внимание снижению расходов. IT-подразделения нуждаются в эффективных, экономически обоснованных, масштабируемых решениях, которые позволят обеспечивать безопасное и эффективное управление структурированными и неструктурированными данными в течение всей их жизни — от разработки и тестирования до архивации и списания.

Специалисты компании «КрафтКом» имеют практический опыт реализации проектов:

  • построения систем управления базами данных (СУБД) на базе продуктов Oracle, Microsoft SQL, PostgreSQL, MySQL
  • разработки и внедрения корпоративных хранилищ данных DWH (DataWarehouse)
  • построение архитектуры BigData на базе Apache Hadoop, Cloudera
  • формирование единых нормативно-справочных систем
  • интеграции различных систем и миграции данных.

Хранилище данных (DataWarehouse, DWH) представляет собой специально организованную единую базу данных компании, в которой обеспечивается сбор, хранение и быстрый доступ к предметно-ориентированной, интегрированной и поддерживающей хронологию корпоративной информации.

Сбор данных в корпоративное хранилище производится с помощью ETL-процессов (extract, transform, load), обеспечивающих не только перенос данных в хранилище из различных систем-источников, но и их трансформацию в соответствии с заданными правилами, устранение противоречий. Таким образом, качество информации в хранилище данных становится существенно выше, чем в системах-источниках, что позволяет использовать DWH различным пользователям в качестве единого источника достоверной информации.

Специалисты «КрафтКом» осуществляют полный цикл работ по построению хранилищ данных, начиная с детальной проработки целей и методологии использования хранилища данных и заканчивая непосредственной реализацией.

Как правило, разработка сложных корпоративных хранилищ данных осуществляется поэтапно. В результате выполнения каждого этапа заказчик получает работоспособную версию Data Warehouse и приложений бизнес-аналитики. Такой подход позволяет минимизировать проектные риски как заказчика, так и исполнителя, улучшить понимание целей и задач создания DWH и постепенно вовлекать в проект все новых пользователей.

Назад