Система обработки и хранения архивов

Заказчик
ПАО Банк «ФК Открытие»
Руководитель проекта со стороны заказчика
ИТ-поставщик
«Неофлекс»
Год завершения проекта
2020
Сроки выполнения проекта
Сентябрь, 2019 - Ноябрь, 2020
Масштаб проекта
12000 человеко-часов
1500 автоматизированных рабочих мест
Цели

  • Оптимизация стоимости владения архивными данными
  • Обработка запросов государственных органов по архивным данным в режиме реального времени
  • Снижение рисков потери архивных данных
  • Отказ от поддержки систем, выведенных из эксплуатации
  • Максимально снизить зависимость от уникальной экспертизы по выведенным из эксплуатации системам


Уникальность проекта

  • Уникальная ИТ-инфраструктура (более 150 различных архивных ИТ-систем)
  • Высокая разнородность систем (более 10 различных типов СУБД)
  • Большие объёмы данных (300 Тб+)
  • Высокие требования к производительности (100+ одновременно работающих пользователей, 1000+ запросов в минуту)
  • Амбициозные цели и сроки проекта
Использованное ПО

Oracle Big Data Appliance, Cloudera Data Platform, Apache Spark, Apache Hive, Cloudera Impala, Cloudera Navigator, Tibco Jasper Report, Neoflex Datagram

Сложность реализации
Ключевые вызовы проекта заключались в его разнородности (большое число разных систем, разных типов СУБД, разные требования к отчетам из этих систем), а также высоких требованиях к производительности (300+ Тб данных, 1500+ пользователей, ответы на запросы госорганов в автоматизированном режиме).
Описание проекта

Банк «Открытие» входит в топ-10 крупнейших банков России и является системно значимым. Региональная сеть банка насчитывает 600 клиентских офиса в 244 городах 73 регионов страны. Банк «Открытие» обладает уникальным ИТ-ландшафтом, в котором в результате процессов присоединения других банков аккумулировалось более 150 архивных систем.

Оптимизация стоимости владения большим объемом разнородных архивных систем при постоянном потоке запросов регулирующих органов - одна из стратегических задач трансформации ИТ-ландшафта банка.

В рамках проекта было использовано решение Active Archive, разработанное компанией «Неофлекс», на базе современных инструментов стека Big Data. Это позволило осуществить бесшовный переход пользователей на взаимодействие с новой системой и провести безопасное отключение старых архивных систем. Многоцелевой набор компонентов и горизонтальная масштабируемость решения предоставляют практически неограниченные перспективы развития системы.

Запуск системы хранения и обработки архивов ознаменовал успешный старт трансформации работы банка с архивными данными. Система позволит существенно оптимизировать стоимость владения архивными данными и бизнес-процессы, направленные на работу с ними, снизить нагрузку на операционные подразделения, а также предельно минимизировать финансовые и репутационные риски банка «Открытие».
География проекта
На проекте работала распределенная совместная команда. Ключевые заказчики, архитекторы и управленческий состав команды находился в Москве, производственные команды находились в Новосибирске, Саратове, Воронеже и Пензе. Внедренное решение используется сотрудниками во всех филиалах в 73 регионах РФ.
Коментарии: 4
  • Евгений Вязилов
    Рейтинг: 20
    ФГБУ "ВНИИГМИ-МЦД"
    зав.лаб.
    25.11.2020 17:25

    Проект, конечно, интересный, но где информация о применяемых стандартах, разработанных сервисах, наличие метаданных.

  • Юлия Валерьевна Анисимова
    Рейтинг: 47
    ООО Санаторий Велегож
    Начальник отдела связи и ИТ
    16.12.2020 19:59

    Добрый вечер! Спасибо. С интересом познакомилась с Вашим проектом.

  • Максим Часовиков
    Рейтинг: 1020
    МГУ имени М.В.Ломоносова, Центр цифровой экономики
    Заместитель руководителя службы управления проектами
    05.01.2021 21:38

    Проект достаточной масштабный, но к сожалению не указано подробностей. Пока можно сказать, что это проект ИТ дл ИТ – изменили внутреннюю структуру и добились некоторых формальных улучшений для бизнеса – например снизилось время исполнения запроса по получению архивных документов. Существенным достижением могло бы стать обработка разнородных данных и извлечение сведений из таких данных.

    • Эльдар Ниязов Максим
      Рейтинг: 15
      Банк "Открытие"
      Руководитель проекта трансформации работы с архивными системами
      11.01.2021 12:21

      Максим, добрый день!
      Основные сервисы типичны для современного банка: организация единого Data API над архивными данными, реализация автоматизированного взаимодействия с ФОИВ, предоставление пользователям наиболее востребованных отчетов, организация работы с данными для технологов, настройка решения для работы с метаданными и обеспечение безопасности.
      Управление метаданными - одна из ключевых задач при работе с архивными данными, в т.ч. для оптимизации работы пользователей и ИТ по ad-hoc запросам. Она была реализована с использованием инструментов Cloudera Navigator и Hue, входящих в дистрибутив Cloudera CDP.
      В столь кратком описании проекта в рамках премии невозможно раскрыть все детали решения, будем рады поделиться опытом.

Год
Предметная область
Отрасль
Управление