Развитие возможностей Витрины Данных «Эквайринг» и миграция на ArenadataDB

Заказчик:
Банк ВТБ (ПАО)
Руководитель проекта со стороны заказчика
Поставщик
Компания «Дататех» ГК «Иннотех»
Год завершения проекта
2023
Сроки выполнения проекта
Июнь, 2022 - Сентябрь, 2023
Масштаб проекта
38960 человеко-часов
Цели
  1. Обеспечить бизнес-подразделения всеми необходимыми данными и инструментом формирования отчетности и анализа продукта «Эквайринг»;
  2. Реализовать полное покрытие показателей продукта: операционные доходы/расходы, административно-управленческие расходы и т.д.
  3. Улучшить регламент формирования витрин и повысить надежность решения относительно текущего решения;
  4. Осуществить переход на целевую архитектуру в рамках цифровой трансформации Банка;
  5. Минимизировать дополнительную нагрузку на системы источники данных;
  6. Поддержать полный технологический суверенитет;
  7. Снизить общую стоимость владения.
Результаты
  1. Бизнес-подразделения обеспечены всеми необходимыми данными и инструментом формирования отчетности и анализа продукта «Эквайринг»;
  2. Реализовано полное покрытие показателей продукта: операционные доходы/расходы, административно-управленческие расходы и т.д.
  3. Улучшен регламент формирования витрин и повышена надежность решения;
  4. Осуществлен переход на целевую архитектуру в рамках цифровой трансформации Банка;
  5. Минимизирована дополнительная нагрузка на системы источники данных;
  6. Поддержан полный технологический суверенитет;
  7. Снижена общая стоимость владения.

Уникальность проекта

  1. В рамках проекта необходимо было внедрить объекты на разных уровнях хранилища
  2. Работа множества команд
  3. Новое хранилище на новом технологическом стеке (отсутствие источников, отсутствие процессов, новая методология)
  4. Более 5 млрд. записей и 2,5 Терабайта данных;
  5. Необходимость выполнения задач по развитию решения параллельно с основной задачей по миграции аналитической платформы.
Проект решает задачи импортозамещения
Да
Использованное ПО
Кластер Arenadata DB, PostgreSQL, Kafka, Prometheus, Grafana, Nginx, Airflow, Elastic search, ПАК «Сила СХД», Dremio, Форсайт.

Отдельно стоит выделить ETL Framework, который был создан с нуля командой проекта.

Сложность реализации
  1. Одновременная смена технологической платформы СУБД, смена модели детального слоя хранилища и частичная смена источников данных;
  2. Перенос больших объемов данных на целевую платформу ArenadataDB;
  3. Необходимость улучшить регламент готовности данных для бизнеса с Т+4 до Т+1 одновременно со сменой платформы;
  4. Реинжиниринг решения на импортозамещенных технологиях с использованием стека открытого программного обеспечения;
  5. Распределенная географически команда проекта по всей России и распределенная команда проекта по стримам: разработка витрин, разработка ядра, качество данных, ролевой доступ к данным, аналитически справочники и поддержка.

Описание проекта
  1. Кардинально переработаны и внедрены витрины данных на отечественной платформе ArenadataDB, позволяющие формировать отчетность по продукту «Эквайринг», содержащая финансовый результат в детализации до терминала в регламенте и актуальностью данных за предыдущий день
  2. Расчетные алгоритмы витрин данных работают на ядре нового хранилища данных на платформе ArenadataDB;
  3. В ядро нового хранилища данных загружаются данные из новых источников данных, реализованных в рамках цифровой трансформации Банка;
  4. Таким образом новая витрина работает на новой импортозамещенной платформе ArenadataDB, формируется на ядре нового хранилища данных и поступают данные из новых источников.
  5. Витрина переключена на новый отечественный BI-инструмент Форсайт с возможностью смотреть отчетность и анализировать данные в различных измерениях и детализации.
  6. Бизнес-пользователи дополнительно получили возможность получать отчетность и анализировать данные в импортозамещенных инструментах «Мой Офис».
  7. По результатам внедрения практически заново разработанных витрин данных на импортозамещенной платформе ArenadataDB удалось повысить качество данных, что положительно сказывается практически на всех бизнес процессах по развитию эквайринговой сети.
  8. Витрина данных содержит более 5 млрд. записей суммарным объеме данных более 2,5 Терабайт данных.
  9. Использование только импортозамещенных технологий и открытого программного обеспечения.
  10. В проекте с разной степенью вовлечения приняло более 90 человек из 15 профильных команд.

География проекта

Проект покрывает все операции по эквайрингу на территории России.

Система спроектирована для доступна из всех 66 региональных операционных офисах Банка ВТБ.

В настоящий момент с системой работают сотрудники из разных городов России.
Дополнительные презентации:

Эквайринг.pdf
Коментарии: 93

Комментировать могут только авторизованные пользователи.
Предлагаем Вам в систему или зарегистрироваться.

  • Марина Царева
    Рейтинг: 300
    Technology
    Бизнес-аналитик
    08.01.2024 20:38

    Повлиял ли как-нибудь насыщенный событиями 2023 год на такой важный проект? Может, пришлось привнести что-то новое в управление ресурсами, сроки и результаты по проекту? Возникали ли трудности с командами производства и если возникали - как приходилось решать?

    • Денис Селецкий Марина
      Рейтинг: 138
      ПАО ВТБ
      Руководитель кластера Управляющий механизм Платформа ЦЕХ
      08.01.2024 23:27

      2023 действительно насыщенный событиями год, но проекты на импортозамещение целевой тренд, который, несомненно, правильный выбор для независимости страны. Ключевые проекты нашего заказчика уже несколько лет идут в направлении активного импортозамещения. Каких- то отдельных трудностей по этой причине не возникло, все риски по большей части были заложены в проекте изначально, большая часть из них материализовалась, но мы знали, что с ними делать.

      • Дмитрий Алексеев Денис
        Рейтинг: 3900
        Банк ВТБ (ПАО)
        Заместитель руководителя Департамента Технологического Развития Общебанковских Систем
        08.01.2024 23:48

        Да, большое количество проектов направлены на технологический суверенитет. Наш проект обеспечивает технологический суверенитет Банка в части отчетности по продукту «Эквайринг» и это достигнуто, прежде всего, за счет кардинальной переработки и внедрения аналитических витрин данных на отечественной платформе Arenadata DB.

        • Сергей Федечкин Дмитрий
          Рейтинг: 458
          ВТБ, ПАО
          Директор по управлению проектами
          08.01.2024 23:59

          Представители бизнес-заказчиков в классическом понимании отсутствуют, а являются частью общей команды нацеленный на общий совместный результат. При таком подходе представители бизнеса принимают участие во всех этапах развития проекта. Возможно, это один из ключевых факторов успеха.

    • Станислав Дмитриев Марина
      Рейтинг: 367
      ПАО ВТБ
      Директор по управлению проектами
      08.01.2024 23:54

      2023 год не оставил в стороне никого, но 2022-й сделал прививку и помог более собрано реагировать на вызовы. Из основного – это стоимость оборудования и привлечение специалистов. Количество задач оказалось больше, чем ожидалось в начале года. Пришлось искать дополнительные ресурсы.

    • Станислав Дмитриев Марина
      Рейтинг: 367
      ПАО ВТБ
      Директор по управлению проектами
      08.01.2024 23:54

      Не могу сказать, что в управлении изобретали что-то новое. Из интересного могу поделиться тем, что отдельную сложность составляет миграция непромышленных областей в промышленном сегменте. Так называемые «песочницы», в которых бизнес-аналитики работают напрямую с данными. Пришлось взаимодействовать одновременно со всеми бизнес-пользователями. Для оптимизации времени был организован общий портал, где накапливались вопросы пользователей, и специально выделенные специалисты от производства готовили комментарии. Таким образом экспертиза шарилась между подразделениями.

    • Станислав Дмитриев Марина
      Рейтинг: 367
      ПАО ВТБ
      Директор по управлению проектами
      08.01.2024 23:54

      Трудности с командами производства появлялись на технологическом стыке между системами. Например, у одной системы не подразумевается среда разработки или тестирования (у неё такая специализация), а приёмо-сдаточные испытания по интеграции с ADB данных можно сдать в промышленную эксплуатацию только на предпромышленных средах. Приходилось договариваться.

      • Сергей Федечкин Станислав
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:59

        Решение делала совместная команда Банка и интеграторов. При это старались ключевые экспертизы держать непосредственно в структурах Банка. Подход совместной команды позволяет максимально полно реализовать все требования бизнес-заказчиков, т.к. бизнес-заказчик в классическом понимании отсутствует, а является также неотъемлемой частью команды.

    • Сергей Федечкин Марина
      Рейтинг: 458
      ВТБ, ПАО
      Директор по управлению проектами
      08.01.2024 23:58

      Объем данных исключительно в витрине данных «Эквайринг» доступных для бизнес-пользователей превышает 5 миллиардов записей и это свыше 2,5 Петабайт данных. Доступ к витрине данных возможен из всех уголков России в соответствии с ролевой моделью доступа.

    • Сергей Федечкин Марина
      Рейтинг: 458
      ВТБ, ПАО
      Директор по управлению проектами
      08.01.2024 23:58

      В рамках цифровой трансформации подключены новые целевые источники данных к ядру хранилища данных и далее загружены в витрину данных «Эквайринга». Для ускорения разработки и внедрения наполнения ядра хранилища и разработка витрины велись параллельно, это также добавило трудностей, но позволило быстрее создать и внедрить решение.

  • Марина Царева
    Рейтинг: 300
    Technology
    Бизнес-аналитик
    08.01.2024 20:39

    использовала ли команда производства подход Agile или вернулись к водопадному методу ведения проектов? Если да, удалось ли проверить плюсы такого подхода на практике в реализованном проекте? Если можно - с примерами кейсов

    • Денис Селецкий Марина
      Рейтинг: 138
      ПАО ВТБ
      Руководитель кластера Управляющий механизм Платформа ЦЕХ
      08.01.2024 23:33

      На проектах заказчика используется agile, дорожная карта проекта была разбита с учетом сроков и реальных возможностей производственных команд, за счет четких 2 недельных целей результат каждого этапа, ожидания были понятны, декомпозиция бэклога, его правильная приоритезация, постоянный выпуск готового оконченного функционала позволила всем участникам большой команды понимать кто чем занят в данный момент, процесс склеился в итоговый результат в ожидаемые сроки.

    • Станислав Дмитриев Марина
      Рейтинг: 367
      ПАО ВТБ
      Директор по управлению проектами
      08.01.2024 23:55

      У нас используются практики Agile, но не совсем в классическом понимании. Команды производства, разбитые по стримам, также работают в рамках спринтов. Но результатом стринтовой работы может быть не всегда отпилотированный работающий кусочек продукта, а просто часть общей задачи, которую декомпозировали и распределили по спринтам. В этом, наверное, ключевое отличие.

    • Сергей Федечкин Марина
      Рейтинг: 458
      ВТБ, ПАО
      Директор по управлению проектами
      08.01.2024 23:57

      Проект получился очень интересным с точки зрения вовлечения различных команд. Так в проекте создания и внедрения витрины данных «Эквайринг» было задействовано более 90 человек из 15 производственных команд. При этом потребовалось выстроить хорошее кросс-командное взаимодействие, т.к. внедрение витрины смогли сделать параллельно с развитием ядра хранилища.

  • Марина Царева
    Рейтинг: 300
    Technology
    Бизнес-аналитик
    08.01.2024 20:39

    На сколько правильное предположение, что многое в решении сделано силами интеграторов под ключ, пусть и под надзором руководителя проекта? Может ли такой подход в полной мере удовлетворить все требования и тонкости бизнес-заказчика со стороны ВТБ?

    • Денис Селецкий Марина
      Рейтинг: 138
      ПАО ВТБ
      Руководитель кластера Управляющий механизм Платформа ЦЕХ
      08.01.2024 22:27

      День добрый!
      Ключевые решения принимаются непосредственно заказчиком, сроки этапов, планы координируются непосредственно банком, за счет постоянного «надзорного» руководства удалось выявить ключевые риски и своевременно принять соответствующие меры, в отдельных активностях, где экспертизы привлеченных интеграторов не хватало, своевременно привлекались специалисты с необходимыми ключевыми компетенциями. Задачи проекта достигнуты.

      • Сергей Федечкин Денис
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:48

        2. Витрины данных по продукту «Эквайринг» позволяют формировать отчетность по продукту «Эквайринг» и содержат ключевые показатели в разрезе финансового результата и в детализации до терминала. При этом при миграции помимо переноса расширен функционал доступный бизнес-пользователям.

    • Руслан Мухаметгалин Марина
      Рейтинг: 111
      ПАО Банк ВТБ
      Директор Службы управленческого учета и анализа
      08.01.2024 23:30

      Предположение верное, но при этом заказчики были полноценными членами команды проекта. Заказчиками являлись как бизнес-подразделения Банка, корпоративно-инвестиционный бизнес, средний и малый бизнес, так и финансовый департамент. Со стороны заказчика формировались бизнес-требования, осуществлялась приоритезация выполнения задач, оказывалась полная методологическая поддержка, а также полноценное тестирование выполненных работ совместно с производственной командой.

      • Сергей Федечкин Руслан
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:56

        Витрина данных реализована при помощи ETL фреймворка, который является собственной разработкой Банка, и представляет из себя набор системных сервисов, обеспечивающих как разработку ETL процессов, так и задачи синхронной и непрерывной доступности данных для потребителей в нескольких обособленных контурах.

        • Сергей Федечкин Сергей
          Рейтинг: 458
          ВТБ, ПАО
          Директор по управлению проектами
          08.01.2024 23:57

          Помимо этого, на ядре хранилища данных несколько тысяч реальных ETL процессов ежедневно в регламенте загружают данные в целевое хранилище. Проект действительно очень масштабный, дальнейшее развитие подразумевает разработку новых модульных решений для повышения удобства эксплуатации, мониторинга, повышения скорости разработки, расширения библиотеки готовых типовых интеграций.

  • Марина Царева
    Рейтинг: 300
    Technology
    Бизнес-аналитик
    08.01.2024 20:40

    В подобных масштабных проектах одну из ключевых ролей играет вовлеченность бизнес-заказчика. Сколько бизнес-заказчиков было в проекте и как команде удалось обеспечить вовлеченность бизнес-заказчика в процесс реализации проекта?

    • Руслан Мухаметгалин Марина
      Рейтинг: 111
      ПАО Банк ВТБ
      Директор Службы управленческого учета и анализа
      08.01.2024 23:32

      Заказчиками являлись три подразделения Банка, как бизнес-подразделения Банка, корпоративно-инвестиционный бизнес, средний и малый бизнес, так и финансовый департамент. Поскольку витрины данных, разработанные в рамках проекта, применяются бизнес-подразделениями при управлении тарифами для клиентов, то не было необходимости в отдельных мероприятиях по повышению вовлеченности.

    • Станислав Дмитриев Марина
      Рейтинг: 367
      ПАО ВТБ
      Директор по управлению проектами
      08.01.2024 23:43

      Когда работа бизнес-заказчика напрямую зависит от работы платформы, можно сказать, что он является заложником (в хорошем смысле). Поэтому специальных усилий по привлечению внимания не прикладывалось, все и так были заинтересованы в результате.

  • Марина Царева
    Рейтинг: 300
    Technology
    Бизнес-аналитик
    08.01.2024 20:40

    Каким образом было организовано взаимодействие команды разработки с бизнес-заказчиком? Принимал ли бизнес-заказчик или его представитель участие в приемо-сдаточный испытаниях и на чьей стороны была подготовка пользовательских сценариев?

    • Денис Селецкий Марина
      Рейтинг: 138
      ПАО ВТБ
      Руководитель кластера Управляющий механизм Платформа ЦЕХ
      08.01.2024 21:40

      День добрый!
      Со стороны бизнеса была прямое участие, фактически за несколько месяцев анализировались детально все показатели витрин на предмет соответствия эталонам (замещаемый вариант решения), в итоге большая часть выявленных расхождений по результатам анализа была признана ошибками старых реализаций, незначительные замечания в новой реализации были устранены в ходе ОПЭ.

      • Руслан Мухаметгалин Денис
        Рейтинг: 111
        ПАО Банк ВТБ
        Директор Службы управленческого учета и анализа
        08.01.2024 23:33

        Дополню Дениса. Представители заказчиков были включены в состав проектной команды. Были организованы регулярные встречи участников проекта, на которых обсуждались все вопросы проекта. Заказчики полноценно участвовали в приемо-сдаточных работах, тест-кейсы отдельно формировались со стороны производственной команды, отдельно со стороны заказчиков.

    • Станислав Дмитриев Марина
      Рейтинг: 367
      ПАО ВТБ
      Директор по управлению проектами
      08.01.2024 23:59

      Мы придерживались гибридной парадигмы. Задача проекта была декомпозирована на команды. К установке инфраструктуры, например, привлекать заказчика не имело смысла, было достаточно статуса по работам. К работе на витрине использовалась парадигма сводных команд.

  • Марина Царева
    Рейтинг: 300
    Technology
    Бизнес-аналитик
    08.01.2024 20:40

    Планируются ли дальнейшие «волны» разработки проекта и на чем будут основываться требования - обратная связь пользователей или еще не реализованные потребности заказчика? На чьей стороне сейчас лежит поддержка внедренного решения?

    • Руслан Мухаметгалин Марина
      Рейтинг: 111
      ПАО Банк ВТБ
      Директор Службы управленческого учета и анализа
      08.01.2024 23:34

      Дальнейшие работы будут связаны с адаптацией под развитие и изменение данных платежных систем, внедрением новых банковских продуктов, а также развитием BI-решения в части удобства проведения анализа данных. Техническая поддержка внедрённого решения полностью лежит на плечах подразделений Банка, отвечающих за поддержку хранилища.

      • Сергей Федечкин Руслан
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:49

        3. Многие задаются вопросом: Могут ли отечественные решения соответствовать мировым уровням? Да, в нашем случае нам помимо внедрения на отечественную платформу удалось улучшить регламент готовности данных до четырех раз для всей России.

      • Сергей Федечкин Руслан
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:49

        В результате миграции на отечественную платформу существующего функционала и добавление нового функционала удалось обеспечить полное покрытие ключевых показателей продукта: операционные доходы/расходы, административно-управленческие расходы и т.д.

    • Сергей Федечкин Марина
      Рейтинг: 458
      ВТБ, ПАО
      Директор по управлению проектами
      08.01.2024 23:49

      4. Помимо миграции на платформу Arenadata DB бизнес-подразделения обеспечены всеми необходимыми данными и инструментом формирования отчетности и анализа по продукту «Эквайринг», включая инструменты доступа к данным. В будущем планируется расширить спектр отечественных инструментов для доступа к данным.

  • Марина Царева
    Рейтинг: 300
    Technology
    Бизнес-аналитик
    08.01.2024 20:40

    Какие уроки удалось извлечь в результате реализации проекта и эти уроки являются специфическими для Банка ВТБ или есть возможность ими воспользоваться другим организациям и проектам? Достаточно один-два наиболее ярких примера.

    • Руслан Мухаметгалин Марина
      Рейтинг: 111
      ПАО Банк ВТБ
      Директор Службы управленческого учета и анализа
      08.01.2024 23:35

      Наиболее яркий пример: создана единая кросс-функциональная команда, включая бизнес-заказчиков и бизнес-пользователей, включая необходимый и достаточный состав участников. Создание данной команды позволило выстроить эффективное взаимодействие, сформировать образ конечного результата единый
      для всей сводной команды. Данный опыт будет полезен для любой проектной команды.

      • Сергей Федечкин Руслан
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:56

        Помимо витрины данных доступной для задач "классического" анализа больших данных на СУБД Arenadata DB существует отдельное масштабное решение (озеро данных), интегрированное с аналитическим хранилищем как по данным, так и с помощью единого API предоставляемого ETL фреймворком. Вместе с аналитическим хранилищем и оперативным хранилищем они составляют основу платформы данных.

    • Станислав Дмитриев Марина
      Рейтинг: 367
      ПАО ВТБ
      Директор по управлению проектами
      08.01.2024 23:44

      Касательно уроков выделю такие, которыми можно воспользоваться везде: 1) оценка рынка по стоимости инфраструктуры и зависимости от внешних факторов; 2) оценка наличия необходимых компетенций внутри организации. Лучше чуть-чуть перезаложиться.

      • Сергей Федечкин Станислав
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:50

        6. В соответствии с Новым Производственным Процессом в проектах работают сводные команды сотрудников Банка и сотрудников интеграторов. Важно, что производство ведется в соответствии со стандартами и процессами Банка.
        Здесь нам удалось сменить парадигму заказчик-исполнитель и работать совместно на результат.

  • Марина Царева
    Рейтинг: 300
    Technology
    Бизнес-аналитик
    08.01.2024 20:41

    На сколько в полном объеме удалось достичь изначальных целей проекта или по ходу реализации при возникновении трудностей и срабатывании рисков приходись пересматривать и корректировать спектр достигаемых бизнес-целей? В случае изменения бизнес-целей как проходило согласование с бизнес-заказчиками

    • Руслан Мухаметгалин Марина
      Рейтинг: 111
      ПАО Банк ВТБ
      Директор Службы управленческого учета и анализа
      08.01.2024 21:03

      Цели проекта выполнены на 100 процентов. В ходе проекта цели проекта корректировались, но только в части расширения скоупа задач и улучшения результатов для заказчика. Изменения инициировались одним заказчиком и согласовывались с другими в рамках стандартных процедур.

      • Сергей Федечкин Руслан
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:52

        Здесь важно отметить, что ролевая модель данных соответствует всем требованиям информационной безопасности и обеспечивает сохранность и безопасность данных.
        Сохранность и безопасность данных превыше всего и при этом удалось предоставить возможность продвинутым аналитикам работать с данными.

      • Сергей Федечкин Руслан
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:52

        Да, бизнес и ИТ совместно достигли результата единой командой проекта.
        Всегда приятно слышать добрые слова от бизнес-заказчиков.
        «Ценность данных, необходимых для анализа и составления отчетности, прежде всего, — в их актуальности и корректности. Новое решение позволило улучшить именно эти характеристики. Кроме того, мы имеем возможность существенно быстрее анализировать данные, проверять их и предоставлять для принятия бизнес-решений», — подчеркнула Наталья Сурова, руководитель финансового департамента – вице-президент ВТБ.
        https://www.vtb.ru/about/press/news/?id=200495

    • Денис Селецкий Марина
      Рейтинг: 138
      ПАО ВТБ
      Руководитель кластера Управляющий механизм Платформа ЦЕХ
      08.01.2024 22:30

      За счет своевременного привлечения специалистов с необходимыми ключевыми компетенциями получилось не только выдержать, но по отдельным этапам и значительно сократить сроки сдачи заказчику на проверку готового функционала, что положительно сказалось на качестве проверок бизнесом и выводе функционала в промышленную эксплуатацию. Задачи проекта достигнуты.

      • Сергей Федечкин Денис
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:51

        Например, Доступы реализованы в соответствии с разработанной, согласованной и реализованной ролевой моделью доступа. Ролевая модель доступа является универсальной для всех аналитических витрин данных. Ролевая модель доступа реализована также на отечественном решении.

  • Марина Царева
    Рейтинг: 300
    Technology
    Бизнес-аналитик
    08.01.2024 20:41

    С какими рисками пришлось столкнуться по ходу проекта и каким образом удалось их митигировать? Ведется ли реестр проектных рисков и кто ответственный за его актуализацию? Возникали ли риски которые поставили под вопрос достижение целей проекта?

    • Денис Селецкий Марина
      Рейтинг: 138
      ПАО ВТБ
      Руководитель кластера Управляющий механизм Платформа ЦЕХ
      08.01.2024 22:36

      В ходе проекта была собрана большая экспертная команда с необходимым компетенциями. В неё входили представители от бизнеса, ключевые эксперты ядра системы, ведущие аналитики и разработчики производственной команды, команды модели и эксперты служб внедрения и сопровождения. Митигация рисков проводилась на ежедневной основе, за счет слаженной работы команды нацеленной на результат – результат есть, и он несомненно положительный!

    • Руслан Мухаметгалин Марина
      Рейтинг: 111
      ПАО Банк ВТБ
      Директор Службы управленческого учета и анализа
      08.01.2024 23:37

      Дополню Дениса. Разработка на новом технологическом стеке всегда несет существенные риски, но за счет компетентной команды проекта удалось нивелировать негативные последствия. Реестр рисков ведется в каждом проекте Банка, ответственным за актуализацию являются руководитель проекта и ИТ-менеджер проекта. В проекте возникали тяжелые моменты, но команде проекта удалось сохранить позитивный настрой и преодолеть все трудности.

  • Марина Царева
    Рейтинг: 300
    Technology
    Бизнес-аналитик
    08.01.2024 20:41

    Подскажите, пожалуйста, с точки зрения успешности достижения целей проекта удалось ли достичь все 100% или какие-либо цели были достигнуты частично или может быть какие-то были вынуждены признать безуспешными?

    • Сергей Федечкин Марина
      Рейтинг: 458
      ВТБ, ПАО
      Директор по управлению проектами
      08.01.2024 21:09

      Марина, добрый день.

      Цели проекта выполнены на 100%.

    • Сергей Федечкин Марина
      Рейтинг: 458
      ВТБ, ПАО
      Директор по управлению проектами
      08.01.2024 23:52

      Проект получил высокую оценку от Руководства Технологического Блока «Обработка данных является одним из ключевых этапов при подготовке отчетности. Благодаря внедренному решению банку удалось ускорить готовность данных для формирования отчетности по продукту «Эквайринг» — процедуры подготовки, проверки и загрузки данных ускорились в четыре раза. Кроме того, мы смогли реализовать еще одну ключевую задачу в рамках обеспечения технологического суверенитета», — отметил Никита Рыбченко, руководитель департамента технологического развития – старший вице-президент ВТБ.
      https://www.vtb.ru/about/press/news/?id=200495

  • Александр Данилов
    Рейтинг: 20
    ООО Философия.ИТ
    Партнер
    08.01.2024 20:51

    Добрый день! Интересный проект, скажите пожалуйста какое количество одновременно работающих пользователей с витриной?

    • Станислав Дмитриев Александр
      Рейтинг: 367
      ПАО ВТБ
      Директор по управлению проектами
      08.01.2024 23:48

      Добрый день! Основным заказчиком данных является Финансовый департамент. Как следствие достаточно большое количество одновременных пользователей работают с витриной Эквайринга - как сотрудники по планированию, так и отчётности.

      • Руслан Мухаметгалин Станислав
        Рейтинг: 111
        ПАО Банк ВТБ
        Директор Службы управленческого учета и анализа
        08.01.2024 23:57

        Дополню Станислава. Заказчиками проекта также являются бизнес-подразделения Банка, две глобальные бизнес-линии: корпоративно-инвестиционный бизнес, средний и малый бизнес. Также пользователями являются внутренний аудит и операционная поддержка

  • Бауржан Касенов
    Рейтинг: 314
    АО НК "КазМунайГаз"
    Директор департамента
    08.01.2024 21:46

    Дмитрий, добрый день.
    Расскажите, пожалуйста, какие у Вас планы по дальнейшему развитию проекта в перспективе следующего года и что планируете следующим этапом с точки зрения расширения функционала и/или состава бизнес-пользователей из новых подразделений Банка?

    • Руслан Мухаметгалин Бауржан
      Рейтинг: 111
      ПАО Банк ВТБ
      Директор Службы управленческого учета и анализа
      08.01.2024 23:38

      Основной задачей развития является расширение функциональности реализованного BI-решения в части удобства проведения анализа данных по продукту эквайринг, что непременно приведет к увеличению количества бизнес-пользователей со стороны заказчиков.

      • Сергей Федечкин Руслан
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:53

        Помимо улучшения регламента готовности данных и повышена надежность решения за счет создания распределенной архитектуры Disaster Recovery-решения. Распределенная архитектура DR-решения позволила территориально разнести и синхронизировать Программно-Аппаратные Комплексы (ПАК) и обеспечить высокую надежность всего решения.

  • Бауржан Касенов
    Рейтинг: 314
    АО НК "КазМунайГаз"
    Директор департамента
    08.01.2024 21:48

    Кто является бизнес-спонсором проекта?
    Каким образом один или несколько бизнес-спонсоров повлияли на ход проекта, и насколько он или они вообще вовлечены в сам процесс и на сколько довольны результатами проекта по внедрению решения?

    • Ирина Семизарова Бауржан
      Рейтинг: 78
      ПАО ВТБ
      Менеджер проекта управления "Фабрика данных"
      08.01.2024 22:39

      Добрый день!

      Бизнес-спонсорами проекта являются направления «Средний и малый бизнес» и «Корпоративное обслуживание», управление проектом от заказчиков осуществлялось сотрудниками Финансового департамента.

      Взаимодействие осуществлялось посредством регулярных встреч сотрудников бизнес-заказчика, финансового департамента и ИТ, на которых определялись приоритеты и согласовывались вопросы методологии.
      Решение функционирует на новой платформе с качеством, не уступающим предыдущей реализации на санкционном ПО.

      • Сергей Федечкин Ирина
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:53

        Помимо технологических преимуществ проект позволил улучшить финансовые показатели проекта за счет снижения общей стоимости владения системой. Снижение общей стоимости владения системой достигается за счет снижения стоимости приобретаемого программного обеспечения и снижения затрат на эксплуатацию.

    • Руслан Мухаметгалин Бауржан
      Рейтинг: 111
      ПАО Банк ВТБ
      Директор Службы управленческого учета и анализа
      08.01.2024 23:59

      Спонсорами проекта являются корпоративные бизнес линии Банка, также они являются заказчиками проекта. У некоторых задач проекта заказчиком являлась только одна бизнес линия, по совместным задачам расходы проекта аллоцировались на спонсоров в равных долях. Представители заказчика были полноценными членами проектной команды. Бизнес-спонсоры полностью удовлетворены результатами проекта

  • Бауржан Касенов
    Рейтинг: 314
    АО НК "КазМунайГаз"
    Директор департамента
    08.01.2024 21:49

    Расскажите, пожалуйста, про инфраструктуру решения:
    Размещен ли проект on-premises, или в облачной инфраструктуре?
    Если облака вы еще не используете, то есть ли в планах пилотирование облачных решений под такие задачи?

    • Руслан Мухаметгалин Бауржан
      Рейтинг: 111
      ПАО Банк ВТБ
      Директор Службы управленческого учета и анализа
      08.01.2024 23:40

      Инфраструктура проекта размещена в on-premises. Технологические решения Банка постоянно развиваются, пилотируется множество новых решений, реализуется стратегическая задача по импортозамещению решений. В части данного проекта пока не планируется перевод в облачную инфраструктуру.

  • Таиса Дасаева
    Рейтинг: 284
    ООО КРАСНОГОРСКИЙ МПК
    ИТ директор
    08.01.2024 21:52

    Добрый день!
    На какой из продуктов и технологий ложится основная нагрузка по выполнению проверок качества данных: База данных или сервера ETL?
    При реализации проверок качества данных на ресурсах хранилища данных, как правило, необходимо балансировать распределение нагрузки между собственно ETL-процессами и выполнением проверок.

    • Сергей Федечкин Таиса
      Рейтинг: 458
      ВТБ, ПАО
      Директор по управлению проектами
      08.01.2024 23:54

      В рамках проекта реализованы базовые проверки качества загружаемых данных в самом механизме загрузок. Разработчик имеет возможность «на лету» откинуть полные дубликаты, верифицировать и маркировать данные как не валидные в случае нарушения логики загрузки. Например, когда с источника явно приходит противоречивая история по бизнес логике, действующая на одну дату. Помимо этого, реализован основной объем проверок Data Quality в виде самостоятельных компонент платформы.

      • Сергей Федечкин Сергей
        Рейтинг: 458
        ВТБ, ПАО
        Директор по управлению проектами
        08.01.2024 23:54

        Также набор настраиваемых фильтров качества данных при разработке потоков данных достаточно гибкий, если каких-то алгоритмов верификации нет, хочется их разработать самому – фреймворк дает такую возможность, важное ограничение - такие проверки «на лету» должны соответствовать архитектурным требованиям системы, чтобы ETL процессы не деградировали по производительности. Помимо этого, реализован основной объем проверок Data Quality в виде самостоятельных компонент платформы.

    • Сергей Федечкин Таиса
      Рейтинг: 458
      ВТБ, ПАО
      Директор по управлению проектами
      08.01.2024 23:54

      В рамках проекта реализована интеграция с каталогом техническим метаданных, что позволяет на уровне работы ядра ETL обеспечивать сбор и соответствующую выгрузку данных для дальнейшей обработки и построения сквозного data lineage. В настоящий момент, реализована базовая часть сбора описаний, идет работа над расширением функционала.

  • Таиса Дасаева
    Рейтинг: 284
    ООО КРАСНОГОРСКИЙ МПК
    ИТ директор
    08.01.2024 21:53

    Достаточно часто пользователям тяжело адаптироваться в новых инструментах и это вдвойне сложно, когда приходится погружаться в новую тему.
    Что Вы делаете чтобы упростить или сгладить первые шаги бизнес-пользователями при работе с новой системой?

    • Ирина Семизарова Таиса
      Рейтинг: 78
      ПАО ВТБ
      Менеджер проекта управления "Фабрика данных"
      08.01.2024 23:45

      Добрый день!

      Действительно, сталкивались ранее с тем, что новые технологии и инструменты требуют повышенного внимания и дополнительных усилий для их освоения и адаптации пользователей.

      С целью упрощения знакомства пользователей с новой системой повышенное внимание уделили организации обучения, консультаций и демо-митингов, способствующих освоению функционала.

  • Таиса Дасаева
    Рейтинг: 284
    ООО КРАСНОГОРСКИЙ МПК
    ИТ директор
    08.01.2024 21:54

    В настоящий момент тема микросервисной архитектуры очень популярна, но как она помогла внедрению проекта и каким образом используется или планируется к использованию?
    Если можно на практических примерах вместо теоретических выкладок.

    • Сергей Федечкин Таиса
      Рейтинг: 458
      ВТБ, ПАО
      Директор по управлению проектами
      08.01.2024 23:57

      Витрина данных реализована на модульном решении. В рамках реализации платформы разработано большое количество функциональных микросервисов, интеграционных компонент, основные модули уже внедрены в промышленную эксплуатацию и активно используются несколькими сотнями потребителей в разработке ETL процессов.

  • Таиса Дасаева
    Рейтинг: 284
    ООО КРАСНОГОРСКИЙ МПК
    ИТ директор
    08.01.2024 21:55

    Подскажите, пожалуйста, на сколько в полном объеме удалось импортозаместить технологии в вашем проекте или все-таки еще остались какие-то части на зарубежном программном обеспечении или, возможно, в планах добиться 100% импортозамещения?

    • Руслан Мухаметгалин Таиса
      Рейтинг: 111
      ПАО Банк ВТБ
      Директор Службы управленческого учета и анализа
      08.01.2024 23:42

      Данный проект реализован полностью на отечественном технологическом стеке как в части хранилища данных, так и в части BI-решения. Импортозамещение является стратегической задачей Банка, с которой Банк успешно справляется и является лидером на банковском рынке.

    • Ирина Семизарова Таиса
      Рейтинг: 78
      ПАО ВТБ
      Менеджер проекта управления "Фабрика данных"
      08.01.2024 23:46

      Здравствуйте!
      Дополню Руслана: мы считаем, что цели проекта по импортозамещению достигнуты в полном объеме, так как решение переведено на стек технологий Arenadata DB, организовано взаимодействие с Озером данных, использующем отечественное решение Arenadana Hadoop, плюс функционал продвинутой аналитики базируется на российском BI решении «Форсайт».

  • Аллан Пиренов
    Рейтинг: 186
    AllanKo
    Директор по ИТ
    08.01.2024 21:57

    Как Вы оцениваете производительность, функциональность и надежность импортозамещенных технологий в сравнении с мировыми решениями?
    В случае падения производительности импортозамещенных решений их дешевизна будет нивелирована.

    • Ирина Семизарова Аллан
      Рейтинг: 78
      ПАО ВТБ
      Менеджер проекта управления "Фабрика данных"
      08.01.2024 23:49

      Добрый день.
      Однозначно ответить на данный вопрос не получится, поскольку в чем-то отечественные решения показывают себя лучше зарубежных аналогов, но при этом есть и зоны роста, к которым можно отнести в частности пользовательский интерфейс, инструментарий мониторинга и логгирования.
      Производительность отечественных СУБД, в некоторых случаях, может превышать производительность зарубежных решений, но есть и просадки, решению которых необходимо уделить отдельное внимание, в том числе в ходе реализации проекта.

    • Станислав Дмитриев Аллан
      Рейтинг: 367
      ПАО ВТБ
      Директор по управлению проектами
      08.01.2024 23:49

      Перед внедрением проводились испытания по нагрузке. Данная платформа позволяет решать необходимый пул задач с достаточной производительностью. При планировании увеличения процессов оценивается масштабирование инфраструктуры.

    • Сергей Федечкин Аллан
      Рейтинг: 458
      ВТБ, ПАО
      Директор по управлению проектами
      08.01.2024 23:55

      Инструменты управление графом загрузки реализованы в нескольких вариантах. Разработчик потоков загрузки может использовать готовый интеграционный сценарий из библиотеки интеграций, может добавить в типовой граф отдельные шаги в типовой процесс, если что-то необходимо уточнить, может полностью нарисовать свой граф процесса, используя базовые операторы и готовый функционал для взаимодействия с системными сервисами.

  • Тимофей Федянин
    Рейтинг: 10
    ООО Философия.ИТ
    Технический директор
    08.01.2024 21:58

    Какова роль и функциональность Dremio в контексте описанного проекта, учитывая, что он используется совместно с другими технологиями, такими как Arenadata DB, PostgreSQL и Kafka, и как Dremio влияет на процесс обработки и анализа данных в этом проекте?

    • Станислав Дмитриев Тимофей
      Рейтинг: 367
      ПАО ВТБ
      Директор по управлению проектами
      08.01.2024 23:51

      Dremio - это система распределения ролевого доступа с разграничением по категориям данных. напрямую на процесс анализа эта система не влияет, только разграничивает уровни доступа и видимости. Это позволяет обезопасить данные в хранилище.

  • Аллан Пиренов
    Рейтинг: 186
    AllanKo
    Директор по ИТ
    08.01.2024 21:58

    В какой парадигме Вы реализовали свой проект: заказчик-исполнитель или в виде сводных команд?
    Как это помогло Вам в достижении бизнес-результатов и как сказалось на успешности ведения в течение жизненного цикла проекта.
    Если бы заново стартовали проекта изменили бы подход или подход себя полностью оправдал?

    • Ирина Семизарова Аллан
      Рейтинг: 78
      ПАО ВТБ
      Менеджер проекта управления "Фабрика данных"
      08.01.2024 23:13

      Добрый день! В рамках проекта использовали подход сводных команд, который показал себя наиболее эффективным в ходе запуска на новой платформе. В команды привлекали как бизнес-заказчиков, так и ключевых экспертов разработки и сопровождения. Плотная совместная работа разработчиков с администраторами и сопровожденйами в разы ускорила решение многих вопросов.
      Если бы заново стартовали проект сразу бы применили подход сводных команд, как наиболее эффективный.

  • Аллан Пиренов
    Рейтинг: 186
    AllanKo
    Директор по ИТ
    08.01.2024 21:59

    Доступ к данным всегда является одним из краеугольных вопросов при построении аналитических систем.
    Высокие требования ставятся со стороны информационной безопасности.
    Подскажите, пожалуйста, каким образом Вы реализовали доступ к данным?

    • Ирина Семизарова Аллан
      Рейтинг: 78
      ПАО ВТБ
      Менеджер проекта управления "Фабрика данных"
      08.01.2024 23:50

      Здравствуйте.
      Вопрос доступа к данным — это один из ключевых вопросов, которые решали вне рамок проекта, так как использовалась концепция единых правил доступа к данным Хранилища данных.
      Для обновленного Хранилища данных применена модель управления доступом не только на уровне таблиц и представлений, но и на уровне столбцов и строк, что потребовало использование специфического ПО и решило задачу исключения избыточных прав доступа к данным для каждого пользователя.

  • Максим Клевицкий
    Рейтинг: 95
    ПАО СДМ-Банк
    Директор департамента банковских технологий
    08.01.2024 22:03

    У многих заказчиков в проектах возникают вопросы надежности импортозамещенных технологий и решений, построенных на их основе.
    Подскажите, пожалуйста, как Вы оцениваете надежность решений на основе импортозамещенных технологий и как Вы этого достигли?

    • Станислав Дмитриев Максим
      Рейтинг: 367
      ПАО ВТБ
      Директор по управлению проектами
      08.01.2024 23:53

      Добрый вечер! Перед внедрением проводились испытания по нагрузке. Данная платформа позволяет решать необходимый пул задач с достаточной производительностью. При планировании увеличения процессов оценивается масштабирование инфраструктуры.

  • Максим Клевицкий
    Рейтинг: 95
    ПАО СДМ-Банк
    Директор департамента банковских технологий
    08.01.2024 22:03

    И вопрос такого рода: столкнулись ли подрядчики со сложностями, связанными со спецификой банка ВТБ, при внедрении своих продуктов/решений и работе в рамках проекта?
    Получали ли когда-нибудь обратную связь от подрядчиков как им живется и работается на проектах банка ВТБ?

    • Руслан Мухаметгалин Максим
      Рейтинг: 111
      ПАО Банк ВТБ
      Директор Службы управленческого учета и анализа
      08.01.2024 23:44

      У Банка ВТБ нет особенностей при работе с подрядчиками. Поскольку подрядчики и заказчик были единой кросс-функциональной командой проекта, то у подрядчика не было статуса «исполнитель», все были нацелены на достижение единого результата.

    • Ирина Семизарова Максим
      Рейтинг: 78
      ПАО ВТБ
      Менеджер проекта управления "Фабрика данных"
      08.01.2024 23:51

      Добрый день!
      Дополню Руслана:
      Для обеспечения кросс-функциональности команды проекта был предпринят ряд организационных мероприятий, необходимых для соблюдения законодательства РФ и рекомендаций ЦБ в части работы с данными, относящейся к банковской тайне.
      В результате работы были организованы таким образом, что с реальными данным Банка работали только штатные сотрудники ВТБ.

  • Саида Сулейманова
    Рейтинг: 24
    ФИЛИПП ПЛЕЙН РУС
    Директор по ИТ трансформации
    08.01.2024 22:07

    Добрый вечер.
    Что нового привнесено в управление проектами за 2023 год в банке ВТБ и как это повлияло на результаты и сроки по проекту модернизации Корпоративного информационного хранилища данных?
    Возникали ли трудности с командами производства и как приходилось решать?

  • Саида Сулейманова
    Рейтинг: 24
    ФИЛИПП ПЛЕЙН РУС
    Директор по ИТ трансформации
    08.01.2024 22:08

    В проекте принимало участие несколько ИТ-поставщиков и на сколько правильное предположение, что все сделано силами интеграторов под ключ, пусть и под надзором руководителя проекта, или сотрудники банка ВТБ также принимали участие в проекте?

    • Денис Селецкий Саида
      Рейтинг: 138
      ПАО ВТБ
      Руководитель кластера Управляющий механизм Платформа ЦЕХ
      08.01.2024 23:17

      День добрый!
      Ключевые решения принимаются непосредственно заказчиком, сроки этапов, планы координируются непосредственно банком, за счет постоянного «надзорного» руководства удалось выявить ключевые риски и своевременно принять соответствующие меры, в отдельных активностях, где экспертизы привлеченных интеграторов не хватало, своевременно привлекались специалисты с необходимыми ключевыми компетенциями. Задачи проекта достигнуты.

  • Саида Сулейманова
    Рейтинг: 24
    ФИЛИПП ПЛЕЙН РУС
    Директор по ИТ трансформации
    08.01.2024 22:08

    В проектах реализации стратегии цифровой трансформации Банк одну из ключевых ролей играет вовлеченность бизнес-заказчика.
    Как Вам удалось обеспечить вовлеченность бизнес-заказчика в процесс реализации проекта?
    Каким образом было организовано взаимодействие?

  • Денис Селецкий
    Рейтинг: 138
    ПАО ВТБ
    Руководитель кластера Управляющий механизм Платформа ЦЕХ
    08.01.2024 23:15

    Как руководитель не одного большого проекта отмечу что нам очень повезло с заказчиками от бизнеса. Это реально профессионалы своего дела заинтересованные не просто поставить галочку в протоколе принятия решения в эксплуатацию, а действительно получить качественный инструмент для оперативного решения повседневных задач. Во многом благодаря Наталье Суровой, руководителю финансового департамента – вице-президенту ВТБ проект получил не просто развитие, а реальную поддержку и выделение людей от бизнеса на всех этапах ОПЭ и внедрения.

  • Вячеслав Чупраков
    Рейтинг: 1275
    Прагматика Эксперт
    Заместитель ИТ директора по инфраструктуре и сервисам
    10.01.2024 22:17

    Красиво у вас получилось, на 5 баллов из 5!

Год
Предметная область
Отрасль
Управление
Мы используем файлы cookie в аналитических целях и для того, чтобы обеспечить вам наилучшие впечатления от работы с нашим сайтом. Заходя на сайт, вы соглашаетесь с Политикой использования файлов cookie.