Data Sharing Platform на базе платформы управления данными TData
- Заказчик:
- ООО "T2 Мобайл"
- Руководитель проекта со стороны заказчика
- Поставщик
- ООО «ТДАТА»
- Год завершения проекта
- 2024
- Сроки выполнения проекта
- апрель, 2024 — ноябрь, 2024
- Масштаб проекта
- 500 автоматизированных рабочих мест
- Цели
· Повысить зрелость в части управления данными на уровне группы компаний «Ростелеком»;
· Унифицировать и стандартизировать подходы к управлению данными в группы компаний «Ростелеком»;
· Обеспечить простой и достоверный обмен данными между разными юридическими лицами;
· Сократить трудозатраты разных юридических лиц внутри группы компаний «Ростелеком» при работе с данными;
· Создать новые возможности для бизнеса благодаря совместному использованию и обогащению данных внутри группы компаний «Ростелеком».
· Внедрить регламенты передачи и методологию взаимодействия в рамках платформы обмена;
· Принять и имплементировать единые стандарты качества данных;
· Реализовать защищенные каналы передачи данных, обеспечить высокую скорость и отказоустойчивость;
· Обеспечить высокий уровень безопасности при работе с данными (в том числе чувствительными);
· ...
- Результаты
На данный момент к решению Data Sharing Platform уже подключены 3 юридических лица Группы компаний Ростелеком: обмен реализован по ~270 атрибутам данных. Ежедневно 1,5 Гб (~16,5 млн строк) передается внутри контура обмена.
Благодаря реализации быстрого и качественного обмена данными через Data Sharing Platform пользователи оперативно получают различные продукты группы компаний «Ростелеком».
Пользователи платформы обмена данными – около 500 сотрудников группы компаний «Ростелеком». Отмечено снижение затрачиваемого времени на запрос данных, согласование передачи, подготовки данных, их получение безопасным и согласованным путем, наличие индекса качества данных и отчета DQ.
Уникальность проекта
Это уникальный проект по управлению данными внутри экосистемы компаний с выстраиванием единых, объединяющих политик в области работы с данными. Проект является продолжением локальных, реализованных внутри компаний группы проектов по управлению данными. Data Sharing Platform (DSP) - универсальная масштабируемая платформа обмена данными, построенная на базе платформы управления данными TData, обеспечивает защищенные каналы передачи данных между разными юр. лицами внутри группы компаний по единым согласованным стандартам. Простая и понятная архитектура DSP построена на коммерчески эффективных и существующих в компании решениях, поэтому не требует доп. затрат на внедрение сопутствующих инструментов. Гибкая архитектура позволяет обмениваться любыми данными (с заданной периодичностью), опубликованными в виде дата-сервиса и переиспользовать его без больших трудозатрат для нового получателя внутри группы. Доступность данных и прозрачность обеспечивается благодаря встроенному каталогу сервисов.
- Проект решает задачи импортозамещения
- Да
- Использованное ПО
RT.DataGovernance + RT.Streaming+ PosgtreSQL
- Сложность реализации
1. Унификации единой методологии объединения и сверки данных между разными юридическими лицами;
2. Реализации унифицированного масштабируемого механизма обмена данными;
3. Согласовании взаимодействия юридических команд разных компаний;
4. Реализации всех требований информационной безопасности к реализации обмена в рамках Data Sharing Platform;
5. Физическая реализация безопасного (зашифрованного) канала обмена данными между разными юридическими лицами;
6. Согласовании подходов, методологий и регламентов на уровне топ-менеджмента разных компаний внутри ГК (включая C-level);
7. Ограниченных сроках реализации;
8. Разработке в условиях вступления в силу новых законодательных актов и регуляторных требований в области работы с персональными данными.
- Описание проекта
Техническая платформа обмена данными внутри защищенного контура группы компаний «Ростелеком» предполагает наличие прозрачных дата-сервисов, обеспечивает безопасность каналов передачи данных, согласованность регламентов передачи данных и правил обмена, соответствующих юридическим нормам и требованиям информационной безопасности, а также согласованных с владельцами данных подходов к передаче данных.
Над технической платформой реализован каталог данных, который обеспечивает единое окно доступа к данным, входящим в контур обмена. Все доступные данные опубликованы в каталоге данных, который доступен всем участникам контура обмена. Новые сервисы автоматически добавляются туда.
Благодаря внедренному каталогу данных для Data Sharing Platform на базе RT.DataGovernance все участники процесса обмена могут:
· оперативно находить всю необходимую информацию о уже существующих дата-сервисах (Data Service, потоках передаваемых данных) – владельцах, индексах качества данных, правилах работы с Data Service, регламенте обновления и отставания данных, подходах к хэшированию, маскированию, join rules, описании объектов, входящих в Data Service и описании ключевых показателей;
· запрашивать уже реализованные дата-сервисы, что позволяет сократить время и трудовые ресурсы на реализацию потоков, исключить дублирование задач и реализованной функциональности;
· запрашивать новые сервисы данных, которые ранее еще не были реализованы, по единому согласованному процессу, повышая скорость обеспечения данными и эффективность работы всех участников контура обмена.
Использование RT.DataGovernance позволяет продвигать data-driven культуру и единые стандарты создания и использования данных между всеми участниками контура обмена.
В рамках Data Sharing Platform реализовано обеспечение единого стандарта качества данных (DQ Firewall). Каждый сервис берет данные из своего источника, через безопасный и зашифрованный канал передает их в контур обмена, где этот набор данных автоматически проверяется на соответствие критериям качества. Так, в контур обмена получателю приходят не только данные, но и отчет с индексом качества данных и проверками качества данных.
Кроме того, данные внутри контура обмена могут обогащаться другим участником группы и возвращаться первоначальному отправителю, что позволяет реализовать единый контролируемый и управляемый процесс между участниками обмена данными, и предоставить всем бизнес-подразделениям единый сервис по быстрому созданию информационных потоков необходимых для реализации сквозных бизнес-процессов.
Единообразие и современные подходы к обработке данных позволяют обеспечить высокую скорость обмена, а также высокое качество данных, публикуемых в дата-сервисах. Минимизировать риск несанкционированного доступа к чувствительной информации за счет реализованной и внедренной ролевой модели доступов.
- География проекта
Российская Федерация
- Дополнительные презентации:
- Data Sharing Platform TData.pdf