Нагрузочное тестирование сервиса HRlink (СКЭД)

• Чтобы приложение могло держать целевую нагрузку продолжительное время без сбоев в работе системы.

• Подготовить систему к прогнозируемому росту пользовательской нагрузки.

• Проверить, что сезонные пиковые нагрузки не оказывают влияния на производительность системы.

• Оценить максимальную производительность системы и выявить узкие места проблемных компонентов системы.

• Локализовать факторы, ограничивающие производительность системы.

• Разработать рекомендаций по оптимизации производительности системы.

Проведена оценка максимальной производительности системы. Увеличена  производительность системы со 100% базового профиля до 500%.

После проведения работ по оптимизации система готова выдерживать нагрузку до 10 млн пользователей без изменений в текущей архитектуре.

Проведена оценка стабильности системы. Увеличилась производительность по ключевой операции подписания документа с 200 тысяч подписаний в сутки до 1 000 000.

Выявлены узкие места системы, проведена оценка проблемных компонентов системы.

Предоставлены рекомендации по устранению проблем и узких мест системы.

Разработаны рекомендации по оптимизации производительности системы.

Предоставлены рекомендации по конфигурации тестового стенда.

1.BOOMQ - передовая платформа для оценки производительности и стабильности информационных систем, и выработки рекомендаций по устранению проблем.

2. Эмуляторы внешних систем разрабатываются на JAVA.

3. web-сервер на nginx;

4. приложение на Play Framework, написанное на Java;

5. сервис Удостоверяющего Центра на Java+Spring Boot;

6. сервис уведомлений: Java+Play Framework;

7. запуск эмуляторов в Docker-compose;

8. мониторинг Zabbix + Grafana, Prometheus + Grafana, мониторинг эмуляторов Spring Boot Actuator, статистика БД pg_stat_statements;

9. база данных PostgreSQL (14);

Сложность проекта заключалась в следующем:

- нужно было создать среду, адекватно отражающую продуктивную, со всеми интерфейсами, цифровыми подписями, сложной работой эмуляторов внешних систем и других компонентов. При этом работа велась с обезличенными данными.

 - в виду масштаба проекта пришлось сгенерировать очень много уникальных тестовых данных.

Компания ООО "Инновации в управлении кадрами", разработчик высоконагруженного сервиса КЭДО HRlink и компания Перфоманс Лаб, как лидер в области оценки производительности ИТ-систем, реализовали совместный проект "нагрузочное тестирование сервиса HRlink".

Основная цель проекта: оценить возможность сохранять работоспособность всех функций системы в моменты пиковых нагрузок и обеспечить производительность системы при росте пользовательской базы и пользовательской активности не менее чем в 10 раз.

Обеспечение надежности и отказоустойчивости вписано в стратегию развития продукта HRlink, т.к., если онлайн-платформа КЭДО станет недоступна (из-за высокой нагрузки или технических проблем), то процессы компании — часто ключевые — могут остановиться. 

Поэтому, совместный проект является очень важным и жизненно необходимым.

В ходе проекта реализованы следующие этапы тестирования:

1. Создание методики

2. Настройка мониторинга

3. Разработка скриптов нагрузочного тестирования

4. Разработка эмуляторов внешних систем

5. Генерация пулов данных

6. Отладочное тестирование

7. Основное тестирование

8. Анализ результатов тестирования и выработка рекомендаций

9. Подготовка отчёта по нагрузочному тестированию

10. Подготовка документации по нагрузочному тестированию

Удаленно