ОБЗОР АВТОМАТИЗИРОВАННЫХ НАГРУЗОЧНЫХ ТЕСТОВ И ИНСТРУМЕНТОВ ДЛЯ ИХ РЕАЛИЗАЦИИ

Основная задача автоматизированного теста – автоматическое выполнение последовательности действий, описанных в сценарии тестирования. Грамотное построение структуры авто-теста и использование дополнительных инструментов позволяет автоматизировать не только их выполнение, но и запуск, инициализацию тестов, а также формирование отчета о прохождении тестов.

Основное внимание при обзоре авто-тестов будет уделяться структуре теста, определении функций, которые они автоматизируют, а также инструментам, которые позволяют задавать сценарии нагрузки.

В качестве первого примера рассмотрим авто-тест на языке «Python», задачей которого является проведение нагрузочного тестирования сервера «Json-server» с применением софта «Locust» [1]. Предварительным условием для реализации и запуска данного теста является настройка локального веб-сервера, а также подключение «Python». Структура авто-теста выглядит следующим образом. В начале определяются функции логина и логаута пользователей, а также задается «HTTP» объект сессии, с помощью которой задается нагрузка. Следующее несколько функций — запросы, за счет которых будет создаваться нагрузка. Дальше — класс «UserBehavior,» в нем будет описано поведение пользователя в тестируемом приложении. Свойству «tasks» передается словарь методов, которые будет вызывать пользователь и их частоту вызовов. В классе «WebsiteUser» задается модель поведений пользователя, а также минимальное и максимальное время ожидания между вызовами отдельных запросов каждым пользователем.

После запуска авто-теста в программе «Locust» отображаются результаты тестирования (рис.1): каждый из 10 созданных пользователей при старте зашел на главную страницу, список постов в среднем открывался в 2 раза чаще, чем писался комментарий, есть среднее и медианное время отклика для каждой операции, размер контента UI компонентов.  Также можно увидеть графики нагрузки (рис.2):

Рисунок 1. Отчет о результатах нагрузочного тестирования

Рисунок 2. Графики нагрузки

В качестве второго примера рассмотрим авто-тест на языке «Java-script», задачей которого является проведение нагрузочного тестирования браузера «Google^*» с применением инструмента для тестирования «Postman» [2]. Предварительным условием для реализации и запуска данного теста является настройка клиента «Postman» и базовой конфигурации – установка количества итераций, порядка выполнения тестов, а также промежутка времени между запуском тестов.

Структура авто-теста выглядит следующим образом. В начале создается коллекция тестов под названием «Google^* Apps – Load Testing». Затем, указываются условия, при которых должны выполняться определенные методы, в данном случае- выполнять запрос к страницам, если предыдущий запрос имеет в качестве ответа статус код 200 (успех). Запуск данного теста осуществляется через командную строку. После завершения всех итераций теста, в консоли формируется статистика, где можно увидеть среднее время ответа на запросы (рис.3).

Рисунок 3. Отчет о результатах нагрузочного тестирования

В качестве третьего примера рассмотрим авто-тест на языке C#, задачей которого является проведение нагрузочного тестирования локального веб-сервера с применением инструмента для тестирования «NBomber» [3]. Предварительным условием для реализации и запуска данного теста является настройка локального веб-сервера, а также подключение «NBomber». Авто-тест выполняет следующие задачи: конфигурирование числа пользователей, нагружающих «HTTP endpoint», генерация расширенной статистики по среднему времени обработки запроса и проценту ошибок.

Структура авто-теста выглядит следующим образом. В начале подключаются библиотеки, затем задается «HTTP» объект сессии, с помощью которой задается нагрузка. Запуск данного теста осуществляется через командную строку, в параметрах запуска указывается количество пользователей, задающих нагрузку. После завершения всех итераций теста, в консоли формируется статистика, где можно увидеть среднее время ответа на запросы и конфигурирование числа пользователей, нагружающих «HTTP endpoint» (рис.4).

Рисунок 4. Отчет о результатах нагрузочного тестирования

Для наглядного сравнения представленных ранее авто-тестов и инструментов, необходимых для их реализации, были составлены таблицы 1 и 2.

Таблица 1.

Сравнение существующих авто-тестов. Целевые функции

Таблица 2.

Сравнение существующих авто-тестов. Нецелевые функции

* По требованию Роскомнадзора информируем, что иностранное лицо, владеющее информационными ресурсами Google является нарушителем законодательства Российской Федерации – прим. ред.