HTTPS-тест с постоянной нагрузкой с помощью Phantom

Статья создана

Подготовьте облако к работе
- Необходимые платные ресурсы
Подготовьте цель тестирования
Подготовьте инфраструктуру
Создайте агент тестирования
Подготовьте файл с тестовыми данными
Запустите тест
Как удалить созданные ресурсы

Yandex Load Testing можно использовать для тестирования сервиса с постоянной нагрузкой по протоколу HTTPS с помощью генератора нагрузки Phantom.

Чтобы провести нагрузочное тестирование:

Если созданные ресурсы вам больше не нужны, удалите их.

Подготовьте облако к работе

Перед работой нужно зарегистрироваться в Yandex Cloud и создать платежный аккаунт:

Перейдите в консоль управления, затем войдите в Yandex Cloud или зарегистрируйтесь, если вы еще не зарегистрированы.
На странице биллинга убедитесь, что у вас подключен платежный аккаунт, и он находится в статусе ACTIVE или TRIAL_ACTIVE. Если платежного аккаунта нет, создайте его.

Если у вас есть активный платежный аккаунт, вы можете создать или выбрать каталог, в котором будет работать ваша инфраструктура, на странице облака.

Подробнее об облаках и каталогах.

Необходимые платные ресурсы

Если агент размещается на платформе Yandex Cloud, взимается плата за вычислительные ресурсы (см. тарифы Yandex Compute Cloud).

На стадии Preview использование сервиса Load Testing не тарифицируется.

Подготовьте цель тестирования

В этом примере будет тестироваться сервис с внутренним IP-адресом 172.17.0.10 в той же подсети, где будет размещен агент.

Убедитесь, что для доступа к сервису по протоколу HTTPS используется порт по умолчанию — 443.

Load Testing также можно использовать для нагрузочного тестирования сервиса, доступного публично или находящегося в другой подсети и группе безопасности относительно агента.

Для сервиса, доступного публично, разрешите входящий HTTPS-трафик на порт 443.

Для сервиса, находящегося в другой подсети и группе безопасности относительно агента, создайте правило для входящего HTTPS-трафика на порт 443 в группе безопасности, где размещается цель тестирования.

Подготовьте инфраструктуру

Создайте сервисный аккаунт

Создайте сервисный аккаунт sa-loadtest в каталоге, где будет размещаться агент, с которого будет подаваться нагрузка.
Назначьте роли сервисному аккаунту:
- loadtesting.generatorClient — позволяет запускать агент, тест на агенте и загружать результаты в хранилище.
- compute.admin — позволяет управлять виртуальной машиной в Compute Cloud.
- vpc.user — позволяет подключаться к сетевым ресурсам Virtual Private Cloud и использовать их.

Настройте сеть

Включите NAT в интернет в подсети, где размещается цель тестирования и будет размещен агент. Это обеспечит доступ агента к сервису Load Testing.

Настройте группы безопасности

Настройте группу безопасности агента тестирования:
1. Создайте группу безопасности агента agent-sg.
2. Добавьте правила:
  1. Правило для исходящего HTTPS-трафика к публичному API Yandex Load Testing:
    - диапазон портов: 443;
    - протокол: TCP;
    - тип источника: CIDR;
    - назначение: 0.0.0.0/0.
    Это позволит подключить агент к сервису Load Testing, чтобы управлять тестами из интерфейса и получать результаты тестирования.
  2. Правило для входящего SSH-трафика:
    - диапазон портов: 22;
    - протокол: TCP;
    - тип источника: CIDR;
    - назначение: 0.0.0.0/0.
    Это позволит подключаться к агенту по протоколу SSH и управлять тестами из консоли или собирать отладочную информацию.
  3. Правило для исходящего трафика при подаче нагрузки к цели тестирования:
    - диапазон портов: 0-65535;
    - протокол: Any;
    - тип источника: Группа безопасности;
    - назначение: Из списка. Укажите группу безопасности, в которой находится нужная цель тестирования.
    Создайте такое правило для каждой цели тестирования с уникальной группой безопасности.
Настройте группу безопасности цели тестирования:
1. Создайте группу безопасности цели тестирования load-target-sg.
2. Добавьте правило для входящего трафика при подаче нагрузки к цели тестирования:
  - диапазон портов: 0-65535;
  - протокол: Any;
  - тип источника: Группа безопасности;
  - назначение: Из списка. Укажите группу безопасности, в которой находится агент тестирования.
  Это правило позволит агентам подавать нагрузку на эту цель или подключать дополнительные средства мониторинга.

Создайте агент тестирования

Сгенерируйте пару ключей SSH для подключения к агенту по протоколу SSH.
Создайте агент:
Консоль управления
1. В консоли управления выберите каталог, в котором будет создан агент.
2. В списке сервисов выберите Load Testing.
3. На панели слева выберите Агенты. Нажмите Создать агент.
4. Укажите имя агента, например agent-008.
5. Укажите ту же зону доступности, в которой находится цель тестирования.
6. В блоке Агент:
  - Выберите подходящий тип агента. Подробнее см. в разделе Производительность агентов.
  - Укажите подсеть, в которой находится цель тестирования.
  - Укажите группу безопасности агента.
7. В блоке Доступ укажите данные для доступа к агенту:
  - Выберите сервисный аккаунт sa-loadtest.
  - В поле Логин введите имя пользователя.
    
    Внимание
    
    Не используйте логин root или другие имена, зарезервированные операционной системой. Для выполнения операций, требующих прав суперпользователя, используйте команду sudo.
  - В поле SSH-ключ вставьте содержимое файла открытого ключа.
8. Нажмите Создать.
9. Дождитесь завершения процесса создания виртуальной машины. Статус агента должен смениться на READY_FOR_TEST.
  
  Примечание
  
  Процесс создания агента может остановиться на статусе INITIALIZING_CONNECTION, если у агента не будет доступа к loadtesting.api.cloud.yandex.net:443, или у сервисного аккаунта, который назначен агенту, не будет необходимых ролей.
Привяжите публичный IP-адрес к агенту для доступа по протоколу SSH:
Консоль управления
1. В консоли управления выберите каталог, в котором размещен агент.
2. Выберите сервис Compute Cloud.
3. Выберите виртуальную машину с именем agent-008.
4. В блоке Сетевой интерфейс в правом верхнем углу нажмите и выберите Добавить публичный IP-адрес.
5. В открывшемся окне:
  - В поле Публичный адрес выберите получение адреса Автоматически.
  - Нажмите Добавить.

Подготовьте файл с тестовыми данными

Сформируйте тестовые данные в формате URI:
```
[Host: 172.17.0.10]
[Connection: Close]
/ index
/test?param1=1&param2=2 get_test
```
Обратите внимание на заголовок Connection: Close — каждое соединение будет закрываться после запроса. Для приложения и генератора такой режим тяжелее. Если не нужно закрывать соединения, то следует указать значение Keep-Alive.

Также указаны два запроса, отмеченные тегами index и get_test. Генератор будет повторять их по очереди в пределах заданного профиля нагрузки.
Сохраните тестовые данные в файл data.uri.

Запустите тест

В консоли управления выберите сервис Load Testing.
На панели слева выберите Тесты. Нажмите Создать тест.
Выберите способ настройки: Форма или Конфиг.
В зависимости от выбранного способа задайте параметры теста:
Форма

Конфиг
1. В параметре Агент выберите агент agent-008.
2. В блоке Тестовые данные загрузите файл data.uri в поле Файл с тестовыми данными.
3. В блоке Настройки генератора нагрузки:
  - В поле Генератор нагрузки выберите генератор PHANTOM.
  - В поле Адрес цели укажите адрес тестируемого сервиса: 172.17.0.10.
  - В поле Порт цели укажите 443 (порт для HTTPS по умолчанию). Разрешите использовать защищенное соединение.
  - В поле Тестирующие потоки укажите значение 5000.
    
    Это означает, что генератор сможет параллельно обрабатывать 5000 операций: создать 5000 соединений или ждать 5000 ответов от сервиса одновременно.
    
    Совет
    
    Для большинства тестов хватит 1000–10000 потоков.
    
    Использование большего количества потоков задействует больше ресурсов виртуальной машины, на которой запущен агент. Также существует ограничение Compute Cloud на 50000 одновременных соединений с виртуальной машиной.
    
    Подробнее об организации потоков.
  - Раскройте меню Расписание нагрузки:
    
    В поле Тип нагрузки выберите RPS.
    
    В меню Профиль нагрузки нажмите Профиль нагрузки и введите описание:
    
    const(2000,10m)
    
    Это указание генератору обеспечивать нагрузку 2000 запросов в секунду в течение 10 минут.
    
    Подробнее о профилях нагрузки.
  - В поле Тип запросов выберите URI.
  - В меню Автостоп нажмите Автостоп и введите описание:
    
    Тип автостопа: INSTANCES.
    
    Критерии автостопа: 90%,60s.
    
    Этот критерий остановит тест, если в течение 60 секунд будет занято 90% тестирующих потоков, что свидетельствует о возникновении проблем тестирования.
4. В блоке Информация о тесте укажите имя, описание и номер тестируемой версии. Это поможет сделать отчет читаемым.
1. В параметре Агент выберите агент agent-008.
2. В блоке Тестовые данные загрузите файл data.uri в поле Файл с тестовыми данными.
3. В поле для ввода конфигурации введите настройки тестирующих потоков в формате yaml:
  phantom: enabled: true package: yandextank.plugins.Phantom address: 172.17.0.10:443 # адрес цели тестирования ammo_type: uri load_profile: load_type: rps schedule: const(2000,5m) # расписание нагрузки: 2000 запросов в секунду в течение 5 минут ssl: true instances: 5000 # количество потоков ammofile: ammo_file core: {} autostop: # автостоп enabled: true package: yandextank.plugins.Autostop autostop: - instances(90%,60s) # завершение теста, если в течение 60 секунд будет занято 90% тестирующих потоков, что свидетельствует о возникновении проблем тестирования cloudloader: enabled: true package: yandextank.plugins.CloudUploader job_name: '[example][phantom][const]' job_dsc: 'example' ver: '0.5.5' api_address: loadtesting.api.cloud.yandex.net:443
  Совет
  
  Посмотрите пример файла конфигурации. Также пример файла конфигурации можно посмотреть в уже имеющихся тестах.
Нажмите Создать. Конфигурация пройдет проверки, и агент начнет нагружать тестируемый сервис.
Чтобы наблюдать за выполнением тестирования, выберите созданный тест и перейдите на вкладку Отчет.

Как удалить созданные ресурсы

Чтобы перестать платить за созданные ресурсы, достаточно удалить агент.