Стабильные и повторяющиеся регрессионные тесты.

Исследовательские тесты

UX-тестирование

Бета-тестирование

Непрерывная интеграция изменений в общий код.

Контроль инфраструктуры

Частичное имплементирование

Центральная инсталляция

Непрерывная доставка или автоматическое развертывание.

Центральная декомпозиция

Кодовая дифференциация

Дублирование данных

Процент успешно пройденных тестов от общего числа.

Скорость сборки проекта

Количество коммитов

Размер базы данных

Какой процент исходного кода покрыт автоматическими тестами.

Скорость работы приложения

Количество багов

Объём логов

Для автоматизации функциональных веб-UI тестов в браузерах.

Нагрузочное тестирование

Проверка безопасности

Мониторинг серверов

Метод тестирования, при котором тестирование начинается на ранних этапах разработки.

Тестирование, проводимое только после завершения разработки.

Тестирование, ориентированное исключительно на пользовательский интерфейс.

Метод тестирования, при котором тестирование полностью автоматизировано.

Раннее начало тестирования на первых этапах разработки.

Перемещение тестов в конец проекта

Удаление тестов из пайплайна

Тестирование только вручную

Игнорирование ошибок

Defect Density или плотность дефектов в коде.

MTTR

Response Time

Code Smell Rate

User Story Points

Быстрое, частое и стабильное развертывание продукта.

Отсутствие автоматизации

Минимум коммуникации

Медленные релизы

Бюрократия в команде

Автоматически собирает, тестирует и разворачивает код приложения.

Запускает ручные тесты

Удаляет ветки в репозитории

Создаёт UI-макеты

Пишет код за вас

Регулярные автоматические тесты перед выпуском.

Отсутствие тестирования

Редкие сборки

Случайные проверки

Удаление бэкапов

API-тестирование через специальные Postman или REST-клиенты.

Тестирование руками

Только визуальное тестирование

Тестирование интерфейса пользователей

Проверка монитора

Помогают объективно оценить стабильность продукта и процесса.

Увеличивают количество ошибок

Уменьшают прозрачность процессов

Создают хаос в проекте

Замедляют работу ПК

Чтобы значительно ускорить разработку и выпуск частых релизов.

Чтобы замедлить процесс разработки

Чтобы увеличить количество ошибок

Чтобы уменьшить прозрачность процессов

Чтобы создать хаос в команде

Это ошибка или слабое место, которое может быть использовано для атаки.

Ошибка интерфейса

Неправильная документация

Проблема с цветами интерфейса

SQL-инъекция, позволяющая изменять или получать данные из базы.

XSS-атака

DDoS-атака

Фишинг

Внедрение вредоносных скриптов в страницу для воздействия на пользователей.

Ошибка компиляции

Проблема с памятью

Неверный формат файла

Найти логические ошибки и потенциальные уязвимости безопасности.

Проверка орфографии

Оптимизация стиля текста

Сбор статистики

Перегрузка сервера огромным количеством запросов для отказа в обслуживании.

Кража паролей

Изменение базы данных

Внедрение вирусов

Чтобы надежно защитить конфиденциальные данные от несанкционированного доступа.

Чтобы ускорить приложение

Чтобы уменьшить размер файлов

Чтобы улучшить дизайн интерфейса

Интернет-мошенничество, при котором крадут данные через поддельные сайты.

Атака на сервер нагрузкой

Использование SQL-кода в запросах

Внедрение вредоносных библиотек

Тестирование сети

Чтобы выявить критические уязвимости до атаки злоумышленника.

Чтобы улучшить дизайн

Чтобы ускорить сайт

Чтобы уменьшить количество модулей

Чтобы обновить иконки

Ошибка в коде программы, приводящая к неправильной работе функционала.

Уязвимость сервера

Рабочая функция

Инструмент тестирования

Полезная фича

Метод подбора паролей перебором всех возможных комбинаций.

Перегрузка сервера

Инъекция кода

Внедрение скриптов

Анализ трафика

Чтобы исправить найденные ошибки и закрыть уязвимости безопасности.

Чтобы увеличить размер установщика

Чтобы усложнить интерфейс

Чтобы удалить функции

Чтобы сменить логотип

Любая программа, специально созданная для причинения вреда системе.

Тестовая библиотека

Учебный модуль

Файл настроек

Текстовый редактор

Использование сложных, длинных и уникальных паролей для каждого сервиса.

Открытый доступ ко всем данным

Хранение пароля на видном месте

Передача пароля друзьям

Запись пароля на стикере

Обнаруживает, блокирует и удаляет известные вредоносные программы.

Ускоряет интернет

Проверяет орфографию

Создаёт резервные копии сайт

Рисует графики

Создание дублирующей копии данных для их восстановления при потере.

Удаление ненужных файлов

Оптимизация интерфейса

Сжатие изображений

Форматирование диска

Покрытие тестами или Test Coverage кода.

Время отклика

Среднее время восстановления

Плотность дефектов

Количество серверов

Количество реально выполненных операторов или ветвей кода.

Общее количество дефектов

Общее число тест-кейсов

Время тестирования

Объем документации

Нет, так как остаются непроверенные логические комбинации и граничные условия.

Да, это полная гарантия качества

Да, проверены все пути кода

Да, но только при 100% покрытии ветвей

Да, багов больше нет

Относительное количество дефектов на определённый объём кода или функционала.

Скорость выполнения тестов

Уровень загрузки сервера

Количество тестировщиков в команде

Стоимость лицензий

Количество критических дефектов, найденных после выпуска.

Скорость компиляции

Количество комментариев в коде

Размер репозитория

Использование программных инструментов для автоматического выполнения тестов.

Полный отказ от ручного тестирования

Запуск программы без тестов

Проверка дизайна интерфейса

Существенное повышение скорости и повторяемости процессов тестирования.

Уменьшение числа тест-кейсов

Отсутствие расходов на инфраструктуру

Гарантия отсутствия дефектов

Непрерывная интеграция изменений в репозиторий кода.

Непрерывная доставка

Непрерывное мониторирование

Непрерывное проектирование

Непрерывная доставка кода или его развёртывание.

Контроль данных

Создание документации

Централизованная отладка

Встраивается глубоко в процесс и выполняется на всех этапах разработки.

Проводится только перед релизом

Запускается вручную по необходимости

Заменяет разработку

Тесты, комплексно проверяющие скорость, нагрузку и стабильность системы.

Тесты интерфейса

Тесты локализации

Тесты безопасности

Среднее время восстановления работоспособности после сбоя.

Среднее время выполнения теста

Уровень покрытия тестами

Чтобы количественно измерять эффективность тестирования и стабильность продукта.

Чтобы ускорить разработку интерфейса

Чтобы уменьшить документацию

Чтобы наказать разработчиков

Автоматически проверять качество продукта при каждом изменении кода.

Снижать нагрузку на сервер

Изменять интерфейс приложения

Экономить электричество

Скорость и точность проверки повторяющихся тестовых сценариев.

Количество дизайнерских элементов

Время загрузки страницы

Цветовую палитру

Это процесс проверки корректного отображения элементов и взаимодействия пользователя с системой.

Проверка работы базы данных

Проверка серверной логики

Проверка жесткого диска

Тщательная проверка правильности отображения кнопок, текстов, иконок и стилей.

Проверка подключения к интернету

Проверка скорости сервера

Проверка кабелей

Характеристика того, насколько легко, быстро и понятно пользователь взаимодействует с интерфейсом.

Скорость загрузки сервера

Количество элементов на странице

Яркость монитора

Корректную адаптивность интерфейса под разные разрешения и ориентации экрана.

Работу жестких дисков

Скорость процессора

Количество сетевых подключений

Тип клавиатуры

Вид проверки, сравнивающий текущие экраны с эталонными для выявления изменений.

Проверка логов

Оптимизация API

Проверка нагрузки сервера

Анализ звука

Для проверки того, что интерфейс работает корректно и элементы отображаются правильно.

Для анализа SQL-запросов

Для тестирования сетевого трафика

Для настройки DevOps

Для очистки кэша

Корректность ввода данных, отображение ошибок, валидацию и поведение полей.

Работу видеокарты

Скорость доставки пакетов

Обновление драйверов

Температуру процессора

Способность интерфейса автоматически адаптироваться к разным размерам экранов.

Оптимизация алгоритмов

Работа с API

Тестирование безопасности

Установка плагинов

Корректное визуальное отображение, кликабельность и реакцию на нажатия.

Работу драйверов

Правильное открытие списка, корректность значений и реакцию на выбор элемента.

Работу BIOS

Оптимизацию CPU

Права доступа пользователей

Правильность переводов текстов и корректная верстка при смене языка.

Работу видеодрайвера

Тестирование API-ключей

Работу Bluetooth

Корректность переходов между страницами и доступность всех разделов сайта.

Работа кэша браузера

Загрузка ядра системы

Настройки сети

Неправильные размеры элементов, кривые отступы и наложение текста друг на друга.

Ошибки API

Сетевые сбои

Проблемы с сервером

Корректную валидацию данных, подсказки и отображение ошибок ввода.

Работу фоновых служб

Загруженность процессора

Количество потоков в системе

Практика разработки, при которой разработчики часто объединяют изменения кода в центральный репозиторий, после чего следуют автоматическая сборка и тестирование.

Процесс ручного копирования файлов на рабочий сервер раз в месяц

Методология, запрещающая внесение изменений в код без разрешения менеджера

Написание кода без использования систем контроля версий

Обеспечение раннего обнаружения ошибок (bug detection) и быстрой обратной связи.

Полная замена ручных тестировщиков для сокращения штата

Увеличение времени сборки проекта для создания видимости работы

Автоматическое исправление ошибок в коде без участия программиста

Последовательность автоматизированных шагов (сборка, тест, деплой), через которые проходит код.

Физический кабель, соединяющий компьютер разработчика с сервером

Графический редактор для рисования схемы базы данных

Список сотрудников, ответственных за ручное тестирование

Jenkins.

Adobe Photoshop

Microsoft Excel

Notepad++

YAML (.yml).

MP3

JPEG

EXE

Процесс сборки должен остановиться, а разработчики получить уведомление об ошибке.

Сборка должна продолжиться, игнорируя ошибки

Код должен быть автоматически удален из репозитория

Пайплайн должен автоматически переписать тесты так, чтобы они прошли

Подход, при котором код всегда находится в готовом к релизу состоянии, и его доставка в окружение (например, staging) автоматизирована.

Непрерывная доставка еды разработчикам во время овертаймов

Процесс написания технической документации после сдачи проекта

Unit-тесты (Модульные тесты).

End-to-End (E2E) тесты

Нагрузочные тесты (Performance tests)

Ручные тесты интерфейса

Push (отправка изменений) или Pull Request в репозиторий.

Включение компьютера разработчика

Наступление полуночи

Отправка электронного письма директору

Файл или набор файлов (например, .jar, .exe, docker image), созданный в результате процесса сборки.

Ошибка в коде, которая осталась незамеченной

Устаревший кусок кода, который нужно удалить

Комментарий, оставленный разработчиком в коде

Снижает риски регрессии и освобождает время тестировщиков для исследовательского тестирования.

Делает тестирование невозможным из-за высокой скорости изменений

Увеличивает количество ручной работы для проверки каждой сборки

Полностью исключает необходимость в тестовой документации

Быстрая проверка критически важного функционала, чтобы убедиться, что сборка вообще работает.

Проверка оборудования на предмет возгорания

Детальное тестирование всех возможных сценариев использования

Тестирование дизайна и верстки на соответствие макетам

Для создания изолированной и воспроизводимой среды тестирования и сборки.

Чтобы усложнить доступ к коду для разработчиков

Для майнинга криптовалюты на свободных ресурсах сервера

Чтобы заменить операционную систему Windows на Linux

Автоматическое развертывание (Deploy) на продакшн-сервер.

Ручное написание отчета в Word

Удаление репозитория для экономии места

Возврат кода разработчику на доработку

Архивация проекта на 10 лет

Тест, который то проходит, то падает на одном и том же коде без видимых причин.

Тест, который проверяет мигание элементов интерфейса

Очень быстрый тест, который невозможно заметить

Тест, который всегда падает

Тест, написанный на языке Flash

Определить поведение системы под высокой нагрузкой и оценить её устойчивость в разных условиях для последующего анализа.

Определить поведение интерфейса под обычной нагрузкой и оценить его устойчивость в типичных условиях использования

Определить работу сервера при базовой активности и оценить его стабильность при стандартных пользовательских действиях

Определить реакцию приложения при средней загрузке и оценить его работу под регулярным пользовательским трафиком

Определить состояние платформы под умеренным давлением и оценить её стабильность при постоянной активности

Время отклика, пропускная способность и устойчивость системы под разной нагрузкой в стандартных режимах выполнения.

Время реакции, стабильность и работа приложения под изменяющимся графиком во время тестирования

Скорость ответа, надёжность и контроль поведения сервиса при регулярных пользовательских запросах

Производительность, задержки и устойчивость программного модуля под типовой активностью пользователей

Отклик системы, обработка запросов и её способность сохранять стабильность при рабочей нагрузке

Apache JMeter используется для моделирования нагрузки и анализа поведения системы в разных сценариях выполнения.

LoadRunner применяется для создания сценариев и оценки реакции системы в различных рабочих условиях

Gatling подходит для моделирования трафика и анализа работы веб-приложений под разными уровнями активности

Locust используется для генерации нагрузки и проверки поведения сервисов

Это набор действий, моделирующих работу пользователей и проверяющих стабильность системы под разным трафиком во время тестирования.

Это последовательность шагов, отражающая реальные действия и проверяющая реакцию приложения под нагрузкой.

Это подготовленный план, имитирующий пользовательский поток и демонстрирующий поведение сервиса под давлением.

Это структура действий, воспроизводящая рабочие процессы и оценивающая выполнение функций при активности.

Проверка системы в условиях экстремальной нагрузки, превышающей обычный уровень использования, для оценки стабильности.

Анализ поведения сервера под значительно повышенной активностью, превышающей стандартные рабочие показатели.

Проверка реакции приложения при критических параметрах нагрузки, выходящих за рамки обычного режима.

Изучение устойчивости платформы при экстремальных значениях запросов, многократно выше типовых.

Количество запросов, которое система может обработать за секунду при стабильной нагрузке, без потери качества работы.

Скорость обработки пользовательских действий системой в течение определённого временного промежутка под нагрузкой.

Число запросов, корректно выполняемых приложением при обычном рабочем режиме без заметных задержек.

Поток операций, который платформа способна обслужить в единицу времени без деградации.

Необходим для оценки CPU, RAM и сети, чтобы выявлять проблемы при повышенном давлении во время работы.

Применяется для контроля всех ключевых ресурсов, определяя точки перегрузки системы под нагрузкой.

Используется для отслеживания использования компонентов, отражая устойчивость сервера при активности.

Анализирует показатели ресурсов, помогая определить слабые места инфраструктуры при выполнении теста.

Показывает узкие места, деградацию производительности и поведение системы под разной активностью во время тестов.

Проверяет способность приложения поддерживать стабильность при длительном выполнении операций.

Включает информацию о сценариях, задержках и ошибках, полученных в ходе испытаний.

Управляет количеством потоков, частотой запросов и длительностью теста.

Проверяет длительную работу системы под постоянной нагрузкой и выявляет утечки ресурсов или падение производительности.

Показывает собранные показатели, ошибки и ключевые выводы по итогам тестирования.

Определяет число виртуальных пользователей и задаёт темп выполнения операций в тестовом плане.

Отражает влияние нагрузки на приложение и показывает динамику производительности при тестировании.

Включает план теста, параметры нагрузки и выявленные проблемы при длительном исполнении, отражая результаты анализа.

Проверяет устойчивость сервера при непрерывной активности в течение продолжительного периода времени.

Управляет поведением виртуальных пользователей и фиксирует частоту их действий.

Определяет слабые точки сервиса и анализирует изменения параметров под рабочими условиями.

Управляет количеством потоков, частотой запросов и длительностью теста, моделируя множество пользователей в сценарии.

Показывает изменения стабильности и скорость обработки данных при различных сценариях.

Проверяет способность приложения поддерживать стабильность при длительном выполнении операций.

Включает информацию о сценариях, задержках и ошибках, полученных в ходе испытаний.

Позволяет увидеть изменения стабильности и скорость обработки данных при различных сценариях.

Настраивает объём потоков и определяет направление нагрузки для тестируемой системы.

Проверяет устойчивость сервера при непрерывной активности в течение продолжительного периода времени.

Включает план теста, параметры нагрузки и выявленные проблемы при длительном исполнении.

Soak Test исследует, как система ведёт себя при постоянной нагрузке без перерывов на протяжении теста.

Soak Test определяет параметры нагрузки и выявляет узкие места в системе.

Soak Test управляет поведением виртуальных пользователей и фиксирует частоту их действий.

Soak Test показывает собранные показатели, ошибки и ключевые выводы по итогам тестирования.

Создают интервалы между запросами, формируя реалистичное поведение нагрузки при выполнении сценария.

Настраивают паузы в процессе работы, делая поток запросов более похожим на реальные действия

Регулируют задержки между операциями, обеспечивая естественность теста

Формируют промежутки между обращениями, создавая плавное распределение нагрузки

Сохраняет результаты теста, визуализирует показатели и отражает ошибки при разных нагрузках для анализа.

Показывает обработанные данные и формирует графики после выполнения тестов

Собирает статистику выполнения запросов и отображает средние значения метрик

Выводит отчёты о времени выполнения сценариев и количестве ошибок

Чтобы получить точные показатели, исключить случайные колебания и проверить поведение системы при повторных условиях.

Чтобы удостовериться в стабильности сервиса и выявить закономерности в результатах

Чтобы обнаружить нестабильные участки и проверить повторяемость данных

Чтобы выявить изменения производительности и проверить стабильность метрик

Позволяет создавать гибкие сценарии, поддерживает разные протоколы и масштабирует тесты для больших инфраструктурных систем.

Легко расширяется плагинами и подходит для сложных сценариев

Имеет удобные инструменты анализа и простой интерфейс

Работает с различными типами нагрузки и поддерживает автоматизацию

Убедиться, что новые изменения не сломали существующий функционал и система продолжает работать корректно после внесения правок, фиксируя возможные ошибки до релиза.

Проверить исправленные дефекты

Найти новые требования

Оптимизировать производительность

После каждого изменения кода, чтобы убедиться, что внесённые изменения не нарушили уже существующий функционал и система работает стабильно.

Только перед релизом

Только при изменении требований

По запросу заказчика

Тесты критического и основного функционала, чтобы гарантировать, что ключевые возможности приложения остаются работоспособными после изменений.

Только UI-тесты

Тесты на производительность

Смоук-тесты

Перепрохождение всех тестов системы для проверки корректности работы всей функциональности после значительных изменений в коде.

Тестирование только модуля с изменениями

Тестирование только API

Запуск только новых тестов

Проверить только области, затронутые изменениями, чтобы экономить время и ресурсы при внесении небольших правок.

Проверить систему с нуля

Выполнить нагрузочное тестирование

Проверить UI

Выбор тестов с наибольшей ценностью и риском для фокусировки на критических сценариях и повышения эффективности тестирования.

Удаление старых тестов

Запуск по алфавиту

Запуск только автотестов

Тест-дизайн на основе покрытия рисков позволяет сфокусироваться на критических зонах и сократить количество повторяющихся тестов.

Смоук-тестирование

Тестирование через UI

Ручное тестирование

Непрерывное регрессионное тестирование встроено в процесс разработки, обеспечивая стабильность после каждого изменения функционала.

Регрессия перед каждым крупным релизом

Тестирование только новых фич

Редкое выполнение тестов