Введение в тестирование

развития тестирования ПО

Calculator и нашли мотылька, застрявшего между контактами электромеханического реле. Извлеченное

насекомое было вклеено в технический дневник с сопроводительной надписью: "First actual case of bug being found”.

кафедра ВСиС Самощенков Г.А.

История развития тестирования ПО

в программе или системе, которая выдает неожиданный или неправильный результат;
Большинство

багов возникают из-за ошибок, допущенных разработчиками программы в её исходном коде, либо в её дизайне;
Считается, что случай с извлечением мотылька положил начало использованию слова «debugging» в значении «отладка программы».

кафедра ВСиС Самощенков Г.А.

История развития тестирования ПО

внимание крупномасштабным научным и военным программам, связанным с системами корпоративных

баз данных, системами управления объектами, алгоритмами обработки данных.

Тестовые сценарии записывались на бумагу;
Тестирование обычно начиналось лишь после завершения плана-графика проекта;
Тестирование выполнялось тем же персоналом;
Окончательный набор тестовых процедур мог эффективно протестировать всю систему полностью.

кафедра ВСиС Самощенков Г.А.

История развития тестирования ПО. Этапы.

Пакетная обработка данных вытеснялась системами, работающими в реальном времени под

управлением стандартной операционной системы;
Теперь рабочие потоки могли вызываться в любом порядке. Эта особенность привела к появлению огромного числа процедур тестирования, способных поддержать бесконечное число перестановок и сочетаний.

кафедра ВСиС Самощенков Г.А.

История развития тестирования ПО. Этапы.

приложений, работающих в сети Интернет.
Теперь библиотеки реализованных объектов могли

располагаться не только на локальной, но и на удаленной рабочей станции с доступом к ним через сеть;
Клиент-серверная архитектура включает в себя три основных компонента: клиент, сервер и сеть. Связность этих компонент увеличивает вероятность и число возможных ошибок;
Процедуры тестирования не способны выполнить все возможные функциональные сценарии.

кафедра ВСиС Самощенков Г.А.

История развития тестирования ПО. Этапы.

применения привели к осознанию необходимости внедрения автоматизации в процесс тестирования

программного обеспечения.

Наибольшие успехи – в автоматизации записи и последующего автоматического воспроизведения действий пользователя (регрессионное тестирование, regression testing);
Наибольшие перспективы в настоящий момент – автоматизация генерации тестов и генерации оракулов.

кафедра ВСиС Самощенков Г.А.

История развития тестирования ПО. Этапы.

для предсказания или оценки корректности поведения системы, предназначенной для тестирования,

в определенных условиях.
Отладка (debug, debugging) – процесс поиска, локализации и исправления ошибок в программе [IEEE Std.610-12.1990].
Основная проблема тестирования - определение достаточности множества тестов для истинности вывода о правильности реализации программы, а также нахождения множества тестов, обладающего этим свойством.

кафедра ВСиС Самощенков Г.А.

Определения

г. Процесс наблюдения за выполнением программы в специальных условиях и

вынесения на этой основе оценки каких-либо ее аспектов.
1990 г. Это не действие. Это интеллектуальная дисциплина, имеющая целью получение надежного программного обеспечения без излишних усилий на его проверку.
1999 г. Техническое исследование программы для получения информации о ее качестве с точки зрения определенного круга заинтересованных лиц.
2004 г. Проверка соответствия между реальным поведением программы и ее ожидаемым поведением на конечном наборе тестов, выбранном определенным образом.
2012г. Процесс выполнения программы с целью обнаружения ошибок.

кафедра ВСиС Самощенков Г.А.

Эволюция представлений о тестировании

на соответствие стандартам;
Оценка готовности продукта к выпуску;
И тд.

кафедра ВСиС Самощенков

Г.А.

Что такое тестирование…

полезной информации, помогающей тестированию;
Тестировщики помогают программистам исправлять ошибки.

кафедра ВСиС Самощенков

Г.А.

Тестировщик vs Программист

функциональные спецификации и т.д.);
Аналитик всегда прав;

Аналитик тоже может ошибаться;
Тестировщик –

клиент, который использует программный продукт больше всех.

кафедра ВСиС Самощенков Г.А.

Тестировщик vs Аналитик

несёт ответственность за качество выпускаемого продукта;
Для оценки качества продукта руководителю

проекта требуется соответствующая информация.

кафедра ВСиС Самощенков Г.А.

Тестировщик vs Руководитель проекта

Клиент вовлечён в процесс разработки так же как и другие

участники;
Качественное тестирование возможно только зная каким образом клиенты будут использовать продукт.

кафедра ВСиС Самощенков Г.А.

Тестировщик vs Клиент

результатов;
Программист должен избегать тестирования собственных программ;
Компания-разработчик не должна тестировать собственное

ПО;
Любой процесс тестирования должен включать в себя детальное изучение результатов каждого теста;
Готовьте тесты как для корректных и ожидаемых, так и для некорректных и непредсказуемых входных данных;
Проверка, делает ли программа то, что должна, составляет лишь подзадачи; вторая половина задачи – выяснить, не делает ли программа того, чего не должна делать;

кафедра ВСиС Самощенков Г.А.

Принципы тестирования

не является фактически одноразовой;
Не приступайте к созданию тестов, заранее настраиваясь

на то, что ошибки не будут обнаружены;
Вероятность того, что в некоторой части программы остались необнаруженные ошибки, прямо пропорциональна количеству уже обнаруженных там ошибок;
Тестирование – творческий процесс, требующий интеллектуальных усилий.

кафедра ВСиС Самощенков Г.А.

Принципы тестирования