Методика испытаний. 
Разработка подсистемы статистического учёта успеваемости студентов для сетевой системы поддержки дистанционного обучения ОРОКС

Тестирование является одним из ключевых элементов обеспечения качества программного продукта.

Среди методов, с помощью которых проводилось тестирование подсистемы, можно выделить два основных:

ь метод «стеклянного ящика»;

ь метод «чёрного ящика».

Тестирование методом «стеклянного ящика» — это тестирование на этапе реализации. Данный метод можно отнести к процессу программирования, т.к. программисты выполняют тестирование на протяжении всего процесса создания ПО. Поскольку программист разрабатывает тесты, зная исходный код программы, он имеет определённые преимущества: направленность тестирования, полный охват кода, управление потоком, отслеживание целостности данных, внутренние граничные точки, тестирование, определяемое выбранным алгоритмом Написание и отладка подсистемы осуществлялась с использованием специальной тестовой базы данных, максимально охватывающей предметную область. Для этих целей была скопирована база данных, работа с которой осуществлялась на факультете дополнительного и дистанционного обучения МИЭТ. Данная база содержит все используемые в настоящее время категории пользователей, базовые и производные учебные планы, назначенные как индивидуально студентам, так и учебной группе. Также в базе имеются результаты выполнения студентами контрольных мероприятий.

Была произведена проверка корректности работы подсистемы при использовании базы данных, таблицы которой не содержат никаких записей. Данная ситуация может возникнуть при первоначальной установке системы ОРОКС на сервер образовательного учреждения.

Особое внимание было уделено работе подсистемы при использовании пользователем различных современных Интернет-браузеров, поскольку они по-разному могут интерпретировать элементы JavaScript, содержащиеся в HTML-документе, являющимся результатом исполнения Perl-программы. Также могли возникнуть проблемы при передаче данных на русском языке с помощью метода GET, использовавшимся при генерации отчётов для печати.

При тестировании методом «стеклянного ящика» особое внимание уделялась следующим вопросам:

ь ошибки, связанные с обработкой граничных условий;

ь ошибки сценария при работе с программой;

ь ошибки передачи и интерпретации данных.

Для максимального исключения ошибок ввода и обработки граничных условий, в подсистеме использовался выбор из фиксированного списка значений. Единственным используемым элементом текстового ввода является пара элементов для ввода начальной и конечной даты временного промежутка. Для проверки правильности ввода даты использовались шаблоны языка Perl, проверяющие соответствие введённой пользователем даты общепринятому в России формату даты через точку. Также производится проверка, чтобы дата начала временного промежутка не превосходила дату его окончания.

Ситуациям, связанным с ошибками сценария при работе с программой было уделено особое внимание. Поскольку при работе с некоторыми компонентами подсистемы пользователь проходит через несколько экранов, на каждом из которых выполняет определённые действия, то необходимо было обеспечить проверку на соответствие условиям перехода от экрана к экрану.

При передаче данных с экрана на экран или при обновлении какого-либо экрана используется хэш %Hidden и скрытый элемент ввода «hidden». В связи с особенностями передачи с использованием этих элементов, данные передаются только на следующий экран (форму), и, для передачи этих данных, допустим, с первого экрана на третий требуется повторно заносить данные в скрытый элемент ввода. Поэтому при разработке подсистемы проверялась проверка на корректность передачи данных их формированию (например, при передаче массивов данных) и последующей интерпретации (разбору элементов массива).

После локализации и устранения обнаруженных ошибок применялось контрольное тестирование, задача которого состояла в подтверждении правильности выполненной корректировки программы и в отсутствии проявления ранее обнаруженных ошибок.

Затем с участием экспертов с факультета дополнительного и дистанционного обучения выполнялось тестирование методом «чёрного ящика». Проводилась проверка на соответствие функциональности подсистемы техническому заданию.

В процессе тестирования обращалось внимание на пользовательский интерфейс, эксперты высказывали свои замечания и пожелания.

После устранения всех выявленных недостатков подсистема была установлена на сервер факультета дополнительного и дистанционного обучения МИЭТ, где проходила опытную эксплуатацию. Данная стадия является самой ответственной, поскольку даже самое полное тестирование не всегда позволяет выявить все нюансы, которые обнаруживаются при реальной эксплуатации.

Все ошибки и недочёты, выявленные в процессе реальной эксплуатации, были успешно локализованы и устранены.