ar-net.ru Примечание - Необходимо, чтобы испытательная лаборатория сохраняла, как минимум, либо упорядоченный перечень фактических событий тестирования, либо машинно-читаемую версию журнала соответствия.
А.4 Дополнительные руководящие материалы по документации
А.4.1 Введение
Помимо соблюдения требований, определенных в 6.4 и 6.5, рекомендуется подготовить следующие документы:
a) информацию о тестирующей системе;
b) описание СТ;
c) информацию о клиенте испытательной лаборатории;
d) рабочие инструкции испытательной лаборатории.
А.4.2 Документ "Информация о тестирующей системе"
СТ приспособлены к конкретной тестирующей системе. Этот документ должен содержать следующую информацию, относящуюся к данной тестирующей системе:
а) оборудование (тестирующей системы);
b) наименование и номер версии операционной системы (тестирующей системы);
c) наименование и номер версии нижнего тестера;
d) наименование и номер версии верхнего тестера (при его наличии);
e) оборудование и/или процедуры, необходимые для связи нижнего тестера с ТР для целей тестирования (т.е. (N-1)-услуга);
f) оборудование и/или процедуры, необходимые для связи верхнего тестера (при его наличии) с ТР для целей тестирования;
g) наименование, место расположения и контактная информация организации, отвечающей за обслуживание СТ и КАТ и выдачу консультаций по ним.
А.4.3 Документ "Описание средств тестирования"
Этот документ должен содержать описание следующих аспектов СТ, относящихся к эталонному стандартному КАТ:
a) нижний тестер: описание нотации выполнимого тестирования и ее преобразование в нотацию абстрактного тестирования (например, в КДТН). Описание способов контроля, наблюдения и хранения АСП и демонстрация того, что выбранный метод реализует правила упорядочения, низводящие к абстрактным тестовым примерам;
b) верхний тестер: описание способов контроля, наблюдения и хранения АСП (за исключением метода удаленного тестирования), показывающие степень соблюдения требований к функциям верхнего тестера;
c) координация тестирования описание преобразования процедур скоординированного тестирования: в их реализацию; требования к ним определены в эталонном стандартном КАТ;
d) процесс выбора: описание использования ЗСРП и ДИРПТ при выборе абстрактных тестовых примеров, пригодных для тестирования ТР;
e) процесс параметризации: описание использования ЗСРП и ДИРПТ в параметризованных выполнимых тестовых примерах при тестировании ТР;
f) средства выработки журнала соответствия.
А.4.4 Документ "Информация для клиента испытательной лаборатории"
В этом документе исполнитель теста должен обеспечить следующую информацию, позволяющую испытательной лаборатории информировать клиента о степени готовности ТС для тестирования:
a) верхний тестер: если этот компонент предусмотрен - это описание способа отображения его интерфейса на соответствующую реализацию сервисной границы, любые предположения о реализации определения услуг, либо о функциональных возможностях или ресурсах, доступных в ТС; если же верхний тестер не предусмотрен, то это описание того, каким образом следует охватить его реализацию; такое описание содержит протокол административного управления тестированием, при его наличии;
b) координатор тестирования: что должен делать клиент для реализации процедур скоординированного тестирования - описание способа выполнения любой ручной координации взаимодействия между ТС и нижним тестером, при ее необходимости, - любая соответствующая информация о синхронизации, например, ожидаемые рабочие параметры протокола административного управления тестированием;
с) нижерасположенные услуги: указать, что клиент должен обеспечить достаточно надежную (N-1)-услугу и, по возможности, пояснить, каким образом этого можно достичь (не обращаясь к конкретному компьютеру).
А.4.5 Документ "Рабочие инструкции испытательной лаборатории"
В этом документе исполнитель теста должен предусмотреть информацию, которая может стать пособием и руководящим материалом для испытательной лаборатории при выполнении тестирования с помощью СТ, диагностике проблем и повторном прогоне тестов в случае необходимости. Сюда может относиться:
а) подготовка тестирования: способ использования ЗСРП и ДИРПТ для выполнения процессов выборки и параметризации тестов с помощью СТ;
b) выполнение тестирования: описание процесса прогона тестов в нижнем тестере и анализа результатов;
c) контроль выполнения: определение степени детализации контроля при выполнении тестовых примеров; рабочие инструкции должны описывать, каким образом выполняются тестовые примеры и, тем самым, косвенно определять количество тестовых примеров, которые могут быть выполнены в виде одной исполняемой единицы; крайним случаем является наличие одной единственной команды на всю тестовую кампанию (тесты основной взаимосвязи, тесты функциональных возможностей и тесты поведения); другой крайний случай - наличие команды на каждый отдельный шаг тестирования в каждом отдельном тестовом примере КВТ;
d) создание журнала соответствия; контроль его создания, возможность обратного отображения журнала соответствия на стандартные тестовые примеры в спецификации эталонного КАТ;
e) верхний тестер; описание любых исходных доверительных тестов, подлежащих выполнению на нижнем тестере и способа получения хранимых тестовых событий из верхнего тестера;
f) процедуры скоординированного тестирования: описание ручного способа осуществления координации между нижним и верхним тестерами в случае необходимости.