3.2Методика испытаний
В соответствии с требованиями п. 4.3 технического задания на выполнение НИР адаптационные способности системы должны обеспечиваться на уровнях:
объектов учета;
исследуемых показателей (свойств) объектов учета;
структур связей объектов учета;
входных форм;
требований к обработке данных, структуре и содержанию выходных отчетов;
требований к анализу и контролю данных административного мониторинга;
групп пользователей и их функций в процессе сбора и обработки данных.
С целью проверки соответствия функций системы данным требованиям выделяются следующие виды испытаний.
3.2.1Испытание № 1 «Проверка функций управления объектами учета»
1 Требование технического задания.
Система должна обеспечивать адаптацию (настройку модели хранения) к требованиям задачи мониторинга в части типов объектов учета, объектов учета и их связей.
2 Объект испытаний / Компонент объекта испытаний.
Подсистема настройки сбора и хранения.
3 Требования к испытанию.
Перед проведением испытаний должно быть организовано:
развернут тестовый стенд системы;
подготовлены тестовые данные – структура типов объектов учета и объектов учета;
подготовлен документ «Протокол испытаний».
4 Порядок проведения испытания:
Запустить тестовый стенд.
Создать типы объектов учета, инициализировать их связи.
Создать объекты учета, инициализировать их связи.
Отредактировать данные типов объектов учета и объектов учета.
Удалить объект учета, тип объекта учета.
Зафиксировать результат испытания в протоколе испытаний.
5 Характеристики, подлежащие оценке:
1 Корректность добавления, редактирования, удаления типов объектов учета.
2 Корректность добавления, редактирования, удаления объектов учета.
3 Корректность настройки прав доступа пользователей к объектам учета.
6 Допустимые пределы расхождений.
Расхождения недопустимы (неколичественный показатель).
7 Порядок обработки результатов испытания.
Результат проверки фиксируется в колонке «Результат испытания» в таблице раздела «Сведения о результатах наблюдений за правильностью функционирования системы» протокола испытаний.
3.2.2Испытание № 2 «Проверка функций управления показателями (свойствами) объектов учета»
1 Требование технического задания.
Система должна обеспечивать адаптацию (настройку модели хранения) к требованиям задачи мониторинга в части показателей объектов учета.
2 Объект испытаний / Компонент объекта испытаний.
Подсистема настройки сбора и хранения.
3 Требования к испытанию.
Перед проведением испытаний должно быть организовано:
развернут тестовый стенд системы;
настроена структура типов объектов учета и объектов учета в соответствии с исходными данными испытания 1;
подготовлены тестовые данные – перечень показателей объектов учета с указанием их характеристик;
подготовлен документ «Протокол испытаний».
4 Порядок проведения испытания:
Запустить тестовый стенд.
Создать показатели объектов учета, инициализировать их характеристики.
Отредактировать характеристики показателей объектов учета, их отношения с типами объектов учета.
Удалить показатели объектов учета.
Зафиксировать результат испытания в протоколе испытаний.
5 Характеристики, подлежащие оценке:
1 Корректность добавления, редактирования, удаления показателей объектов учета с логически неограниченной областью значений.
2 Корректность добавления, редактирования, удаления показателей объектов учета с логически ограниченной областью значений.
3 Корректность настройки прав доступа пользователей к показателям объектов учета.
6 Допустимые пределы расхождений.
Расхождения недопустимы (неколичественный показатель).
7 Порядок обработки результатов испытания.
Результат проверки фиксируется в колонке «Результат испытания» в таблице раздела «Сведения о результатах наблюдений за правильностью функционирования системы» протокола испытаний.
3.2.3Испытание № 3 «Проверка функций генерации входных диалоговых интерфейсных форм и функций ввода значений показателей»
1 Требование технического задания.
Система должна обеспечивать адаптацию к требованиям задачи мониторинга в части генерации диалоговых форм ввода данных и обеспечения их функционирования.
2 Объект испытаний / Компонент объекта испытаний.
Подсистема сбора данных.
3 Требования к испытанию.
Перед проведением испытаний должно быть организовано:
развернут тестовый стенд системы;
настроена структура типов объектов учета, объектов учета и показателей в соответствии с исходными данными испытаний 1 и 2;
подготовлены тестовые данные – значения показателей объектов учета;
подготовлен документ «Протокол испытаний».
4 Порядок проведения испытания:
Запустить тестовый стенд.
Перейти по иерархии объектов учета до объекта учета, значения показателей которого требуется ввести.
Перейти на форму ввода значений показателей.
Ввести значения показателей согласно исходным данным.
Зафиксировать результат испытания в протоколе испытаний.
5 Характеристики, подлежащие оценке:
1 Корректность генерации форм ввода данных.
2 Корректность ввода значений показателей с логически неограниченной областью значений.
3 Корректность ввода значений показателей с логически ограниченной областью значений.
4 Корректность ввода значений общих показателей.
5 Корректность ввода значений периодических показателей.
6 Допустимые пределы расхождений.
Расхождения недопустимы (неколичественный показатель).
7 Порядок обработки результатов испытания.
Результат проверки фиксируется в колонке «Результат испытания» в таблице раздела «Сведения о результатах наблюдений за правильностью функционирования системы» протокола испытаний.
3.2.4Испытание № 4 «Проверка функций настройки и генерации выходных отчетных форм»
1 Требование технического задания.
Система должна обеспечивать адаптацию к требованиям задачи мониторинга в части настройки параметров и генерации форм выходных отчетов.
2 Объект испытаний / Компонент объекта испытаний.
Подсистема генерации отчетов.
3 Требования к испытанию.
Перед проведением испытаний должно быть организовано:
развернут тестовый стенд системы;
настроена структура типов объектов учета, объектов учета и показателей в соответствии с исходными данными испытаний 1 и 2;
введены значения показателей объектов учета в соответствии с исходными данными испытания 3;
подготовлены тестовые данные – требования к содержанию и оформлению выходных (сводных и детальных) отчетов;
подготовлен документ «Протокол испытаний».
4 Порядок проведения испытания:
Запустить тестовый стенд.
Осуществить настройку шаблонов отчетов в соответствии с тестовыми исходными данными.
Осуществить настройку стилей визуализации отчетов в соответствии с тестовыми исходными данными.
Произвести генерацию отчетов.
Зафиксировать результат испытания в протоколе испытаний.
5 Характеристики, подлежащие оценке:
1 Корректность формирования шаблона отчета.
2 Корректность настройки стиля визуализации отчета.
3 Корректность формирования информационного массива.
4 Корректность генерации отчета.
6 Допустимые пределы расхождений.
Расхождения недопустимы (неколичественный показатель).
7 Порядок обработки результатов испытания.
Результат проверки фиксируется в колонке «Результат испытания» в таблице раздела «Сведения о результатах наблюдений за правильностью функционирования системы» протокола испытаний.
3.2.5Испытание № 5 «Проверка функций контроля данных административного мониторинга»
1 Требование технического задания.
Система должна обеспечивать адаптацию к требованиям задачи мониторинга в части контроля данных.
2 Объект испытаний / Компонент объекта испытаний.
Подсистема анализа и контроля данных.
3 Требования к испытанию.
Перед проведением испытаний должно быть организовано:
развернут тестовый стенд системы;
настроена структура типов объектов учета, объектов учета и показателей в соответствии с исходными данными испытаний 1 и 2;
введены значения показателей объектов учета в соответствии с исходными данными испытания 3;
подготовлены тестовые данные – перечень задач контроля с указанием критериев контроля данных;
подготовлен документ «Протокол испытаний».
4 Порядок проведения испытания:
Запустить тестовый стенд.
Осуществить настройку задач контроля данных.
Задать критерии контроля данных.
Произвести запуск функции контроля данных в ручном режиме.
Произвести запуск функции контроля данных в автоматическом режиме (по расписанию).
Зафиксировать результат испытания в протоколе испытаний.
5 Характеристики, подлежащие оценке:
1 Корректность задания критериев контроля данных.
2 Корректность формирования информационного массива.
3 Корректность результатов контроля и формы их представления.
6 Допустимые пределы расхождений.
Расхождения недопустимы (неколичественный показатель).
7 Порядок обработки результатов испытания.
Результат проверки фиксируется в колонке «Результат испытания» в таблице раздела «Сведения о результатах наблюдений за правильностью функционирования системы» протокола испытаний.
3.2.6Испытание № 6 «Проверка функций анализа данных административного мониторинга»
1 Требование технического задания.
Система должна обеспечивать адаптацию к требованиям задачи мониторинга в части анализа данных.
2 Объект испытаний / Компонент объекта испытаний.
Подсистема анализа и контроля данных.
3 Требования к испытанию.
Перед проведением испытаний должно быть организовано:
развернут тестовый стенд системы;
настроена структура типов объектов учета, объектов учета и показателей в соответствии с исходными данными испытаний 1 и 2;
введены значения показателей объектов учета в соответствии с исходными данными испытания 3;
подготовлены тестовые данные – перечень задач анализа данных с указанием правил анализа данных;
подготовлен документ «Протокол испытаний».
4 Порядок проведения испытания:
Запустить тестовый стенд.
Осуществить настройку задач анализа данных.
Задать правила анализа данных.
Произвести запуск функции анализа.
Зафиксировать результат испытания в протоколе испытаний.
5 Характеристики, подлежащие оценке:
1 Корректность задания правил анализа данных.
2 Корректность формирования информационного массива.
3 Корректность результатов анализа и формы их представления.
6 Допустимые пределы расхождений.
Расхождения недопустимы (неколичественный показатель).
7 Порядок обработки результатов испытания.
Результат проверки фиксируется в колонке «Результат испытания» в таблице раздела «Сведения о результатах наблюдений за правильностью функционирования системы» протокола испытаний.
3.2.7Испытание № 7 «Проверка функций импорта данных»
1 Требование технического задания.
Система должна обеспечивать адаптацию к требованиям задачи мониторинга в автоматического ввода (импорта) данных из внешних источников.
2 Объект испытаний / Компонент объекта испытаний.
Подсистема импорта данных.
3 Требования к испытанию.
Перед проведением испытаний должно быть организовано:
развернут тестовый стенд системы;
настроена структура типов объектов учета, объектов учета и показателей в соответствии с исходными данными испытаний 1 и 2;
подготовлены модули экспорта данных внешней информационной системы (используется функционирующая на базе исполнителя информационная система управления учебным процессом);
подготовлены тестовые данные – перечень импортируемых объектов учета и показателей;
подготовлен документ «Протокол испытаний».
4 Порядок проведения испытания:
Запустить тестовый стенд.
Настроить общие параметры задачи импорта.
Задать перечень импортируемых объектов учета и показателей.
Осуществить импорт данных в ручном режиме.
Осуществить импорт данных в автоматическом режиме (по расписанию).
Зафиксировать результат испытания в протоколе испытаний.
5 Характеристики, подлежащие оценке:
1 Корректность настройки задачи импорта данных.
2 Корректность импорта объектов учета.
3 Корректность импорта показателей.
6 Допустимые пределы расхождений.
Расхождения недопустимы (неколичественный показатель).
7 Порядок обработки результатов испытания.
Результат проверки фиксируется в колонке «Результат испытания» в таблице раздела «Сведения о результатах наблюдений за правильностью функционирования системы» протокола испытаний.
|
