Какие бывают испытания автоматизированной системы (АС) и какие документы создаются при их проведении. Разбор ГОСТ Р 59792-2021, состав ПМИ, актов и протоколов.
Виды испытаний АС
Кульминацией всех работ по созданию автоматизированной системы (АС) является ее сдача Заказчику в промышленную эксплуатацию. Этому счастливому моменту предшествуют испытания, проведение которых регламентирует ГОСТ Р 59792-2021. Этот стандарт подчеркивает, что испытания АС являются неотъемлемыми этапами 7-ой стадии «Ввод в действие», которая является предпоследней по процессу создания АС согласно ГОСТ 34.601-90. Какие еще стадии создания выделяет этот стандарт, я рассказывала в прошлой статье.
По своей сути испытания АС – это проверка того, что реализация соответствует требованиям, определенным в техническом задании (ТЗ), включая выполнение всех функций, количественных и качественных показателей. ГОСТ Р 59792-2021 устанавливает следующие виды испытаний:
- предварительные испытания, которые бывают автономные и комплексные. По смыслу автономные предварительные испытания напоминают модульное тестирование в ИТ, когда проверяется работоспособность отдельных частей АС и их соответствие требованиям ТЗ. Чтобы проверить, как отдельные компоненты взаимодействуют между собой, в ИТ проводится интеграционное тестирование, а для АС – комплексные предварительные испытания.
- опытная эксплуатация – проверка работоспособности системы в боевых условиях, в рамках пилотного внедрения у Заказчика или в аналогичной среде. Обычно этот этап продолжителен по времени и предполагает взаимодействие реальных пользователей и персонала с АС. Цель опытной эксплуатации — выявить недостатки в АС и документации по отзывам реальных людей, использующих систему в фактических, а не модельных, условиях. Опытная эксплуатация предполагает использование всех компонентов и видов обеспечения АС, т.е. является комплексной.
- приемочные испытания – финальный этап проверки соответствия АС требованиям ТЗ с учетом опытной эксплуатации и принятие решения о приемке системы в постоянную (промышленную) эксплуатацию с постановкой на баланс Заказчика. Приемочные испытания могут быть только комплексными.
Согласно ГОСТ Р 59792-2021, испытания АС проводятся на объекте Заказчика, но по договоренности допускается проводить их на технических средствах разработчика при создании условий для получения достоверных результатов. На практике не каждый проект по созданию АС включает явное проведение предварительных испытаний с разработкой и согласованием всех необходимых документов. В заказной разработке для внутреннего заказчика предварительные испытания часто сводятся к модульному, интеграционному и нагрузочному тестированию системы на стороне разработчика. В случае внешнего заказчика этот этап может быть оформлен официально, с выпуском и согласованием всех необходимых документов.
Если вы сами находитесь в роли Заказчика, лучше не пропускать этап опытной эксплуатации, чтобы выявить все недостатки системы и поручить Разработчику устранить их до фактической приемки, т.е. приемочных испытаний.
Ключевым входным документом для каждого вида испытаний является Программа и методика испытаний (ПМИ), состав и содержание которой, как и других документов, относящихся к АС, регламентирует ГОСТ Р 59795-2021 «Требования к содержанию документов». Этот стандарт заменил устаревший РД 50-34.698-90, который был более подробным и содержал фактические шаблоны представления данных, помимо текстового перечисления обязательных пунктов в составе документов на АС. Каждый документ ПМИ разрабатывает Разработчик, а согласует Заказчик.
Разработка ТЗ на информационную систему по ГОСТ и SRS
Код курса
TTIS
Ближайшая дата курса
3 июня, 2024
Продолжительность
12 ак.часов
Стоимость обучения
27 000 руб.
Состав и содержание документов для разных видов испытаний
При любых испытаниях проверяется:
- соответствие АС требованиям ТЗ на АС;
- комплектность АС;
- качество документации;
- выполнение функций всей АС или ее частей во всех режимах работы согласно ТЗ;
- количество и квалификация обслуживающего персонала;
- выполнение требований техники безопасности, противопожарной безопасности, экологичности и эргономики.
| Вид испытаний | Входные документы | Выходные документы |
| Предварительные автономные | • ТЗ на АС и на ее части • Программа и методика предварительных автономных испытаний • график проведения автономных предварительных испытаний • подготовленные и согласованные тесты (контрольные примеры) для проверки результатов требованиям ТЗ | • Протоколы испытаний по формам, указанным в ПМИ предварительных испытаний • Документы, подтверждающие устранение ошибок и замечаний, выявленных при автономных испытаниях |
| Предварительные комплексные | • ТЗ на АС • Программа и методика предварительных комплексных испытаний • график проведения комплексных предварительных испытаний • протоколы автономных испытаний частей АС и документы, подтверждающие устранение ошибок и замечаний, выявленных при автономных испытаниях • согласованные комплексные тесты (контрольные примеры) для проверки результатов требованиям ТЗ | • Протокол комплексных испытаний с заключением о готовности (неготовности) АС к опытной эксплуатации • Перечень требуемых доработок и рекомендуемые сроки их выполнения • Акт предварительных испытаний • Акт приемки в опытную эксплуатацию • Уведомление о готовности АС к опытной эксплуатации |
| Опытная эксплуатация | • Результаты предварительных испытаний • Эксплуатационная документация, например, Ведомость эксплуатационных документов, Шаблоны документов, Описание информационного массива, Описание БД, Руководство пользователя, Технологическая инструкция, Инструкция по эксплуатации, Описание технологического процесса обработки данных Общее описание системы, Формуляр, Паспорт. Полный перечень видов документов на АС перечислен в ГОСТ 34.201-2020 • Программа опытной эксплуатации | • Журнал опытной эксплуатации со сведениями о продолжительности работы АС, отказах, сбоях, аварийных ситуациях, изменениях параметров объекта автоматизации, изменении документации и программных средств, наладке технических средств, с указанием даты и ответственного лица внесения этих данных • Акт о завершении опытной эксплуатации • Уведомление о готовности АС к приемочным испытаниям |
| Приемочные испытания | • Уведомление о готовности АС к приемочным испытаниям • ТЗ на АС и на ее части • Документация на АС • Программа и методика приемочных испытаний • Комплексные согласованные тесты (контрольные примеры) • Эксплуатационная документация на программные средства и оборудование • Акт приемки в опытную эксплуатацию • Акт о завершении опытной эксплуатации | • Единый протокол приемочных испытаний • Заключение о соответствии системы требованиям ТЗ на АС и возможности оформления акта приемки АС в постоянную (промышленную) эксплуатацию • Акт приемки АС в постоянную (промышленную) эксплуатацию |
Как уже было отмечено ранее, ключевым документом любого вида испытаний является ПМИ – программа и методика испытаний. Независимо от вида испытаний, она имеет типовой перечень разделов согласно ГОСТ Р 59795-2021.
| Раздел ПМИ | Содержание раздела |
| Объект испытаний | • Наименование системы (полное и краткое) • Комплектность испытываемой системы — перечень компонентов испытываемой системы и требования к техническим средствам, на которых будут проводиться испытания |
| Цель испытаний | • конкретные цели и задачи испытаний • перечень проверяемых качеств системы, например, проверка на работоспособность и соответствие требованиям ТЗ, определение возможности передачи АС в опытную или промышленную эксплуатацию |
| Общие положения | • перечень руководящих документов, на основании которых проводят испытания • место и продолжительность испытаний • организации, участвующие в испытаниях • перечень ранее проведенных испытаний • перечень предъявляемых документов, скорректированных по результатам ранее проведенных испытаний |
| Объем испытаний | • перечень этапов испытаний и проверок, плановые значения проверяемых количественных и качественных характеристик АС • последовательность проведения и режима испытаний • требования по испытаниям программных средств • перечень работ по завершении испытаний, требования к ним, объем и порядок проведения |
| Условия и порядок проведения испытаний | • условия проведения испытаний • условия начала и завершения отдельных этапов испытаний • имеющиеся ограничения в условиях проведения испытаний • требования к техническому обслуживанию АС • меры, обеспечивающие безопасность и безаварийность проведения испытаний • порядок взаимодействия организаций, участвующих в испытаниях • порядок привлечения экспертов для исследования возможных повреждений в процессе проведения испытаний • требования к персоналу, проводящему испытания, и порядок его допуска к испытаниям |
| Материально-техническое обеспечение испытаний | Конкретные виды материально-технического обеспечения с распределением задач и обязанностей организаций, участвующих в испытаниях. В ИТ-проектах обычно здесь перечисляются характеристики программно-аппаратной инфраструктуры, на которой будет проверяться работоспособность системы. |
| Метрологическое обеспечение испытаний | Перечень мероприятий по метрологическому обеспечению испытаний с распределением задач и ответственности организаций, участвующих в испытаниях, за выполнение соответствующих мероприятий. В этом разделе могут быть перечислены требования к средствам измерения, которые подтверждают соответствие фактических условий проведения испытаний тем, которые заявлены в ТЗ как плановые условия функционирования АС. Например, если система предназначена для эксплуатации в нормальных климатических условиях по ГОСТ 22261-94 ( температура воздуха 20 ± 5 °С, относительная влажность 30-80%, атмосферное давление 84-106 кПа), в этом разделе ПМИ перечисляются термометры, барометры и гигрометры, которые допустимо использовать для измерения этих показателей окружающей среды. |
| Отчетность | Перечень отчетных документов, которые должны оформляться в процессе испытаний и по их завершении, с указанием организаций и предприятий, разрабатывающих, согласующих и утверждающих их, а также сроки оформления этих документов: • акт о результатах испытаний • отчет о результатах испытаний • акт технического состояния системы после испытаний |
| Приложения | В приложения обычно выносится одна или несколько методик проведения испытаний. Как правило, в рамках одной методики излагается последовательность шагов проверки, перечень их исполнителей, выполняемые ими действия и ожидаемый результат. По факту это очень похоже на текстовое и/или табличное изложение схемы бизнес-процесса «как должно быть». |
Как и в любом документе на основе ГОСТ, в ПМИ допускается объединять или исключать отдельные разделы при условии изложения их содержания в других разделах программы испытаний, а также включать в нее дополнительные разделы (при необходимости).
На практике содержимое ПМИ во многом копирует ТЗ. Поэтому при разработке требований важно формулировать их очень точно и конкретно, помня о необходимости проверки каждого требования на этапе приемки. При этом не стоит упоминать в ТЗ проектные решения, поскольку проектирование составляет отдельный этап создания АС, который можно тщательно выполнить лишь после определения требований. Об этом я писала здесь.
Надеюсь этот небольшой обзор поможет аналитикам, техписателям и менеджерам проектов лучше понять назначение и взаимосвязь документов, разрабатываемых на разных стадиях создания автоматизированной системы.
Разработка ТЗ на информационную систему по ГОСТ и SRS
Код курса
TTIS
Ближайшая дата курса
3 июня, 2024
Продолжительность
12 ак.часов
Стоимость обучения
27 000 руб.
Больше материалов про разработку требований и их оформление в ТЗ вы узнаете на моих курсах в Школе прикладного бизнес-анализа на базе нашего лицензированного учебного центра обучения и повышения квалификации системных и бизнес-аналитиков в Москве:
