Виды, состав, объем и методы испытаний системы и ее составных частей - подраздел технического задания на АС, разрабатываемого согласно ГОСТ 34.602. Как элемент иерархической структуры ТЗ может быть представлен так: Порядок контроля и приемки системы (разд. 6) ⇨ Виды, состав, объем и методы испытаний системы и ее составных частей (подр. 6.1). В документах подраздел выделяется заголовком 2-го уровня и нумеруется. Редакция от 08.05.2021.
Создан 21.05.2018 12:51:12
Термины и определения
Виды - Классификационная группировка испытаний по определенному признаку [из 4 ГОСТ 16504-81].
Объем - Характеристика испытаний, определяемая количеством объектов и видов испытаний, а также суммарной продолжительностью испытаний [из 12 ГОСТ 16504-81].
Метод (вообще) - Инструментальный способ, прием достижения какой-либо цели или решения конкретной задачи. Примечания:
- Прием или система (совокупность) приемов практического или теоретического освоения (познания) действительности.
- Инструкция для пошагового достижения определенной цели.
- Комплексный подход к организации деятельности во взаимосвязи целей, исполнителей, ресурсов, оборудования и технологий.
[из 3.7 ГОСТ Р 54097-2010].
Методы - Правила применения определенных принципов и средств испытаний [из 11 ГОСТ 16504-81].
Составная часть - Изделие, выполняющее определенные функции в составе другого изделия.
Примечание - Понятие «Составная часть изделия» следует применять в отношении конкретного изделия, в состав которого оно входит. СЧ может быть любым видом изделия по конструкторско-функциональным характеристикам (деталь, сборочная единица, комплекс и комплект) [из 3.2 ГОСТ 2.101-2016] или Рассматриваемая часть изделия. Примечание - Составную часть можно рассматривать как самостоятельное изделие [из 2 ГОСТ Р 53480-2009].
Требования стандартов
Испытания АС проводят на стадии «Ввода в действие» по ГОСТ 34.601 с целью проверки соответствия создаваемой АС требованиям технического задания (ТЗ) [из 1.1 ГОСТ 34.603-92].
Испытания АС представляют собой процесс проверки выполнения заданных функций системы, определения и проверки соответствия требованиям ТЗ количественных и (или) качественных характеристик системы, выявления и устранения недостатков в действиях системы, в разработанной документации [из 1.2 ГОСТ 34.603-92].
Виды - В зависимости от взаимосвязей испытываемых в АС объектов испытания могут быть автономные или комплексные. Автономные испытания охватывают части АС. Их проводят по мере готовности частей АС к сдаче в опытную эксплуатацию. Комплексные испытания проводят для групп, взаимосвязанных частей АС или для АС в целом [из 1.4 ГОСТ 34.603-92].
Методика как набор методов - Для планирования проведения всех видов испытаний разрабатывают документ «Программа и методика испытаний». Разработчик документа устанавливается в договоре или ТЗ [из 1.5 ГОСТ 34.603-92].
Объем - Программа и методика испытаний должна устанавливать необходимый и достаточный объем испытаний, обеспечивающий заданную достоверность получаемых результатов [из 1.6 ГОСТ 34.603-92].
Состав
Для АС устанавливают следующие основные виды испытаний:
- Допускается дополнительно проведение других видов испытаний АС и их частей;
- Допускается классификация приемочных испытаний в зависимости от статуса приемочной комиссии (состав членов комиссии и уровень его утверждения);
- Виды испытаний и статус приемочной комиссии устанавливают в договоре и (или) ТЗ.
[из 1.3 ГОСТ 34.603-92].
Связанные документы
Смотрите: |
Приемочным испытаниям АС должна предшествовать ее опытная эксплуатация на объекте [из 1.12 ГОСТ 34.603-92].
В зависимости от вида требований, предъявляемых к АС на испытаниях, проверке или аттестации в ней подвергают:
- комплекс программных и технических средств;
- персонал;
- эксплуатационную документацию, регламентирующую деятельность персонала при функционировании АС;
- АС в целом.
[из 1.13 ГОСТ 34.603-92].
При испытаниях АС проверяют:
- качество выполнения комплексом программных и технических средств автоматических функций во всех режимах функционирования АС согласно ТЗ на создание АС;
- знание персоналом эксплуатационной документации и наличие у него навыков, необходимых для выполнения установленных функций во всех режимах функционирования АС, согласно ТЗ на создание АС;
- полноту содержащихся в эксплуатационной документации указании персоналу по выполнению им функций во всех режимах функционирования АС согласно ТЗ на создание АС;
- количественные и (или) качественные характеристики выполнения автоматических и автоматизированных функций АС в соответствии с ТЗ;
- другие свойства АС, которым она должна соответствовать по ТЗ.
[из 1.14 ГОСТ 34.603-92].
Испытания АС следует проводить на объекте заказчика. По согласованию между заказчиком и разработчиком предварительные испытания и приемку программных средств АС допускается проводить на технических средствах разработчика при создании условий получения достоверных результатов испытаний [из 1.15 ГОСТ 34.603-92].
Допускается последовательное проведение испытаний и сдача частей АС в опытную и постоянную эксплуатацию при соблюдении установленной в ТЗ очередности ввода АС в действие [из 1.16 ГОСТ 34.603-92].
Предварительные испытания
А для раздела «Предварительные испытания» используются аутентичные тексты пп. 2.1 - 2.6.3 ГОСТ 34.603-92.
Предварительные испытания АС могут быть:
[из 2.1 ГОСТ 34.603-92]
Автономные испытания АС следует проводить в соответствии с программой и методикой автономных испытаний, разрабатываемых для каждой части АС [из 2.2.1 ГОСТ 34.603-92]
В программе автономных испытаний указывают:
- перечень функций, подлежащих испытаниям;
- описание взаимосвязей объекта испытаний с другими частями АС;
- условия, порядок и методы проведения испытаний и обработки результатов;
- критерии приемки частей по результатам испытаний.
К программе автономных испытаний следует прилагать график проведения автономных испытаний [из 2.2.2 ГОСТ 34.603-92].
Подготовленные и согласованные тесты (контрольные примеры) на этапе автономных испытаний должны обеспечить:
- полную проверку функций и процедур по перечню, согласованному с заказчиком;
- необходимую точность вычислений, установленную в ТЗ;
- проверку основных временных характеристик функционирования программных средств (в тех случаях, когда это является существенным);
- проверку надежности и устойчивости функционирования программных и технических средств.
[из 2.2.3 ГОСТ 34.603-92].
В качестве исходной информации для теста рекомендуется использовать фрагмент реальной информации организации-заказчика в объеме, достаточном для обеспечения необходимой достоверности испытаний [из 2.2.4 ГОСТ 34.603-92]
Результаты автономных испытаний частей АС следует фиксировать в протоколах испытаний. Протокол должен содержать заключение о возможности (невозможности) допуска части АС к комплексным испытаниям [из 2.2.5 ГОСТ 34.603-92]
В случае, если проведенные автономные испытания будут признаны недостаточными, либо будет выявлено нарушение требований регламентирующих документов по составу или содержанию документации, указанная часть АС может быть возвращена на доработку и назначен новый срок испытаний [из 2.2.6 ГОСТ 34.603-92]
Комплексные испытания АС проводят путем выполнения комплексных тестов. Результаты испытаний отражают в протоколе. Работу завершают оформлением акта приемки в опытную эксплуатацию [из 2.3.1 ГОСТ 34.603-92].
В программе комплексных испытаний АС или частей АС указывают:
- перечень объектов испытания;
- состав предъявляемой документации;
- описание проверяемых взаимосвязей между объектами испытаний;
- очередность испытаний частей АС;
- порядок и методы испытаний, в том числе состав программных средств и оборудования, необходимых для проведения испытаний, включая специальные стенды и полигоны.
[из 2.3.2 ГОСТ 34.603-92].
Для проведения комплексных испытаний должны быть представлены:
- программа комплексных испытаний;
- заключение по автономным испытаниям соответствующих частей АС и устранение ошибок и замечаний, выявленных при автономных испытаниях;
- комплексные тесты;
- программные и технические средства и соответствующая им эксплуатационная документация.
[из 2.3.3 ГОСТ 34.603-92].
При комплексных испытаниях допускается использовать в качестве исходной информацию, полученную на автономных испытаниях частей АС [из 2.3.4 ГОСТ 34.603-92].
Комплексный тест должен:
- быть логически увязанным;
- обеспечивать проверку выполнения функций частей АС во всех режимах функционирования, установленных в ТЗ на АС, в том числе всех связей между ними;
- обеспечивать проверку реакции системы на некорректную информацию и аварийные ситуации.
[из 2.3.5 ГОСТ 34.603-92].
Протокол комплексных испытаний должен содержать заключение о возможности (невозможности) приемки АС в опытную эксплуатацию, а также перечень необходимых доработок и рекомендуемые сроки их выполнения.
После устранения недостатков проводят повторные комплексные испытания в необходимом объеме [из 2.3.6 ГОСТ 34.603-92].
Опытная эксплуатация
Используются аутентичные тексты пп. 3.1 - 3.3 ГОСТ 34.603-92.
Опытную эксплуатацию проводят в соответствии с программой, в которой указывают:
- условия и порядок функционирования частей АС и АС в целом;
- продолжительность опытной эксплуатации, достаточную для проверки правильности функционирования АС при выполнении каждой функции системы и готовности персонала к работе в условиях функционирования АС;
- порядок устранения недостатков, выявленных в процессе опытной эксплуатации.
[из 3.1 ГОСТ 34.603-92].
Во время опытной эксплуатации АС ведут рабочий журнал, в который заносят сведения о продолжительности функционирования АС, отказах, сбоях, аварийных ситуациях, изменениях параметров объекта автоматизации, проводимых корректировках документации и программных средств, наладке технических средств. Сведения фиксируют в журнале с указанием даты и ответственного лица. В журнал могут быть занесены замечания персонала по удобству эксплуатации АС [из 3.2 ГОСТ 34.603-92].
По результатам опытной эксплуатации принимают решение о возможности (или невозможности) предъявления частей АС и системы в целом на приемочные испытания.
Работа завершается оформлением акта о завершении опытной эксплуатации и допуске системы к приемочным испытаниям [из 3.3 ГОСТ 34.603-92].
Приемочные испытания
Используются аутентичные тексты пп. 4.1 - 4.10 ГОСТ 34.603-92.
Приемочные испытания проводят в соответствии с программой, в которой указывают:
- перечень объектов, выделенных в системе для испытаний и перечень требований, которым должны соответствовать объекты (со ссылкой на пункты ТЗ);
- критерии приемки системы и ее частей;
- условия и сроки проведения испытаний;
- средства для проведения испытаний;
- фамилии лиц, ответственных за проведение испытаний;
- методику испытаний и обработки их результатов;
- перечень оформляемой документации.
[из 4.1 ГОСТ 34.603-92].
Для проведения приемочных испытаний должна быть предъявлена следующая документация:
- техническое задание на создание АС;
- акт приемки в опытную эксплуатацию;
- рабочие журналы опытной эксплуатации;
- акт завершения опытной эксплуатации и допуска АС к приемочным испытаниям;
- программа и методика испытаний.
Приемочные испытания следует проводить на функционирущем объекте [из 4.2 ГОСТ 34.603-92].
Приемочные испытания в первую очередь должны включать проверку:
- полноты и качества реализации функций при штатных, предельных, критических значениях параметров объекта автоматизации и в других условиях функционирования АС, указанных в ТЗ;
- выполнения каждого требования, относящегося к интерфейсу системы;
- работы персонала в диалоговом режиме;
- средств и методов восстановления работоспособности АС после отказов;
- комплектности и качества эксплуатационной документации.
[из 4.3 ГОСТ 34.603-92].
Проверку полноты и качества выполнения функций АС рекомендуется проводить в два этапа. На первом этапе проводят испытания отдельных функций (задач, комплексов задач). При этом проверяют выполнение требований ТЗ к функциям (задачам, комплексам задач). На втором этапе проводят проверку взаимодействия задач в системе и выполнение требований ТЗ к системе в целом [из 4.4 ГОСТ 34.603-92]
По согласованию с заказчиком проверка задач в зависимости от их специфики может проводиться автономно или в составе комплекса. Объединение задач при проверке в комплексах целесообразно проводить с учетом общности используемой информации и внутренних связей [из 4.5 ГОСТ 34.603-92].
Проверку работы персонала в диалоговом режиме проводят с учетом полноты и качества выполнения функций системы в целом. Проверке подлежит:
- полнота сообщений, директив, запросов, доступных оператору, и их достаточность для эксплуатации системы;
- сложность процедур диалога, возможность работы персонала без специальной подготовки;
- реакция системы и ее частей на ошибки оператора, средства сервиса.
[из 4.6 ГОСТ 34.603-92].
Проверка средств восстановления работоспособности АС после отказов ЭВМ должна включать:
- проверку наличия в эксплуатационной документации рекомендаций по восстановлению работоспособности и полноту их описания;
- практическую выполнимость рекомендованных процедур;
- работоспособность средств автоматического восстановления функций (при их наличии).
[из 4.7 ГОСТ 34.603-92].
Проверку комплектности и качества эксплуатационной документации следует проводить путем анализа документации на соответствие требованиям нормативно-технических документов и ТЗ [из 4.8 ГОСТ 34.603-92].
Результаты испытаний объектов, предусмотренных программой, фиксируют в протоколах, содержащих следующие разделы:
- назначение испытаний и номер раздела требований ТЗ на АС, по которому проводят испытание;
- состав технических и программных средств, используемых при испытаниях;
- указание методик, в соответствии с которыми проводились испытания, обработка и оценка результатов;
- условия проведения испытаний и характеристики исходных данных;
- средства хранения и условия доступа к конечной, тестирующей программе;
- обобщенные результаты испытаний;
- выводы о результатах испытаний и соответствии созданной системы или ее частей определенному разделу требований ТЗ на АС.
[из 4.9 ГОСТ 34.603-92].
Протоколы испытаний объектов по всей программе обобщают в едином протоколе, на основании которого делают заключение о соответствии системы требованиям ТЗ на АС и возможности оформления акта приемки АС в постоянную эксплуатацию.
Работу завершают оформлением акта о приемке АС в постоянную эксплуатацию [из 4.10 ГОСТ 34.603-92].
Виды испытаний в соответствии с действующими нормами, распространяющимися на разрабатываемую систему
Виды испытаний в соответствии с действующими нормами, распространяющимися на разрабатываемую систему, бывают самые разные и зависят от конкретного вида автоматизированной системы, например:
- испытания средств измерений для целей утверждения типа;
- испытания игровых автоматов с целью утверждения типа.
Средства измерения в составе автоматизированной системы должны проходить испытания на утверждение типа, игровые автоматы, представляющие собой, в большинстве случаев, автоматизированные системы, также должны пройти испытания на утверждения типа.
В случае с игровыми автоматами в качестве действующих норм выступают ПР 50.2.023-2000 Правила по метрологии. Государственная система обеспечения единства измерений. Правила проведения испытаний игровых автоматов с денежным выигрышем с целью утверждения типа и контроля за их соответствием утвержденному типу.