Приложение N 5. Типовой порядок организации подготовки и проведения испытаний программных средств

Информация об изменениях:

Приказом ФТС России от 2 сентября 2013 г. N 1643 приложение дополнено приложением N 5

Приложение N 5
к Порядку организации процессов
жизненного цикла программных
средств информационных систем и
информационных технологий
таможенных органов

Типовой порядок
организации подготовки и проведения испытаний программных средств

I. Общие положения

1.1. Типовой порядок организации подготовки и проведения испытаний программных средств (далее - Порядок испытаний) определяет:

последовательность и содержание организационных, технических мероприятий при подготовке и в процессе проведения испытаний программных средств (далее - ПС) в рамках исполнения государственного контракта (далее - контракт) на создание или модернизацию ПС, а также контракта на сопровождение ПС в части, касающейся работ по внесению изменений (дополнений) в ПС;

типовое содержание и этапность проведения испытаний;

действия должностных лиц таможенных органов, принимающих участие в подготовке и проведении испытаний ПС.

1.2. Порядок испытаний предназначен для должностных лиц структурных подразделений ФТС России, Центрального информационно-технического таможенного управления (далее - ЦИТТУ), к деятельности которых в соответствии с должностными инструкциями и должностными регламентами в части, касающейся создания, модернизации, сопровождения ПС, относятся:

подготовка документации для проведения торгов;

подготовка контрактов на выполнение работ, оказание услуг для нужд таможенных органов;

участие в работе комиссии по приемке работ, выполненных по контракту, контроле за исполнением условий контракта.

1.3. Состав испытаний (предварительные автономные, предварительные комплексные, опытная эксплуатация, приемочные) новых или модернизированных ПС определяется условиями контракта.

Испытания ПС с изменениями (дополнениями), произведенными по контракту на сопровождение ПС, осуществляются в рамках приемочных испытаний.

1.4. Сроки проведения испытаний ПС отражаются в календарном плане выполнения работ по контракту, а их содержание - в Программе и методике проведения испытаний (далее - ПМИ), разработанной организацией, выполняющей работы в соответствии с условиями контракта (далее - Исполнитель) и согласованной с таможенным органом, заключившем контракт с Исполнителем (далее - Заказчик). В ПМИ учитываются требования и рекомендации Порядка испытаний.

II. Подготовка к испытаниям

2.1. Подготовка к испытаниям заключается в проведении Исполнителем и Заказчиком организационных и технических мероприятий и работ в интересах обеспечения и организации испытаний.

2.2. Председатель комиссии по приемке работ, выполненных по контракту (далее - комиссия), после ознакомления с материалами, представленными Исполнителем в соответствии с условиями контракта и согласно сроку, указанному в календарном плане выполнения работ по контракту:

уточняет дату, время, место проведения, содержание предварительных (приемочных) испытаний;

определяет мероприятия по подготовке к испытаниям, их организацию и порядок проведения;

информирует Главное управление информационных технологий (далее - ГУИТ) и структурное подразделение ФТС России, инициировавшего заказ на создание (модернизацию) ПС (далее - инициатор заказа), о готовности Исполнителя к проведению опытной эксплуатации и представляет материалы, необходимые для подготовки проекта приказа ФТС России о проведении опытной эксплуатации ПС на объектах пилотной зоны;

дает поручение секретарю комиссии в части, касающейся материалов для испытаний и другой информации, полученных от Исполнителя.

2.3. Секретарь комиссии по поручению председателя не позднее пяти рабочих дней до даты проведения предварительных (приемочных) испытаний и пятнадцати рабочих дней до планируемой даты начала опытной эксплуатации:

оповещает членов комиссии и лиц, привлекаемых для участия в испытаниях, о дате, времени, месте проведения испытаний;

направляет членам комиссии для ознакомления/изучения, уточнения (при необходимости) материалы для проведения испытаний, представленные Исполнителем;

2.4. ГУИТ осуществляет подготовку проекта и издание приказа ФТС России о проведение опытной эксплуатации с учетом предложений инициатора заказа и ЦИТТУ;

2.5. ЦИТТУ с участием представителей Исполнителя (в случае необходимости) осуществляет:

1) перед проведением предварительных, приемочных испытаний:

подготовку оборудования для проведения испытаний;

подготовку помещений для участников испытаний и их техническое обеспечение (автоматизированные рабочие места, средства демонстрации, сетевого доступа к специализированному стенду);

2) перед проведением опытной эксплуатации:

подготовку и представление в ГУИТ предложений в проект приказа о проведении опытной эксплуатации, его согласование;

подготовку специализированного стенда для проведения испытаний;

подготовку и рассылку ПС, материалов, необходимых для подготовки и проведения опытной эксплуатации (далее - пакет рассылки), в таможенные органы, включенные согласно приказу ФТС России в перечень объектов пилотной зоны;

установку, настройку ПС на автоматизированном рабочем месте (далее - АРМ) участников испытаний в структурных подразделениях ФТС России, включенных в перечень объектов пилотной зоны;

выполнение комплекса мероприятий по информационной безопасности.

2.6. В таможенном органе, включенном в перечень объектов пилотной зоны, для подготовки и проведения опытной эксплуатации, документального оформления результатов испытаний ПС распоряжением таможенного органа создается рабочая группа, руководство деятельностью которой осуществляет председатель рабочей группы.

2.7. Перед проведением опытной эксплуатации председатель рабочей группы проводит инструкторско-методическое занятие с членами рабочей группы. Члены рабочей группы производят установку, настройку, проверку работоспособности ПС.

2.8. О готовности к проведению испытаний информируют:

члены комиссии, назначенные приказом ФТС России (ЦИТТУ), - председателя комиссии;

члены рабочей группы таможенного органа - председателя рабочей группы, который докладывает начальнику таможенного органа о готовности к испытаниям.

Начальник таможенного органа информирует ГУИТ и ЦИТТУ о готовности к проведению опытной эксплуатации ПС.

III. Состав участников испытаний

3.1. Ко всем видам испытаний ПС привлекаются для участия представители Заказчика, а также представители Исполнителя.

3.2. Со стороны Заказчика во всех видах испытаний принимает участие комиссия, назначаемая в соответствии с пунктом 3.2 или пунктом 5.7 Порядка организации процессов жизненного цикла программных средств информационных систем и информационных технологий таможенных органов (далее - Порядок). В опытных испытаниях также участвуют рабочие группы таможенных органов, включенных в перечень объектов пилотной зоны.

3.3. Члены комиссии от ЦИТТУ, инициатора заказа в целях обеспечения испытаний, повышения контроля качества ПС, выполненных работ по контракту могут в рамках должностных полномочий привлекать для подготовки и участия в испытаниях подчиненных должностных лиц.

3.4. Привлечение должностных лиц инициатора заказа для участия в испытаниях может осуществляться по поручению начальника структурного подразделения - инициатора заказа.

3.5. В состав рабочей группы таможенного органа, включенного в перечень объектов пилотной зоны, включаются должностные лица информационно-технических подразделений и структурного подразделения (подразделений), для обеспечения деятельности которого предназначено испытываемое ПС. Для обеспечения и участия в испытаниях могут привлекаться и другие должностные лица указанных подразделений.

IV. Типовой состав материалов для проведения испытаний

4.1. Состав материалов для проведения испытаний ПС отражается в условиях контракта. К материалам для проведения испытаний относятся:

1) ПМИ с описанием по каждому виду испытаний:

общей продолжительности;

этапов и регламентов их проведения;

сценариев проверок;

2) описание контрольного примера (примеров);

3) макет тестового задания пользователю (для опытной эксплуатации);

4) протокол испытаний ПС, проводимых Исполнителем, отражающий результаты и ограничения, используемые при испытаниях;

5) техническая документация (руководство программиста, руководство пользователя, пояснительная записка и другие документы, разрабатываемые Исполнителем в соответствии с условиями контракта);

6) технические характеристики и требования к оборудованию, используемому для эксплуатации ПС.

4.2. В условиях контракта отражаются требования к материалам для проведения испытаний и сроки их представления Заказчику.

4.3. Для проведения опытной эксплуатации на объектах пилотной зоны используются уточненные по результатам предварительных испытаний:

1) инструкция (руководство) программиста;

2) инструкция (руководство) пользователя;

3) макет тестового задания пользователю, отражающий последовательность проводимых операций, действий, наименование вводимых исходных и других данных, запросов;

4) памятка или блок-схема алгоритма действий пользователя при зависании, сбоях и некорректной работе ПС.

4.4. При проведении приемочных испытаний ПС осуществляется проверка технической и другой документации, предусмотренной условиями контракта и доработанной в соответствии с замечаниями, предъявленными в процессе опытной эксплуатации, а также инсталляционного пакета ПС на внешнем носителе информации (оптическом диске).

4.5. Инициатор заказа для проведения опытной эксплуатации в соответствии с макетом тестового задания пользователю:

1) разрабатывает тестовые задания для участников испытаний, привлекаемых для работы с ПС, с вариантными значениями исходных и других данных;

2) представляет тестовые задания в ЦИТТУ для включения их в состав пакетов рассылки.

4.6. Члены комиссии и другие должностные лица Заказчика, привлекаемые к участию в испытаниях:

1) при подготовке к проведению испытаний изучают материалы для проведения испытаний;

2) в процессе испытаний проверяют содержание технической документации на предмет соответствия описанных действий действиям, выполняемым практически;

3) при наличии замечаний по материалам для проведения испытаний, выявленных при подготовке и в процессе испытаний, представляют их секретарю комиссии на бумажном носителе или в электронном виде в срок, установленный председателем комиссии.

4.7. Секретарь комиссии:

1) доводит до членов комиссии информацию о материалах для проведения испытаний, представленных Исполнителем;

2) ведет учет замечаний, предложений членов комиссии, осуществляет их обобщение и актуализацию;

3) информирует председателя комиссии о замечаниях и предложениях членов комиссии;

4) осуществляет подготовку письма Исполнителю с замечаниями и предложениями Заказчика по материалам для проведения испытаний.

V. Общий порядок проведения испытаний

5.1. Этапность и документальное оформление результатов испытаний, сдачи-приемки выполненных работ.

5.1.1. Количество этапов по каждому виду испытаний, содержание каждого этапа, продолжительность и методика его проведения отражаются в ПМИ.

5.1.2. Испытания проводятся на объектах Заказчика в сроки, определенные в календарном плане выполнения работ по контракту.

5.1.3. Предварительные автономные и предварительные комплексные испытания в зависимости от объема функциональных требований к ПС, детализации этих требований могут проводиться в один или несколько этапов.

5.1.4. Опытная эксплуатация включает два этапа: подготовительный этап и этап непосредственной эксплуатации (использования ПС по назначению) на объектах пилотной зоны или на стенде для проведения испытаний ЦИТТУ.

5.1.5. Приемочные испытания проводятся в один или два этапа. Увеличение количества этапов осуществляется по мере необходимости.

5.1.6. На этапе подготовки контракта в части, касающейся обязанностей Исполнителя, необходимо отразить:

1) в процессе предварительных и приемочных испытаний ПС:

а) демонстрацию выполнения проверок ПС в соответствии с содержанием ПМИ для каждого этапа испытаний и действиями, описанными в руководстве (инструкции) программиста, пользователя;

б) фиксацию замечаний, выявленных в процессе выполнения проверок, предложения членов комиссии и других должностных лиц, участвующих в испытаниях;

в) устранение недостатков, выявленных в работе ПС в процессе испытаний, при наличии такой возможности, а также в технической документации;

2) в процессе подготовки и проведения опытной эксплуатации осуществление:

а) технической и консультационной помощи участникам испытаний;

б) устранения ошибок в работе ПС;

в) доработки ПС в случае возникновения критических ситуаций в функционировании ПС;

г) подготовки пакета рассылки ПС с внесенными изменениями (дополнениями) или произведенными доработками ПС и передачу его в отдел ЦИТТУ, осуществляющий рассылку ПС на объекты.

5.1.7. Необходимым и достаточным условием завершения каждого этапа испытаний и перехода к очередному этапу является успешное завершение проверок, проводимых на этапе, и соответствие полученных результатов требованиям технического задания (далее - ТЗ) и детализированным функциональным требованиям к ПС.

5.1.8. Результаты по каждому виду испытаний отражаются в протоколе испытаний информационно-программных средств, образец которого приведен в приложении N 6 к Порядку (далее - протокол испытаний). Протокол испытаний оформляется в двух экземплярах. При наличии замечаний один экземпляр протокола испытаний передается представителю Исполнителя, ответственному за проведение испытаний, или направляется Заказчиком в письменном виде Исполнителю не позднее следующего рабочего дня после завершения испытаний.

5.1.9. При успешном завершении предварительных испытаний (опытной эксплуатации) комиссия оформляет в двух экземплярах акт сдачи-приемки выполненных работ по государственному контракту (далее - Акт), форма которого приведена в приложении N 4 к Порядку, с заключением о приемке (допуске) ПС в опытную эксплуатацию (к приемочным испытаниям).

При успешном завершении приемочных испытаний новых и модернизированных ПС комиссия оформляет Акт с заключением о приемке работ, выполненных по контракту, и включении ПС, документации, разработанной в соответствии с условиями контракта, в Фонд алгоритмов и программ ФТС России (далее - ФАП ФТС России).

К Акту прилагается протокол (протоколы) испытаний. Один экземпляр Акта передается или направляется Заказчиком в письменном виде Исполнителю.

5.1.10. В рамках контракта на сопровождение ПС при успешном завершении приемочных испытаний по окончанию каждого этапа работ по внесению изменений (дополнений) в ПС оформляются:

1) акт приемки ПС в эксплуатацию с заключением о принятии версии ПС в эксплуатацию и включении версии ПС, технической документации с внесенными изменениями (дополнениями) в ФАП ФТС России;

2) Акт с заключением о соответствии выполненных работ условиям контракта. К Акту прилагаются протоколы испытаний версий ПС, созданных в процессе этапа работ.

5.2. Типовой порядок проведения предварительных автономных испытаний

5.2.1. После получения от Исполнителя материалов для проведения предварительных автономных испытаний председатель комиссии:

1) уточняет (при необходимости):

а) дату и время проведения этапов испытаний;

б) необходимое техническое обеспечение;

в) состав и сроки проведения подготовительных мероприятий;

2) определяет:

а) членов комиссии для участия в этапах испытаний;

б) должностных лиц, ответственных за техническое обеспечение и выполнение других подготовительных мероприятий.

5.2.2. Секретарь комиссии согласно указаниям председателя комиссии доводит информацию о проведении этапов испытаний до членов комиссии, привлекаемых к испытаниям.

5.2.3. Должностные лица ЦИТТУ совместно с представителями Исполнителя (при необходимости) при подготовке испытаний производят:

а) подготовку виртуальной инфраструктуры тестовой среды ПС;

б) инсталляцию ПС в инфраструктуре тестовой среды ЦИТТУ;

в) настройку ПС (системы), загрузку данных, необходимых для испытаний, в базу данных (тестовую базу данных).

5.2.4. В процессе испытаний члены комиссии, должностные лица структурных подразделений таможенных органов, привлекаемые к участию в испытаниях, используют материалы для проведения испытаний, представленные Исполнителем.

5.2.5. Члены комиссии в процессе каждого этапа испытаний контролируют выполнение операций, осуществляют проверку соответствия полученных результатов требованиям ТЗ, детализированным функциональным требованиям к ПС, а также фиксируют замечания и представляют их секретарю комиссии для обобщения.

5.2.6. Замечания, не устраненные в процессе проверок, отражаются в протоколе предварительных автономных испытаний.

5.3. Типовое содержание и порядок проведения предварительных комплексных испытаний

5.3.1. Испытания в зависимости от их содержания и объема могут проводиться в несколько этапов, в процессе которых производится проверка:

1) компиляции, инсталляции (установки) и настройки ПС на серверном оборудовании и рабочих станциях;

2) качества исходных кодов ПС;

3) работоспособности и соответствия ПС требованиям ТЗ, детализированным функциональным требованиям к ПС, а также качества ПС;

4) взаимодействия ПС с другими ПС, функциональными системами Единой автоматизированной информационной системы таможенных органов (далее - ЕАИС ТО);

5) содержания технической документации в части, касающейся описания работы с ПС и технологии, реализуемой с его использованием.

5.3.2. Начальный и заключительный этапы испытаний проводятся в рамках заседания комиссии по приемке работ, выполненных по контракту.

5.3.3. Члены комиссии и другие должностные лица, участвующие в испытаниях, осуществляют контроль:

1) компиляции, установки, настройки и работоспособности ПС;

2) соответствия действий, описанных в материалах для проведения испытаний, действиям, выполняемым специалистом Исполнителя практически в процессе испытаний;

3) соответствия функционирования ПС требованиям ТЗ и детализированным функциональным требованиям к ПС.

5.4. Содержание начального этапа испытаний

5.4.1. На начальном этапе предварительных комплексных испытаний, который проводится в рамках заседания комиссии, уточняется состав членов комиссии, а также других должностных лиц ЦИТТУ, инициатора заказа, принимающих участие в этапах испытаний.

5.4.2. В процессе заседания комиссии:

1) председатель комиссии объявляет тему, цель заседания и информирует участников заседания о (об):

а) результатах предварительных автономных испытаний, замечаниях и устранении выявленных недостатков, реализации предложений членов комиссии;

б) этапах предварительных комплексных испытаний, их содержании, начале каждого этапа, планируемой его продолжительности, месте проведения и материалах, используемых для проведения проверок на этапах испытаний;

в) составе участников испытаний на каждом этапе;

2) производится обсуждение и принимается решение по предложениям, внесенным председателем комиссии, по составу членов комиссии, принимающих участие в каждом этапе испытаний, а также о порядке информирования председателя комиссии о результатах каждого этапа, представления замечаний секретарю комиссии.

5.4.3. Секретарь комиссии ведет и оформляет протокол заседания комиссии, который доводится до каждого члена комиссии под подпись.

5.5. Типовое содержание этапа (этапов) проверки инсталляции и настройки ПС

5.5.1. На данном этапе (этапах) производятся проверки:

1) компиляции и качества исходных кодов ПС (для компилируемых ПС);

2) процесса инсталляции серверной части ПС на серверном оборудовании тестовой инфраструктуры ЦИТТУ, обеспечивающего имитацию соответствующего уровня ЕАИС ТО: пост, таможня, региональное таможенное управление, ФТС России (ЦИТТУ);

3) процесса инсталляции клиентской части ПС на рабочих станциях тестового контура, имитирующих пользователей соответствующего уровня;

4) настройки ПС (системы);

5) загрузки тестовых данных, необходимых для проверки работоспособности ПС, в базу данных;

6) выполнения операций по администрированию системы;

7) соответствия содержания руководства (инструкции) программиста, пользователя в части, касающейся инсталляции, настроек и администрирования ПС, производимым действиям.

5.5.2. К участию в испытаниях на данном этапе (этапах) привлекаются члены комиссии от ЦИТТУ, а также должностные лица отдела стендовых испытаний ЦИТТУ.

5.6. Типовое содержание этапа (этапов) проверки работоспособности и функциональности ПС

5.6.1. На данном этапе (этапах) производятся проверки:

1) работоспособности ПС и их соответствия ТЗ, детализированным функциональным требованиям как в целом, так и в различных режимах работы;

2) качества ПС;

3) корректности взаимодействия ПС с другими ПС (системами) ЕАИС ТО;

4) реакции ПС на ошибочные действия пользователя;

5) соответствия содержания руководства (инструкции) пользователя выполняемым действиям;

6) исполнения ПС базовых функций, не подлежащих изменению в рамках контракта.

5.6.2. К участию в испытаниях на данном этапе (этапах) привлекаются члены комиссии от ЦИТТУ и инициатора заказа. К участию в проведении проверок ПС могут дополнительно привлекаться должностные лица инициатора заказа.

5.6.3. Член комиссии в случае несоответствия полученных результатов предъявляемым требованиям фиксирует замечания, информирует председателя комиссии и представляет замечания секретарю комиссии на бумажном носителе или в электронном виде.

5.6.4. Секретарь комиссии обобщает замечания и отражает их в протоколе испытаний, который передается Исполнителю в соответствии с пунктом 5.1.8 Порядка испытаний.

5.6.5. При устранении выявленных недостатков проведение этапа испытаний осуществляется повторно в течение срока проведения предварительных комплексных испытаний.

5.7. Типовой порядок проведения заключительного этапа испытаний

5.7.1. На заключительный этап проведения испытаний, который проводится в рамках заседания комиссии, приглашаются (при необходимости) должностные лица от инициатора заказа, принимавшие участие в проверках на предыдущих этапах испытаний.

Регламент заседания комиссии и порядок проведения этапа испытаний предварительно согласовывается сторонами и уточняется в начале заседания.

5.7.2. После уточнения регламента заседания комиссии председатель комиссии информирует участников о:

1) содержании выполненных работ (этапа работ) в рамках контракта;

2) результатах этапов испытаний, замечаниях и их устранении;

3) выполненной работе (результатах работы) в целом;

4) порядке проведения этапа испытаний.

5.7.3. Комиссия заслушивает заключения должностных лиц и членов комиссии, принимавших участие в этапах испытаний, по результатам испытаний и их предложения по составу проверок в процессе данного этапа.

5.7.4. По результатам этапов испытаний, предложениям участников испытаний комиссией может быть принято одно из следующих решений:

1) проведение испытаний считать успешным, принять выполненные работы;

2) провести выборочные проверки работы ПС по реализации отдельных функциональных требований согласно техническому заданию (заявке на проведение работ по внесению изменений в ПС в рамках работ по контракту);

3) провести проверки ПС в полном объеме согласно ПМИ.

5.7.5. Секретарь комиссии ведет протокол заседания комиссии и протокол испытаний.

5.7.6. После завершения проверок комиссия принимает решение о возможности (невозможности) приемки выполненных работ и ПС в опытную эксплуатацию.

5.7.7. При невозможности приемки ПС в опытную эксплуатацию Исполнителю передается протокол испытаний в соответствии с пунктом 5.1.8 Порядка испытаний.

5.7.8. После устранения недостатков проводятся повторные предварительные комплексные испытания в необходимом объеме в согласованный сторонами срок.

5.8. Типовой порядок проведения опытной эксплуатации

5.8.1. После принятия комиссией решения о приемке ПС в опытную эксплуатацию начинается подготовительный этап опытной эксплуатации. В ходе этапа в соответствии с графиком выполнения работ и ПМИ проводятся:

1) мероприятия, отраженные в разделе 2 Порядка испытаний;

2) организационно-технические мероприятия и работы по внедрению ПС на объектах пилотной зоны (долее - объекты), отраженные в разделах IV и VI Порядка.

Если объектами являются только ЦИТТУ и структурные подразделения ФТС России, то мероприятия, отраженные в разделе VI Порядка, проводятся только в части, касающейся установки и настройки ПС.

5.8.2. Этап непосредственной эксплуатации начинается после завершения подготовки всех объектов к испытаниям.

5.8.3. Председатель комиссии после получения информации о готовности объектов к проведению испытаний уточняет и доводит до членов комиссии, должностных лиц, ответственных за проведение испытаний на объектах, дату и время начала этапа.

5.8.4. Члены рабочей группы, привлекаемые к проверкам должностные лица структурного подразделения, для обеспечения деятельности которого предназначено испытываемое ПС, на каждом объекте в процессе эксплуатации ПС выполняют тестовые задания.

5.8.5. По поручению председателя рабочей группы один из членов рабочей группы ведет в электронном виде рабочий журнал проведения испытаний (далее - журнал испытаний), в котором фиксирует сведения о (об):

1) начале, окончании и общей продолжительности функционирования ПС (системы);

2) отказах, сбоях, аварийных ситуациях в работе ПС и их продолжительности;

3) изменениях в конфигурации и составе средств объекта, используемых в проведении испытаний;

4) обнаруженных ошибках, несоответствиях в эксплуатационной документации и произведенных корректировках;

5) произведенных обновлениях ПС, полученных путем централизованной рассылки,

а также другие сведения, относящиеся к эксплуатации ПС, в том числе замечания и рекомендации по удобству работы с ПС (системой).

5.8.6. Член рабочей группы, ответственный за ведение журнала испытаний, каждое сведение, внесенное в журнал испытаний, отправляет по электронной почте секретарю комиссии и доводит до представителя Исполнителя - участника испытаний на объекте.

5.8.7. Секретарь комиссии ведет в электронном виде сводный журнал испытаний ПС на объектах. О принятых сведениях информирует председателя комиссии и представителя Исполнителя, ответственного за проведение испытаний.

5.8.8. В случае возникновения ошибок, сбоев или критической ситуации в работе ПС, требующих внесения изменений (дополнений) в ПС или доработки ПС, без устранения которых невозможно проведение дальнейших испытаний, и в зависимости от предполагаемых трудозатрат проведение этапа непосредственной эксплуатации может быть временно приостановлено или прекращено.

5.8.9. Решение о приостановке проведения этапа и время (дата и время) его продолжения принимает председатель комиссии. Секретарь комиссии доводит информацию до членов комиссии, председателей рабочих групп на объектах проведения испытаний.

5.8.10. Решение о прекращении опытной эксплуатации и повторном ее проведении принимается комиссией и отражается в протоколе заседания с указанием даты начала повторного проведения. ГУИТ (ЦИТТУ) информирует об этом руководителей объектов.

5.8.11. После завершения опытной эксплуатации результаты испытаний ПС на объекте отражаются в протоколе проведения опытной эксплуатации, который подписывается всеми участниками проведения испытаний ПС на объекте. Два экземпляра протокола передается представителю Исполнителя.

5.8.12. Секретарь комиссии осуществляет рассылку проекта протокола испытаний с обобщенными результатами опытной эксплуатации по электронной почте членам комиссии для ознакомления и подготовки предложений по внесению изменений или дополнений в части, касающейся замечаний, выявленных и не устраненных в процессе испытаний, сроков их устранения, а также информирует о дате и времени проведения заседания комиссии.

5.8.13. Принятие решения о допуске ПС (системы) к приемочным испытаниям осуществляется по результатам опытной эксплуатации в процессе заседания комиссии. Заседание может проводиться в режиме видеоконференции с участием председателей рабочих групп (других участников испытаний) объектов.

5.8.14. К Акту с заключением о допуске ПС к приемочным испытаниям прилагаются протокол проведения опытной эксплуатации (с обобщенными результатами) и протоколы проведения опытной эксплуатации на объектах пилотной зоны.

5.9. Типовой порядок проведения приемочных испытаний

5.9.1. До начала приемочных испытаний члены комиссии по поручению председателя комиссии производят проверку устранения Исполнителем замечаний, выявленных в процессе опытной эксплуатации ПС.

5.9.2. Приемочные испытания проводятся после устранения Исполнителем всех замечаний и осуществляются в рамках заседания комиссии. На заседание комиссии приглашаются (при необходимости) должностные лица ЦИТТУ и инициатора заказа, принимавшие участие в опытной эксплуатации.

Заседание комиссии может проводиться в режиме видеоконференции с участием председателей рабочих групп (других участников испытаний) объектов.

5.9.3. Регламент проведения испытаний (заседания комиссии) предварительно согласовывается сторонами и уточняется в начале заседания.

5.9.4. Председатель комиссии после уточнения регламента испытаний (заседания комиссии) кратко информирует участников:

а) о содержании выполненных работ (этапа работ) в рамках контракта;

б) об устранении замечаний и реализации предложений отмеченных в протоколе проведения опытной эксплуатации.

5.9.5. Комиссия заслушивает заключения и предложения председателей рабочих групп по результатам опытной эксплуатации на объектах, членов комиссии, принимавших участие в проверках по устранению замечаний и реализации предложений, по результатам проверок и их предложения по содержанию приемочных испытаний.

5.9.6. По результатам, полученным в ходе опытной эксплуатации ПС, предложениям председателей рабочих групп объектов, членов комиссии, осуществлявших контроль за устранением недостатков, комиссией может быть принято одно из следующих решений:

а) принять выполненные работы по результатам опытной эксплуатации;

б) провести выборочные проверки работы ПС (системы) по реализации отдельных функциональных требований согласно техническому заданию (заявке на проведение работ по модернизации в рамках работ по контракту на сопровождение и модернизацию ПС);

в) провести испытания ПС (системы) в полном объеме согласно ПМИ.

5.9.7. После проведения проверок комиссия принимает решение о возможности (невозможности) приемки выполненных работ.

5.9.8. При невозможности приемки выполненных работ Исполнителю передается протокол испытаний в соответствии с пунктом 5.1.8 Порядка испытаний.

5.9.9. После устранения Исполнителем указанных недостатков проводятся повторные приемочные испытания в необходимом объеме в согласованный сторонами срок.

5.9.10. Результаты испытаний, включающие проверку инсталляционного пакета ПС на внешнем носителе (диске), сдаваемого Исполнителем в ФАП ФТС России, отражаются в протоколе испытаний.

VI. Содержание и отражение замечаний, предложений в протоколах испытаний

6.1. По каждому виду испытаний замечания и предложения по работе ПС, содержанию документации, разработанной в соответствии с условиями контракта, заносятся в протокол испытаний.

6.2. Замечания по своему содержанию и приоритету устранения (реализации) подразделяются на следующие категории:

1) I категория (чрезвычайно критичное):

а) не реализовано одно или более функциональных требований к ПС, приведенных в ТЗ;

б) остановки, выходящие за рамки времени реакции системы, определенного технологическим процессом;

в) сбои в работе ПС, зависание ПС (сообщения об ошибках, вынужденный перезапуск ПС, перезагрузка системного программного обеспечения);

г) несоответствие выходных, промежуточных данных контрольным данным;

д) изменение функционала ПС, не подлежащего модернизации (для модернизированного ПС);

е) инсталляционный пакет ПС, сдаваемый в ФАП ФТС России, неработоспособный;

ж) описание в документации отдельных операций (действий) или последовательности действий не соответствует действиям, выполняемым на практике;

2) II категория (критичное):

а) продолжительное время реакции на запрос (запросы) пользователя;

б) время обращения (обращений) и получения ответа (ответов) от ПС (системы), с которым (которыми) осуществляется взаимодействие, превышает время, установленное регламентом на проведение операции;

в) не в полном объеме реализована детализация функционального требования (требований);

г) содержание отдельных выполняемых операций (действий) в документации недостаточно освещено, требует уточнения или детализации;

3) III категория (некритичное):

а) расширение содержания контрольного примера (примеров), вариантов тестовых заданий пользователям;

б) уточнение надписей, формулировок (операций, команд меню, справочных данных, информационных сообщений ПС), отражаемых на мониторе в процессе работы ПС;

в) редакционные замечания по форме (формам) или форматам выходных данных;

г) внесение дополнения в ПС для удобства работы пользователя, целесообразность которого возникла в процессе испытаний;

д) незначительные ошибки в документации редакционного характера или в ее оформлении;

4) IV категория (предложения):

а) по совершенствованию ПС в процессе его сопровождения (при модификации ПС);

б) по исключению из документации избыточной информации.

6.3. Протокол испытаний оформляет секретарь комиссии, подписывают все участники испытаний. Замечания по работе ПС (системы), содержанию программной документации отражаются непосредственно в протоколе испытаний или прилагаются к нему в виде перечня замечаний в порядке категорий.

6.4. Секретарь комиссии до заседания комиссии по итогам проведения испытаний:

1) производит актуализацию замечаний в соответствии с информацией членов комиссии об их устранении в процессе испытаний;

2) подготавливает перечень замечаний, не устраненных в процессе испытаний (далее - перечень замечаний);

3) представляет перечень замечаний председателю комиссии на бумажном носителе и в электронном виде;

4) осуществляет рассылку членам комиссии перечня замечаний по электронной почте для ознакомления.

6.5. В процессе заседания комиссии по итогам испытаний (на заключительном этапе) рассматривается перечень замечаний, результаты работы Исполнителя по их устранению и принимается одно из следующих заключений (решений):

1) провести повторное испытание ПС в полном объеме согласно ПМИ после устранения Исполнителем всех замечаний (с указанием срока устранения замечаний);

2) провести проверки ПС в части, касающейся выявленных замечаний, после выполнения Исполнителем соответствующих доработок ПС, документации (с указанием срока устранения замечаний);

3) все замечания, выявленные в процессе проверок, устранены, проведение испытания считать успешным.

6.6. Разногласия сторон, а также между членами комиссии фиксируются в протоколе испытаний.

Первый заместитель начальника Главного управления информационных технологий

Ю.В. Молчановский