Национальный стандарт РФ ГОСТ Р 58048-2017 "Трансфер технологий. Методические указания по оценке уровня зрелости технологий" (утв. и введен в действие приказом Федерального агентства по техническому регулированию и метрологии от 29 декабря 2017 г. N 2128-ст)

Technology transfer. Technology maturity assessment methodology guide

ОКС 03.100.01

Дата введения - 1 июня 2018 г.
Введен впервые

Предисловие

1 Разработан Федеральным государственным бюджетным учреждением "Национальный исследовательский центр "Институт имени Н.Е. Жуковского" (ФГБУ "НИЦ "Институт имени Н.Е. Жуковского")

2 Внесен Техническим комитетом по стандартизации ТК 323 "Авиационная техника"

3 Утвержден и введен в действие Приказом Федерального агентства по техническому регулированию и метрологии от 29 декабря 2017 г. N 2128-ст

4 Введен впервые

1 Область применения

Настоящий стандарт описывает методику оценки зрелости технологий и систем с их применением через соответствующие уровни готовности. Концепция уровней готовности используется для оценки текущего состояния вновь разрабатываемых или приобретаемых технологий и компонентов сложных технических систем, в частности в авиации.

Систематическая оценка достигнутых уровней зрелости позволяет на раннем этапе выявлять и снижать риски, связанные с несвоевременным выполнением соответствующих проектов и программ, превышением выделенного на их реализацию бюджета.

С учетом уровней готовности принимают решения о возможности и целесообразности трансфера конкретных технологий, дальнейшего продолжения научно-исследовательских и опытно-конструкторских работ (НИОКР) и перевода разрабатываемой технологии на следующую стадию жизненного цикла, разрабатываются планы совершенствования систем, их компонентов и соответствующих технологий производства.

Настоящий стандарт позволяет обеспечить унификацию подходов к оценке зрелости технологий и принятию решений по применению и развитию тех или иных критических технологий и компонентов при создании целевых и обеспечивающих систем.

Требования настоящего стандарта являются общими и предназначены для применения всеми организациями независимо от их вида, размера и поставляемой продукции или оказываемых услуг.

2 Нормативные ссылки

В настоящем стандарте использованы нормативные ссылки на следующие стандарты:

ГОСТ 2.103 Единая система конструкторской документации. Стадии разработки

ГОСТ Р ИСО 9000 Системы менеджмента качества. Основные положения и словарь

ГОСТ Р ИСО/МЭК 12207 Информационная технология. Системная и программная инженерия. Процессы жизненного цикла программных средств

ГОСТ Р 55386 Интеллектуальная собственность. Термины и определения

ГОСТ Р 56645.3 Системы дизайн-менеджмента. Руководство по управлению инновациями

ГОСТ Р 56645.5 Системы дизайн-менеджмента. Термины и определения

ГОСТ Р 57193 Системная и программная инженерия. Процессы жизненного цикла систем

ГОСТ Р 57194.1 Трансфер технологий. Общие положения

ГОСТ Р 57194.3 Трансфер технологий. Технологический аудит

Примечание - При пользовании настоящим стандартом целесообразно проверить действие ссылочных стандартов в информационной системе общего пользования - на официальном сайте Федерального агентства по техническому регулированию и метрологии в сети Интернет или по ежегодному информационному указателю "Национальные стандарты", который опубликован по состоянию на 1 января текущего года, и по выпускам ежемесячного информационного указателя "Национальные стандарты" за текущий год. Если заменен ссылочный стандарт, на который дана недатированная ссылка, то рекомендуется использовать действующую версию этого стандарта с учетом всех внесенных в данную версию изменений. Если заменен ссылочный стандарт, на который дана датированная ссылка, то рекомендуется использовать версию этого стандарта с указанным выше годом утверждения (принятия). Если после утверждения настоящего стандарта в ссылочный стандарт, на который дана датированная ссылка, внесено изменение, затрагивающее положение, на которое дана ссылка, то это положение рекомендуется применять без учета данного изменения. Если ссылочный стандарт отменен без замены, то положение, в котором дана ссылка на него, рекомендуется применять в части, не затрагивающей эту ссылку.

3 Термины, определения и сокращения

3.1 Термины и определения

В настоящем стандарте применены термины по ГОСТ Р ИСО 9000, ГОСТ Р 55386, ГОСТ Р 56645.3, ГОСТ Р 56645.5, ГОСТ Р 57194.1, а также следующие термины с соответствующими определениями:

3.1.1 возможность изготовления (producibility): Относительная легкость производства изделия, которое соответствует требованиям к особенностям дизайна, качеству и доступности.

Примечание - Возможность изготовления изделия следует отличать от технологичности. Возможность изготовления является преимущественно характеристикой изделия, тогда как технологичность является преимущественно характеристикой производственного процесса.

3.1.2 дизайн: Обобщенная характеристика системы (изделия), отражающая на той или иной стадии жизненного цикла представление о ней заказчиков, разработчиков и других заинтересованных сторон в виде требований, документации, цифровых моделей и/или фактически существующие ее способность достигать заданные цели, внешний вид, внутренняя функциональная и структурная архитектура, состав взаимодействующих и образующих единое целое подсистем, компонентов, модулей, интерфейсов, данных и других элементов, а также алгоритмы и особенности ее функционирования, зависящие от способов и условий применения.

Примечание - По мере развития системы от замысла до производства, эксплуатации и утилизации дизайн системы может существенно изменяться. Под дизайном системы (изделия) также принято понимать процесс или искусство определения архитектуры, компонентов, модулей, интерфейсов и данных системы для удовлетворения требований заказчиков. Дизайн систем (изделия) является применением теории систем для разработки продукции и использует методы таких дисциплин, как системный анализ, системная архитектура, системный инжиниринг.

3.1.3 интеграция: Процесс сборки системы из отдельных компонентов в соответствии с требованиями, которые к ним предъявляются.

Примечание - Интеграция является сложным процессом, состоящим из перекрывающихся, итеративных задач, которые не просто собирают компоненты вместе, а образуют успешную систему, соответствующую требованиям заказчика, которая может функционировать в соответствующем окружении согласно замыслу.

3.1.4 критический элемент технологии; КЭТ: Элемент технологии, от соответствия которого операционным требованиям зависит результативность и эффективность системы, а также если элемент или его применение является новым или оригинальным или элемент применяется в области, которая содержит главный технологический риск, выявленный при разработке или демонстрации новой технологии.

3.1.5 подсистема: Система, которая является частью большей системы.

3.1.6 система: Функционально, физически и/или через поведение связанная группа регулярно взаимодействующих и взаимозависимых элементов, которая формирует единое целое.

3.1.7 система систем: Множество систем, которое является результатом интеграции независимых и самостоятельно используемых систем в большую систему, обладающую дополнительными уникальными способностями.

3.1.8 системный инжиниринг: Междисциплинарный подход и методы, обеспечивающие создание успешных систем, которые фокусируются на целостном и конкурентном понимании потребностей заинтересованных сторон, исследовании возможностей, документировании требований и разработке, проверке соответствия требованиям (верификации), испытании (валидации) и развитии решений, которые рассматривают проблемную область целиком на всех стадиях жизненного цикла, от замысла системы до ее утилизации.

3.1.9 технологичность (manufacturability): Характеристика, рассматриваемая на этапе разработки, которая фокусируется на возможностях производственных процессов, применения машин или оборудования и общей способности постоянно производить продукцию с требуемым уровнем затрат и качества.

3.2 Сокращения

В настоящем стандарте применены следующие сокращения:

ИСР - иерархическая структура работ;

КД - конструкторская документация;

КИП - команда интеграции продукта;

КЭТ - критические элементы технологии;

ЛА - летательный аппарат;

ОГИ - оценка готовности интеграции;

ОГП - оценка готовности производства;

ОГС - оценка готовности системы;

ОГТ - оценка готовности технологии;

ПО - программное обеспечение;

ТД - технологическая документация;

УГИ - уровень готовности интеграции;

УГП - уровень готовности производства;

УГС - уровень готовности системы;

УГТ - уровень готовности технологии;

ФСА - функционально-стоимостной анализ.

4 Общие положения

4.1 Использование различных показателей и метрик в области управления проектами разработки технологий и систем с их применением является широко распространенной практикой. Они служат индикаторами, позволяющими оценивать ход исполнения, результативность и эффективность, риски, качество и другие параметры как самого проекта, так и разрабатываемой технологии или системы с ее применением.

4.2 Долговременные проекты разработки инновационных технологий и систем с их применением требуют привлечения существенных ресурсов и связаны со значительными рисками. Начиная с самых ранних стадий выполнения таких проектов, крайне желательно применять универсальные достаточно простые показатели и метрики, не зависящие от вида технологий и разрабатываемых систем, которые позволяют заказчикам, разработчикам и другим заинтересованным сторонам адекватно оценивать их текущее развитие и достигнутый прогресс в сравнении с запланированным, прогнозировать стоимость и сроки, необходимые для завершения работ, а также возможные риски.

4.3 Разработка инновационных технологий и систем с их применением обычно осуществляется с использованием методов системного инжиниринга, которые рассматривают целевую и обеспечивающие системы в соответствующем окружении на всех стадиях жизненного цикла. В процессе разработки технологий и систем с их применением создается техническая информация, в том числе необходимая для подготовки и проведения оценки зрелости, а также поддержки принятия решений руководителями программы (проекта). Например, инженеры - разработчики систем управляют определением и конфигурацией системы, трансляцией определения системы в ИСР, которая в том числе позднее используется для идентификации критических элементов технологии.

4.4 Развитие целевой технологии и/или системы в рамках ее жизненного цикла в общем случае включает стадии замысла, разработки, производства, применения, поддержку применения, прекращение применения и списание (утилизацию) согласно ГОСТ Р ИСО/МЭК 15288. В зависимости от вида целевой системы жизненные циклы различаются по стадиям, границам стадий, их длительности, свойствам, целям, преобладающим способам и условиям применения системы.

4.5 На всех стадиях жизненного цикла развития целевой технологии и/или системы требуются различные обеспечивающие системы. Каждая обеспечивающая система (как и любая система) имеет свой собственный жизненный цикл. Каждый жизненный цикл обеспечивающей системы привязывается и синхронизируется с циклом целевой системы. Если рассматриваемая система еще не существует, то требования к обеспечивающей системе определяют на стадии замысла целевой системы (или позднее, если позволяют сроки). В этом случае каждую обеспечивающую систему можно представлять как целевую систему, которая, в свою очередь, может иметь свои обеспечивающие системы.

4.6 Если подходящей обеспечивающей системы еще не существует, проект, который отвечает за целевую систему, может непосредственно отвечать за создание и использование обеспечивающей системы (систем). Наиболее важной обеспечивающей системой при развитии новых технологий и/или систем является производственная система, способная осуществлять выпуск целевой технической системы в нужное время, в нужном количестве и с заданным качеством.

4.7 В практике оценки развития технологий и систем с их применением, а также обеспечивающих систем (в том числе производственных) используется понятие зрелости, характеризующее их продвижение по жизненному циклу - от замысла до применения. Оценка достижения той или иной зрелости осуществляется с применением шкал, так называемых уровней готовности.

4.8 Зрелость конкретной технологии оценивают в ходе ОГТ с помощью шкалы УГТ. Используют уровни готовности технологии от 1 до 9.

4.9 Зрелость обеспечивающей производственной системы оценивают в ходе ОГП с помощью шкалы УГП. Используют уровни готовности производства от 1 до 10. В ряде случаев развитие производственной системы может рассматриваться как развитие целевой системы и оцениваться с точки зрения готовности технологии.

4.10 Кроме оценки готовности технологии и готовности производства дополнительно, для оценки текущего состояния разрабатываемых систем, допускается проводить ОГИ и ОГС. Используют УГИ от 1 до 9 и УГС от 1 до 5. Метрики УГИ и УГС являются вспомогательными.

Примечание - Метрика УГС используется для определения зрелости конкретной системы на разных стадиях ее жизненного цикла и не используется для сравнения зрелости различных систем между собой.

4.11 Оценка зрелости технологий, производства, интеграции, системы обычно осуществляется на стадиях жизненного цикла, соответствующих замыслу, разработке, производству целевой технологии и/или системы.

4.12 На стадии замысла рекомендуется использовать оценку зрелости как один из важных критериев при отборе той или иной технологии из числа доступных для последующего использования в целевой системе (анализ альтернатив).

4.13 При переходе от стадии замысла к стадии разработки и от стадии разработки к стадии производства оценка зрелости используется при принятии решения о переходе технологии и системы с ее применением к очередной стадии жизненного цикла. В ряде случаев стадию разработки принято дополнительно разделять на фазу разработки непосредственно технологии и фазу конструирования и подготовки производства, при переходе между которыми также осуществляется оценка зрелости.

4.14 В соответствии с ГОСТ 2.103 стадии замысла соответствует разработка технического предложения (конструкторская документация с литерой "П"); стадии разработки - разработка эскизного проекта (КД с литерой "Э"), разработка технического проекта (КД с литерой "Т"), разработка рабочей конструкторской документации (КД без литеры); стадии производства - разработка КД и ТД для опытного образца (партии) изделия (документация с литерой "О₁"), серийного (массового) изделия (документация с литерами "О_2.. n", "А", "Б"), единичного изделия (документация с литерой "И"). Пример соответствия фаз жизненного цикла, используемых при разработке ЛА, УГТ, УГП и стадиям разработки согласно ГОСТ 2.103 приведен в приложении А.

4.15 В случае, если в результате оценки зрелости технологии и системы с ее применением УГТ, УГП, УГИ, УГС не соответствуют целевому, должен быть разработан план развития с указанием необходимых ресурсов, сроков и оценкой возможных рисков. На основании разработанного плана развития может быть принято решение о продолжении работ или прекращении проекта развития технологии и создания системы с ее применением.

4.16 При подготовке проекта трансфера технологий для снижения возможных рисков передающая и принимающая стороны должны проводить оценку готовности. У передающей стороны проводится оценка готовности передаваемой технологии, а у принимающей стороны - оценка готовности технологии, в которую предполагается интегрировать принимаемую технологию, зрелость обеспечивающей производственной системы, а также при необходимости оценка готовности интеграции и системы.

4.17 ОГТ, ОГП, ОГИ, ОГС у заинтересованной стороны проводится командой независимых экспертов с применением специализированных опросников и/или созданных с их использованием калькуляторов уровней готовности (при наличии). До проведения оценки командой экспертов заинтересованной стороной обычно проводится самооценка. По результатам итоговой оценки зрелости командой экспертов составляется отчет. Результаты оценки зрелости также отражаются в соответствующем паспорте технологии.

Принципы проведения, порядок организации и проведения ОГТ, ОГП, ОГИ, ОГС в общем случае соответствуют ГОСТ Р 57194.3 и уточняются в разделе 5 для соответствующей оценки готовности. Оценка готовности может проводиться как одна из составных частей технологического аудита.

4.18 В общем случае при оценке зрелости технологии и систем с ее применением рекомендуется оценивать не все элементы технологии (системы), а только критические. Это позволяет уменьшить сроки и снизить общие затраты на проведение оценки. Для выявления КЭТ (системы с ее применением) обычно используется функциональная или структурная архитектура целевой системы, а в ряде случаев - иерархическая структура работ по ее созданию или алгоритм ее функционирования.

4.19 На ранних стадиях развития технологии, когда облик и архитектура целевой системы с ее применением не могут быть определены (обычно при проведении фундаментальных и прикладных исследований, научно-исследовательских работ), допускается оценивать зрелость технологии в целом. При этом из-за высокой степени неопределенности существуют значительные риски, связанные с оценкой ожидаемых результатов, сроков и необходимого финансирования дальнейшего развития технологии.

5 Указания по оценке готовности

5.1 Оценка готовности технологии

5.1.1 ОГТ является структурированным, систематическим процессом, использующим УГТ в качестве метрики, которая оценивает зрелость всех КЭТ, применяемых в технологии или системе с ее применением. КЭТ могут быть как оборудование, так и программное обеспечение. ОГТ в целом оформляется соответствующим отчетом.

5.1.2 Зрелость каждого КЭТ и технологии в целом в ходе проведения ОГТ оценивает независимая команда из числа экспертов по предметной области с использованием УГТ. Шкала УГТ использует следующие уровни от УГТ1 до УГТ9 (подробное описание см. в приложении Б):

УГТ1: Основные принципы технологии изучены и опубликованы;

УГТ2: Концепция технологии и/или ее применения сформулированы;

УГТ3: Критические функции и/или характеристики подтверждены аналитическим и экспериментальным путем;

УГТ4: Компонент и/или макет испытаны в лабораторном окружении;

УГТ5: Компонент и/или макет испытаны в окружении, близком к реальному;

УГТ6: Модель системы/подсистемы или прототип продемонстрированы в окружении, близком к реальному;

УГТ7: Прототип системы продемонстрирован в условиях эксплуатации;

УГТ8: Реальная система завершена и квалифицирована в ходе испытаний и демонстрации;

УГТ9: Реальная система подтверждена путем успешной эксплуатации (достижения цели).

5.1.3 Для оценки уровня готовности КЭТ может применяться калькулятор уровня готовности. Пример калькулятора УГТ приведен в приложении В.

5.1.4 Цель оценки готовности технологии - унификация подходов к принятию решений в отношении дальнейшего развития конкретной разрабатываемой технологии или системы с ее применением. ОГТ является лишь одним из инструментов, необходимых для оценки достигнутого прогресса и управления НИОКР в организации, которому свойственны как достоинства, так и ограничения.

5.1.5 Основные достоинства применения УГТ как метрики проявляются в том числе:

- при оценке текущего состояния разрабатываемой технологии (системы с ее применением);

- при принятии решения о дальнейшем финансировании развития технологии (системы с ее применением);

- при принятии решения о возможности перевода технологии на следующую стадию жизненного цикла;

- при управлении рисками.

5.1.6 Применимость УГТ как метрики ограничивают следующие характеристики:

- уровень готовности технологии не определяет в полной мере ее применимость или техническое совершенство;

- уровень готовности технологии зависит от контекста ее применения - одна и та же технология при применении в разных системах может иметь разные уровни готовности;

- уровень готовности технологии существенно зависит как от операционного окружения, так и от возможных архитектурных несоответствий (технология, разработанная как часть одной системы, может потребовать существенных доработок при применении в другой системе).

5.1.7 При использовании ОГТ необходимо помнить, что УГТ, в частности, не оценивает зрелость системы в целом, интеграцию технологии/системы в систему верхнего уровня, не учитывает, что технология с меньшим уровнем готовности также может соответствовать требованиям системы.

5.1.8 По результатам процесса ОГТ должен быть подготовлен отчет, включающий:

- краткое описание программы разработки технологии, включая описание дополнительно разработанной функциональности (в случае модернизации технологии/системы);

- состав и данные независимой команды экспертов;

- суждения и выводы команды экспертов об УГТ, доказывающие факты и документы, а также особые мнения экспертов (при наличии);

- другую уместную техническую информацию;

- сопроводительное письмо.

5.1.9 Рекомендуемая структура отчета об оценке готовности технологии:

1 Цель документа

2 Краткий обзор технологии (программы/проекта)

2.1 Цели технологии (программы/проекта)

2.2 Описание технологии (программы/проекта)

2.3 Описание системы

3 Оценка готовности технологии

3.1 Описание процесса оценки

3.2 Критические элементы технологии

3.3 Оценка зрелости

3.3.1 Первый критический элемент технологии

3.3.2 Следующий критический элемент технологии

4 Заключение.

5.1.10 Для организации и проведения ОГТ необходимо выполнить следующие шаги:

- разработать план-график проведения оценки;

- создать независимую команду экспертов по предметной области;

- идентифицировать критические и другие элементы технологии, подлежащие оценке;

- собрать фактические доказательства достигнутого уровня технологии;

- выполнить ОГТ и подготовить необходимый отчет;

- на основании отчета подготовить рекомендации по развитию технологии.

5.1.11 Разработка "Плана развития технологии"

В случае, если в результате оценки готовности КЭТ выявлено несоответствие достигнутого уровня ожидаемому, необходимо разработать "План развития технологии", который предусматривает работы, необходимые для достижения ими требуемой зрелости. Для каждого КЭТ, который требует развития, план должен включать:

- цель;

- текущее состояние;

- подход к развитию технологии;

- область улучшений;

- план-график работ;

- необходимый бюджет.

На верхнем уровне план должен включать основные действия по доработке КЭТ, предусматривать план-график и необходимый бюджет (включая общие затраты на развитие технологии). План также должен предусматривать возможность отказа от текущей технологии и использование резервной технологии. Для выполнения и управления работами план развития должен быть детализирован.

5.1.12 Примерная структура "Плана развития технологии" приведена ниже:

1 Введение:

- назначение проекта;

- назначение плана развития технологии;

2 Оценка зрелости технологии:

- обзор предыдущих оценок;

- история развития технологии;

- текущая зрелость технологии и состояние проекта по ее развитию;

- управление развитием технологии;

3 План развития элементов технологии:

- подход к разработке требований по развитию технологии;

- план развития технологии для каждого КЭТ:

- КЭТ А:

- ключевые технологии, выполняемые элементом;

- целевое состояние КЭТ;

- текущее состояние;

- подход к развитию технологии;

- план развития (шаги, контрольные точки, УГТ, примерный порядок стоимости разработки);

- КЭТ Б (и т.д. при необходимости);

4 Общий план развития технологии;

5 Суммарный бюджет развития технологии;

6 Ссылки.

5.1.13 ОГТ может выполняться на разных стадиях ее разработки. Обязательным является проведение ОГТ в следующих точках принятия решения о продолжении работ:

а) на стадии замысла в ходе анализа альтернатив перед принятием решения о дальнейшей разработке.

Анализ альтернатив на стадии замысла системы проводится для выявления потенциально применимых технологий с использованием анализа возможных затрат/выгод. Параллельно осуществляется предварительный инженерный анализ потенциальных вариантов систем. Для потенциальных технологий проводится ранняя оценка технологической готовности с использованием технической информации, на основе которой для каждой потенциальной технологии могут быть идентифицированы возможные критические технологии и области критических технологий.

На основании анализа альтернатив, предварительного инженерного анализа и ранней оценки технологической готовности должна быть сформирована стратегия разработки технологии, которая предусматривает необходимый план работ, направленных на демонстрацию технологии в релевантном окружении (УГТ6);

б) на стадии разработки, после завершения фазы разработки технологии, перед принятием решения о начале фазы конструирования и подготовки производства.

Для принятия решения о начале фазы конструирования и подготовки производства рекомендуемый уровень готовности технологии - не ниже УГТ6;

в) на стадии разработки после завершения фазы конструирования и подготовки производства перед принятием решения о начале мелкосерийного (опытного) производства.

Для принятия решения о начале мелкосерийного (опытного) производства рекомендуемый УГТ - не ниже УП7.

5.1.14 Результат ОГТ, а также продолжительность ее проведения в значительной степени зависит от выбора КЭТ. Для определения и выбора КЭТ используется, во-первых, функциональная архитектура, которая обеспечивает реализацию требований по функциональности и производительности, во-вторых, физическая архитектура (дизайн), которая показывает, из каких элементов нижнего уровня (подсистем и компонентов) состоит система. Функциональная архитектура в описательных и количественных терминах определяет возможности системы, с учетом которых задумывается и проектируется физическая архитектура, а впоследствии осуществляется тестирование системы и ее элементов. Физическая архитектура включает оборудование и программное обеспечение, необходимые для реализации замысла системы. На основе физической архитектуры формируются спецификации и техническая иерархическая структура работ (ИСР).

5.1.15 Перечень КЭТ, используемых для оценки, рекомендуется определять на основе технической ИСР, которая:

- всегда доступна при разработке с использованием методов системной инженерии;

- развивается вместе с замыслом системы и ее дизайном;

- включает все продукты, из которых состоит система, и таким образом идентифицирует все технологии, используемые в системе;

- соответствует функциональной архитектуре;

- отражает дизайн и архитектуру системы, окружение и производительность для каждого элемента системы;

- изменяется в течение разработки, следовательно, обновляются старые КЭТ и выявляются новые.

5.2 Оценка готовности производства

5.2.1 ОГП является структурированным, систематическим процессом изучения с точки зрения организации производства технологии и систем с ее применением, компонентов, производственных процессов, который использует УГП в качестве метрики. ОГП используется для оценки и снижения рисков, связанных с организацией и последующим производством для проектов разработки новых технологий. УГП определяют шкалу и единый подход для определения зрелости производства и связанных рисков.

5.2.2 Готовность производства - способность безопасно выполнять функции по конструкторской и технологической подготовке производства, обеспечению качества и выпуску продукции для достижения требуемых заказчику технологии или системы с ее применением уровней производства по количеству и качеству, при заданной целевой себестоимости.

5.2.3 В результате ОГП:

- определяется текущий уровень зрелости производственных процессов;

- выявляются производственные ограничения и связанные с их устранением затраты и риски;

- фиксируется достигнутый уровень для последующего развития производства и управления рисками.

5.2.4 УГТ и УГП являются ключевыми взаимозависимыми метриками, которые измеряют степень риска, связанную со зрелостью технологии и производственного процесса. В общем случае готовность производства определяется готовностью технологии и/или стабильностью дизайна системы с ее применением. Производственные процессы не могут быть достаточно зрелыми до тех пор, пока не достигнута стабильность технологии и дизайна системы.

5.2.5 Шкала УГП состоит из десяти уровней, соответствующих девяти уровням шкалы готовности технологии. Шкала УГП использует следующие уровни от УГП1 до УГП10 (подробное описание см. в приложении Б):

УГП1: Определены основные факторы, влияющие на производство;

УГП2: Определена концепция производства;

УГП3: Подтверждена производственная концепция;

УГП4: Достигнута возможность изготовления технических средств в лабораторных условиях;

УГП5: Достигнута возможность изготовления прототипов компонентов систем в соответствующих производственных условиях;

УГП6: Достигнута возможность изготовления прототипов систем или подсистем в соответствующих производственных условиях;

УГП7: Достигнута возможность изготовления систем, подсистем или их компонентов в условиях, близких к реальным;

УГП8: Испытана пилотная производственная линия, достигнута готовность к началу мелкосерийного производства;

УГП9: Успешно продемонстрирована возможность мелкосерийного производства, подготовлена база для полномасштабного производства;

УГП10: Продемонстрировано полномасштабное производство, внедрена практика бережливого производства.

5.2.6 При оценке УГП важное значение имеют понятия "технологичность" и "возможность изготовления" целевой системы (изделия).

5.2.7 Для обеспечения приемлемой технологичности системы на этапе ее разработки обычно учитывают дополнительные факторы, в том числе:

- проектируют систему с учетом унификации и стандартизации - используют меньшее число компонентов;

- проектируют систему с учетом требований охраны окружающей среды и безопасности;

- проектируют систему с учетом многократного использования, а для военных систем - с учетом "двойного", гражданского применения;

- проектируют систему с учетом модульности и интеграции (совместимости интерфейсов);

- проектируют систему с учетом гибкого/адаптивного использования;

- используют надежные процессы и материалы;

- проектируют систему с учетом технологий производства и сборки;

- достигают доходности производства.

5.2.8 Для обеспечения приемлемой возможности изготовления системы на этапе ее разработки обычно учитывают дополнительные факторы, в том числе:

- проектируют систему с учетом возможностей производственных процессов и измерения параметров;

- выполняют анализ характеристик материалов;

- выполняют анализ вариабельности процессов;

- разрабатывают критические материалы и процессы производства до выбора дизайна системы;

- используют модели и имитационное моделирование для выявления недостатков дизайна системы и процессов производства;

- разрабатывают процессы периодического контроля с обратной связью для критических элементов.

5.2.9 При ОГП используют опросники по следующим девяти направлениям:

A. Производственные технологии и производственная база:

Анализируются возможности производственных технологий и производственной базы по поддержке проектирования, разработки, производства, применения, непрерывной эксплуатационной поддержки целевой системы и ее последующей утилизации.

А1. Производственная база.

А2. Разработка производственной технологии.

Б. Дизайн системы:

Анализируют зрелость и стабильность развития дизайна системы и любые связанные с этим влияния на производственную готовность.

Б1. Возможность изготовления.

Б2. Зрелость дизайна.

B. Затраты и финансирование:

Анализируют возможность при заданном уровне финансирования достичь целевых уровней зрелости производства. Проверяется риск, связанный с достижением целевой производственной себестоимости.

В1. Знание производственных затрат/моделирование затрат.

В2. Анализ затрат.

В3. Производственный инвестиционный бюджет.

Г. Материалы (сырье, компоненты, сборочные комплекты и подсистемы):

Анализируются риски, связанные с материалами, включая сырье, компоненты, полуфабрикаты и сборочные комплекты.

Г1. Зрелость.

Г2. Доступность.

Г3. Управление цепью поставок.

Г4. Материалы с особым обращением (госсобственность, срок жизни, секретность, опасные материалы, особые условия хранения и т.п.).

Д. Возможности и управление процессами производства:

Анализируются риски, связанные с возможностью производственных процессов обеспечить ключевые характеристики дизайна системы (повторяемость и доступность).

Д1. Модели и имитационное моделирование (продукты и процессы).

Д2. Зрелость производственных процессов.

Д3. Доходность процесса и цена.

Е. Управление качеством:

Анализируются риски и усилия менеджмента по контролю качества и содействию непрерывным улучшениям на производстве и у поставщиков.

Е1. Управление качеством, включая качество поставщиков.

Е2. Качество продукции.

Е3. Управление качеством поставщиков.

Ж. Производственный персонал:

Оцениваются требуемые компетенции, доступность и необходимое количество персонала для организации производства.

Ж1. Производственный персонал.

И. Оборудование:

Анализируются возможности и производственные мощности ключевых производственных объектов (основные, субподрядчики, поставщики, производители, ремонтные).

И1. Инструменты, специальное испытательное и измерительное оборудование.

И2. Оборудование.

К. Управление производством:

Анализируется слаженность руководства всеми элементами, необходимыми для создания интегрированной и целенаправленной производственной системы, способной достичь запланированных целей по доступности и наличию.

К1. Производственное планирование.

К2. Планирование материалов.

5.2.10 Рекомендуемый процесс оценки готовности производства состоит из восьми шагов:

1) Определить начальную область оценки;

2) Определить изучаемые вопросы и план-график работ;

3) Сформировать и проинструктировать команду оценки из независимых экспертов;

4) Оповестить производителей, которые будут оцениваться;

5) Запросить производителей выполнить самооценку;

6) Определить задачи для посещения производственных площадок;

7) Выполнить оценку;

8) Подготовить отчет.

5.2.11 Определение начальной области оценки

Область оценки и целевой уровень УГП зависит от стадии жизненного цикла и особенностей проекта. Например, невозможно ожидать одни и те же требования к зрелости производства для единичной или мелкосерийной продукции и массовой продукции. Однако, несмотря на специфические требования, в обоих случаях ожидается демонстрация зрелости производства, гарантирующая, что программа/проект может выполнить требования по затратам, срокам и производительности. Процесс оценки готовности производства должен учитывать уникальность каждого проекта. Например, в ряде случаев проект может не быть эффективным по затратам. При этом важно, что уникальность ситуации должна быть рассмотрена и проанализирована, приняты соответствующее решение и связанные с этим риски.

5.2.12 Определение состава изучаемых вопросов и план-график работ

Состав изучаемых вопросов описывает, что должно оцениваться, где оценка будет происходить и кто будет руководить оценкой.

Руководство проекта совместно с производителем должны на ранней стадии определить потенциальные проблемы. Для этого анализируют уровень системы, подсистем или компонентов и определяют, какие из них следует оценивать. При этом дополнительно учитывают процессы тестирования и сборки.

Для определения элементов, которые требуют оценки, разработан набор вопросов. Все критические элементы технологии и значимые области иерархической структуры работ или спецификации материалов рассматриваются с точки зрения этих вопросов. Утвердительный ответ на любой вопрос означает, что для данного элемента требуется проведение ОГП, так как этот элемент может быть потенциальным источником риска.

- Материалы. Существуют ли материалы, которые не были продемонстрированы в подобных продуктах или производственных процессах?

- Затраты. Влияет ли существенно элемент на затраты на любой из стадий жизненного цикла? Является ли технология новой, с высокой степенью неопределенности затрат?

- Дизайн. Является ли спроектированный элемент новым или содержит нестандартные характеристики?

- Производственный процесс. Будет ли производство элемента требовать использования производственных технологий, процессов, измерений или возможностей, которые не проверены в текущем окружении?

- Качество. Имеет ли элемент исторические/ожидаемые проблемы с производством или качеством?

- Производственный график. Имеет ли элемент проблемы со сроками изготовления или значительно влияет на производственный график?

- Оборудование. Требует ли элемент нового производственного оборудования или масштабирования существующего (новые производственные возможности или производственные мощности)?

- Цепочка поставок. Имеет ли элемент ожидаемые или исторические проблемы с поставками (стоимость, качество, сроки)?

- Производственная база. Имеет ли элемент производственную базу с критическими недостатками или критический элемент имеет эксклюзивного или иностранного поставщика?

Невозможно посетить всех поставщиков каждого материала, компонента и подсистемы, чтобы оценить состояние их ключевых производственных процессов. Некоторые элементы должны быть проинспектированы у производителя, другие могут использовать альтернативные подходы. Тип и глубина оценки определяются потенциальным уровнем риска элемента. Оценку у производителя обычно применяют для элементов, для которых применимо одно или несколько утверждений:

- наивысший процент производственных затрат;

- проводятся финальная сборка и тестирование;

- выполняются наиболее чувствительные производственные задачи;

- производятся материалы, компоненты или подсистемы с наименьшей технологической зрелостью или существуют проблемы с их доступностью;

- известны значительные проблемы или риски (низкая производительность, высокие затраты, незрелые производственные процессы).

План-график оценки определяется различными факторами - ключевыми событиями проекта разработки технологии, доступностью квалифицированных экспертов, соглашениями с производителями и т.д.

Для небольших проектов демонстрации технологии оценка командой из двух или трех человек может занимать один день с посещением одного предприятия. Масштабные проекты могут требовать посещения большого количества предприятий в течение нескольких месяцев и требовать большой команды специалистов, не все из которых посещают каждое предприятие.

5.2.13 Формирование команды оценки

ОГП обычно осуществляется командами экспертов. У основного подрядчика командой оценки обычно руководит представитель заказчика, у субподрядчика - представитель подрядчика. Члены команды должны быть опытными и знающими специалистами в области технологической подготовки производства, производственного оборудования, качества, организации поставок, конструирования систем и продукции. Они должны идентифицировать потенциальные производственные ограничения, риски и возможности технологической и производственной базы осуществлять выпуск продукции. Должны также привлекаться предметные специалисты, которые могут выявлять особенности специализированных производств и продукции.

Команда формируется после определения областей оценки и предварительного плана-графика. В зависимости от масштаба и областей оценки определяются размер и состав команды, при необходимости формируются подкоманды.

Особенное внимание должно уделяться независимости экспертов. Это добавляет доверия оценке, позволяет получить альтернативные точки зрения или мнения специалистов, которые обычно недоступны.

Перед проведением оценки члены команды должны быть ознакомлены с целями и состоянием проекта, КЭТ, критическими производственными процессами, конфигурацией оборудования, ролью и местоположением основных подрядчиков и поставщиков, документами, связанными с ранее выполнявшимися оценками, отчетами о состоянии проекта и т.п.

Дополнительно члены команды оценки должны быть ознакомлены:

- с предварительным планом-графиком оценки;

- форматом и временем предоставления отчетов;

- стандартами поведения на предприятии;

- правилами обеспечения конфиденциальности и безопасности информации;

- персональной зоной ответственности и изучения на предприятии;

- ответственностью после изучения предприятия.

5.2.14 Оповещение производителей об оценке

Руководитель оценки должен проинформировать производителя о предстоящей оценке и предоставить информацию:

- о критериях УГП и изучаемых в рамках оценки направлениях;

- о вопросах для самооценки;

- о ключевых технологиях или процессах, представляющих интерес для оценки.

В случае посещения предприятия командой оценки дополнительно предоставляется следующая информация:

- планируемый план посещения;

- вопросы, которые планирует использовать команда оценки;

- документы и факты, которые должны быть предоставлены во время посещения (карты процессов, предполагаемый план производства, данные о возможностях производственных процессов, данные о предполагаемом объеме выпуска, план разработки технологии, планы снижения рисков, анализ потоков создания стоимости и т.д.);

- области, представляющие особый интерес для посещения производственных участков и обсуждения со специалистами предприятия;

- предположительные оценки ресурсов и времени, необходимых для проведения оценки.

Дополнительно с представителями предприятия обсуждается вопрос предоставления помещения, оснащенного необходимым для работы команды оценки оборудованием.

5.2.15 Проведение самооценки

Руководитель команды оценки должен запросить у производителя проведение самооценки для ответа на следующие основные вопросы:

- Какой УГП достигнут каждой из разрабатываемых ключевых технологий и каждым используемым ключевым производственным процессом?

- Если финансирование продолжится, как запланировано, какой уровень УГП будет достигнут для каждой ключевой технологии или производственного процесса к заданному времени? Какие действия согласно плану необходимо выполнить, чтобы достичь заданного уровня УГП?

- Какой уровень УГП будет достаточным в случае демонстрации технологии или концепции технологии, чтобы соответствовать первоначальному варианту продукта?

Результаты самооценки рассматриваются командой оценки и при посещении предприятия обсуждаются с его представителями.

5.2.16 Определение задач при посещении производственных площадок

Руководитель команды оценки должен разработать программу посещения и проинформировать о ней руководство посещаемого предприятия и команду оценки. Обычно в программу посещения включают следующие вопросы:

- встреча с руководством предприятия, обзор программы посещения, график работы и схемы производственной площадки;

- инструктаж команды оценки по правилам безопасности и соблюдения конфиденциальности;

- знакомство команды оценки с персоналом предприятия, привлекаемого к оценке;

- информирование предприятия о целях и ожиданиях от посещения;

- обзор и обсуждение результатов самооценки;

- индивидуальное или в составе небольших групп посещение производственных участков;

- обсуждение один на один или в составе небольших групп команды оценки и экспертов предприятия ключевых областей производства;

- закрытое совещание команды оценки для записи и обсуждения увиденного;

- заключительное совещание с руководством предприятия.

5.2.17 Выполнение оценки проводится в три этапа:

1) Обзор результатов самооценки

Команда проекта должна провести обсуждение процессов производства компонентов, испытаний и/или сборки с учетом их сложности, мест выполнения, доступности персонала и т.п. На больших предприятиях оценку технологий, сборочных комплектов, подсистем, процессов назначают отдельным членам команды или группам. Определяется зрелость производства согласно УГП. Руководитель оценки должен рассмотреть результаты самооценки и с учетом направлений оценки проверить уровень готовности целевых компонентов, подсистем и систем, процессов испытаний и сборки.

2) Непосредственное выполнение оценки

Для выполнения оценки готовности производства должна быть разработана иерархия оцениваемых элементов. Иерархия должна начинаться на уровне системы и опускаться до уровня элементов, подлежащих оценке. Команда оценки должна определить направления оценки, применимые для каждого элемента в иерархии, уровень системы, процессы испытаний и сборки, которые требуют оценки УГП. Также в оценку включают шаги испытаний и сборки, которые выполняются при производстве подсистем или компонентов.

Во время процесса оценки может быть обнаружено, что компонент или подсистема являются более сложными, чем предполагалось. В этом случае выполняется более глубокий анализ.

Команда оценки должна выявлять текущую, объективную документацию, которая подтверждает результаты оценки в ключевых областях. Особое внимание в ходе оценки должно уделяться рискам, влияющим на готовность производства компонентов и/или подсистем. Также команда оценки должна оценивать действия, необходимые для повышения уровня готовности до требуемого значения.

3) Завершение оценки

Производитель должен предоставить всю необходимую информацию, подтверждающую оценку в ключевых областях. Если такая информация не может быть предоставлена во время оценки, она должна быть предоставлена до согласованной даты.

Ближе к концу оценки должно быть проведено обсуждение ее результатов.

УГП технологии или системы назначается в соответствии с наименьшим уровнем готовности ее элементов.

Команда оценки должна предоставить краткую оценку сильных сторон и возможных рисков, достигнутый уровень УГП в сравнении с целевым и необходимые дальнейшие шаги.

5.2.18 Подготовка отчета

По результатам оценки должен быть оформлен отчет. За исключением простейших случаев, отчет оформляется после посещения предприятия, так как выводы требуют дополнительного анализа и изучения. В отчете обычно отражается следующая информация:

- описание технологии, компонента, подсистемы или системы, в которые входят элементы, определенные для оценки, ключевые цели и действия по их разработке, оценка текущего состояния;

- описание предприятий, ответственных за разработку и производство элементов, которые оценивались;

- состав команды оценки;

- даты и место посещения предприятия;

- описание процесса производства для элементов, которые оценивались;

- уровень готовности производства для каждого оцениваемого элемента;

- области, в которых производственная готовность не соответствует целевому уровню УГП с указанием ключевых факторов и описанием проблем;

- план действия по достижению целевого уровня УГП;

- оценка рисков и их влияние на затраты, график производства или производительность;

- оценка эффективности текущих планов по снижению и предотвращению рисков (указывает на правильные проблемы, учитывает сроки, адекватно финансируется, вероятность успеха, возможности для повышения эффективности).

5.2.19 Разработка "Плана развития производства"

Ключевым результатом выполненной оценки зрелости производства является "План развития производства", в котором учитываются все выявленные в ходе оценки области риска. "План развития производства" должен предоставляться совместно с результатами ОГП.

Примерная структура "Плана развития производства":

- Заголовок;

- Описание проблемы:

- описание оцениваемого элемента и его уровень готовности;

- описание, как этот элемент должен использоваться в системе;

- описание областей, в которых уровень готовности производства не соответствует целевому, включая ключевые факторы и основные проблемы;

- оценка типа и значимости риска, его влияние на затраты, график производства и производительность;

- Предпочтительный вариант решения проблемы:

- выгоды от использования предложенного варианта;

- возможные проблемы и их последствия;

- План развития производства с графиком и оценкой возврата инвестиций;

- Ключевые действия для предпочтительного варианта;

- Подготовительные действия для использования альтернативного варианта;

- Время, не позднее которого может быть выбран альтернативный вариант;

- Статус финансирования для выполнения производственного плана;

- Конкретные меры (что будет сделано, когда и кем);

- Прототипы или тестовые образцы, которые должны быть построены;

- Испытания, которые должны быть проведены (включая описание, как тестовое окружение соответствует производственному);

- Производительность, которая должна быть достигнута;

- Когда и какого уровня готовности производства планируется достичь.

5.3 Оценка готовности интеграции

5.3.1 ОГИ является структурированным, систематическим процессом попарного изучения технологий с целью их совместного применения в рамках единой системы или системы систем, который использует УГИ в качестве метрики. Оценка готовности интеграции используется для оценки и снижения рисков, связанных с совместным использованием двух отдельных технологий и компонентов с их применением в составе единой системы. УГИ определяют шкалу и единый подход для определения зрелости интеграции между двумя технологиями из состава единой системы и связанных рисков.

5.3.2 Готовность интеграции - метрика, описывающая зрелость механизмов интеграции в составе единой системы одной развивающейся технологии с другой развивающейся или развитой технологией, которая учитывает интерфейсы, способность взаимодействовать, совместимость, надежность, качество, производительность и семантическую целостность интегрируемых технологий.

5.3.3 УГИ является метрикой, дополняющей метрику УГТ, которая оценивает уровень развития отдельной технологии, но не позволяет адекватно оценивать риски, связанные с интеграцией двух и более технологий в составе единой системы или системы систем. По мере роста сложности систем требуется метрика, оценивающая потенциал интеграции различных технологий. Метрика УГИ показывает не только, где на шкале готовности интеграции находится технология, но и направление улучшения ее интеграции с другими технологиями.

5.3.4 Шкала УГИ состоит из девяти уровней, соответствующих шкале готовности технологии. Шкала УГИ использует следующие уровни от УГИ1 до УГИ9 для двух совместно используемых и взаимодействующих в составе единой системы технологий (подробное описание см. в приложении Б):

УГИ1: Интерфейс между технологиями определен с детализацией, достаточной для дальнейшего проектирования взаимодействия;

УГИ2: Определена спецификация, характеризующая взаимодействие (способность оказывать влияние) между технологиями через интерфейс;

УГИ3: Достигнута совместимость (общий язык) технологий, позволяющая обеспечить их упорядоченную и эффективную интеграцию и взаимодействие;

УГИ4: Достигнуто качество взаимодействия и гарантируется интеграция между технологиями;

УГИ5: Достигнут достаточный уровень управления технологиями, чтобы устанавливать, поддерживать и прекращать взаимодействие;

УГИ6: Интегрируемые технологии могут принять, преобразовать и структурировать информацию по назначению;

УГИ7: Интеграция технологий была проверена и испытана с достаточной для использования степенью детализации;

УГИ8: Реальная интеграция завершена и проверена испытаниями и демонстрацией в составе системы;

УГИ9: Возможность интеграции проверена в применении.

5.3.5 Так как уровень готовности интеграции является вспомогательной метрикой, ее оценка должна осуществляться совместно с оценкой готовности технологии в случае необходимости.

5.3.6 Оценка готовности интеграции влияет на включение элементов технологии в состав КЭТ, которые подлежат обязательной оценке при оценке зрелости технологии.

5.3.7 "План развития интеграции" как отдельный документ создавать не обязательно, соответствующие работы и финансирование могут быть предусмотрены в плане развития соответствующих технологий. В случае, если затраты, сроки и риски, связанные с интеграцией технологий в составе системы, являются значительными, рекомендуется разрабатывать "План развития интеграции", координирующий развитие соответствующих интегрируемых в составе единой системы технологий.

5.4 Оценка готовности системы

5.4.1 ОГС является структурированным систематическим процессом изучения зрелости системы на основе совместного изучения уровня зрелости технологий, интегрированных в единую систему, и уровня зрелости интеграции отдельных технологий между собой. ОГС в качестве метрики использует УГС. ОГС используется для оценки и снижения рисков, связанных с совместным использованием отдельных технологий и компонентов с их применением в составе единой системы или системы систем. УГС определяют шкалу и единый подход для определения зрелости конкретной системы на разных стадиях ее жизненного цикла и связанных рисков.

5.4.2 УГС является производной оценкой, зависящей от УГТ, входящих в состав единой системы, и УГИ соответствующих взаимодействующих пар технологий. Для ОГС предварительно должны быть выполнены ОГТ и ОГИ всех или КЭТ, входящих в состав системы.

5.4.3 Шкала УГС состоит из пяти уровней. Для определения УГС по алгоритму, описанному ниже, рассчитывается индекс от 0 до 1. Шкала УГС использует следующие уровни от УГС1 до УГС5 с соответствующими значениями индекса (подробное описание см. в приложении Б):

УГС1: Уточнение концепции (индекс 0.10-0.39);

УГС2: Разработка технологии (индекс 0.40-0.59);

УГС3: Разработка и демонстрация системы (индекс 0.60-0.79);

УГС4: Производство системы (индекс 0.70-0.89);

УГС5: Применение и поддержка системы (индекс 0.90-1.00).

5.4.4 Для расчета индекса и определения соответствующего УГС используется следующий алгоритм.

5.4.4.1 Для каждой технологии (подсистемы) i, подлежащей оценке в составе системы, согласно 5.1 определяется уровень готовности технологии УГТ_i, который заносится в матрицу УГТ размерностью n х 1, где n - количество рассматриваемых технологий (подсистем).

.

(1)

Рекомендуется рассматривать не более десяти технологий (подсистем).

5.4.4.2 Для каждой оцениваемой пары технологий (подсистем) i и j согласно 5.3 определяется уровень готовности интеграции УГИ_ij от 1 до 9 и заносится в симметричную квадратную матрицу УГИ размерностью n х n для последующей оценки готовности системы, где n - количество рассматриваемых технологий (подсистем). Значение УГИ_ij равно значению УГИ_ji. Любая технология (подсистема) полностью интегрирована сама с собой, поэтому для УГИ_ij, где i равно j, значение УГИ_ij равно 9. В случае, если i и j технологии (подсистемы) не взаимодействуют друг с другом, значение УГИ_ij равно 0.

.

(2)

5.4.4.3 На основании матриц УГТ (5.4.4.1) и УГИ (5.4.4.2) со значениями в интервале от 1 до 9 рассчитываются нормализованные матрицы УГТ и УГИ со значениями в интервале от 0 до 1, для чего каждое значение исходных матриц делится на 9.

5.4.4.4 На основании нормализованных матриц УГТ и УГИ со значениями в интервале от 0 до 1, полученных в 5.4.4.3, рассчитывается матрица УГС размерностью n х 1, где n - количество рассматриваемых технологий (подсистем).

,

(3)

.

(4)

Матрица УГС состоит из одного элемента для каждой оцениваемой технологии (подсистемы), который с точки зрения системы в целом показывает уровень готовности к использованию в системе конкретной технологии (подсистемы) по отношению к другим оцениваемым для данной системы технологиям (подсистемам). Чем выше значение элемента, тем выше уровень готовности к использованию соответствующей технологии (подсистемы). Значения элементов матрицы УГС для оцениваемой системы могут использоваться для определения приоритетов развития той или иной технологии (подсистемы).

5.4.4.5 В целом УГС рассчитывается как среднее значение от нормализованных величин УГС_n, полученных в 5.4.4.4 и разделенных на m_i - количество j технологий (подсистем) из матрицы УГИ, взаимодействующих с i-й технологией (подсистемой) с учетом интеграции технологии (подсистемы) самой с собой, когда j равно i [количество значений УГИ_ij в нормализованной матрице (см. 5.4.4.2), не равных 0].

.

(5)

5.4.4.6 Нормализованное значение УГС (индекс), полученное в 5.4.4.5, сравнивается со шкалой в соответствии с приложением Г. В зависимости от значения УГС делается вывод о достигнутой зрелости системы.

5.4.5 Так как УГС является вспомогательной метрикой, ее оценка должна осуществляться совместно с ОГТ и ОГИ в случае необходимости.

5.4.6 Для проведения ОГС необходимо выполнить следующие шаги:

- разработать функциональную и физическую архитектуру системы;

- определить критические элементы технологии в составе единой системы;

- организовать процесс ОГС с участием разработчиков и независимой команды экспертов;

- провести ОГС с использованием метрики УГС согласно 5.4.4;

- определить УГТ;

- определить УГИ;

- рассчитать УГС;

- подготовить Отчет о проведенной оценке с выводами и рекомендациями.