Национальный стандарт РФ ГОСТ Р МЭК 61069-8-2017 "Измерение, управление и автоматизация промышленного процесса. Определение свойств системы с целью ее оценки. Часть 8. Оценка других свойств системы" (утв. и введен в действие приказом Федерального агентства по техническому регулированию и метрологии от 7 ноября 2017 г. N 1654-ст)

Национальный стандарт РФ ГОСТ Р МЭК 61069-8-2017
"Измерение, управление и автоматизация промышленного процесса. Определение свойств системы с целью ее оценки. Часть 8. Оценка других свойств системы"
(утв. и введен в действие приказом Федерального агентства по техническому регулированию и метрологии от 7 ноября 2017 г. N 1654-ст)

Industrial-process measurement, control and automation. Evaluation of system properties for the purpose of system assessment. Part 8. Assessment of other system properties

ОКС 25.040.40

Дата введения - 1 сентября 2018 г.
Взамен ГОСТ Р МЭК 61069-8-2012

Предисловие

1 Подготовлен Негосударственным образовательным частным учреждением дополнительного профессионального образования "Новая Инженерная Школа" (НОЧУ "НИШ") на основе собственного перевода на русский язык англоязычной версии указанного в пункте 4 стандарта, который выполнен Российской комиссией экспертов МЭК/ТК 65 и Федеральным государственным унитарным предприятием "Всероссийский научно-исследовательский институт стандартизации (ВНИИНМАШ)

2 Внесен Техническим комитетом по стандартизации ТК 306 "Измерения и управление в промышленных процессах"

3 Утвержден и введен в действие Приказом Федерального агентства по техническому регулированию и метрологии от 7 ноября 2017 г. N 1654-ст

4 Настоящий стандарт идентичен международному стандарту МЭК 61069-8:2016 "Измерение, управление и автоматизация промышленного процесса. Определение свойств системы с целью ее оценки. Часть 8. Оценка других свойств системы" (IEC 61069-8:2016 "Industrial-process measurement, control and automation - Evaluation of system properties for the purpose of system assessment - Part 8: Assessment of other system properties", IDT).

При применении настоящего стандарта рекомендуется использовать вместо ссылочных международных стандартов соответствующие им национальные стандарты, сведения о которых приведены в дополнительном приложении ДА

5 Взамен ГОСТ Р МЭК 61069-8-2012

Введение

В МЭК 61069 рассматривается метод, который следует использовать для оценки системных свойств основной системы управления (ОСУ). МЭК 61069 состоит из следующих частей:

часть 1. Терминология и основные концепции;

часть 2. Методология оценки;

часть 3. Оценка функциональности системы;

часть 4. Оценка производительности системы;

часть 5. Оценка надежности системы;

часть 6. Оценка эксплуатабельности системы;

часть 7. Оценка безопасности системы;

часть 8. Оценка других свойств системы.

Оценка системы - основанное на доказательстве суждение о пригодности системы для определенного целевого назначения или класса целевых назначений.

Для получения полного итогового доказательства потребовалось бы полное (т.е. при всех влияющих факторах) определение пригодности всех свойств системы для конкретного целевого назначения или класса целевых назначений.

Так как на практике это требуется редко, для оценки системы более рациональным будет:

- определить критичность соответствующих свойств системы;

- спланировать определение (оценку) соответствующих свойств системы на основе экономического принципа "цена - целесообразность" для усилий по реализации этих свойств.

При проведении оценки системы следует стремиться к получению максимальной обоснованности пригодности системы с учетом целесообразной стоимости и ограничений по времени.

Оценка может быть выполнена только в том случае, если целевое назначение (миссия) сформулировано (или задано), или если оно может быть представлено гипотетически. В случае отсутствия миссии оценка не может быть выполнена. Тем не менее, возможно определение свойств системы в части сбора и систематизации данных для последующей оценки, проводимой другими лицами. В таком случае настоящий стандарт может применяться как руководство для планирования, а также устанавливает процедуры определения свойств системы, являющиеся неотъемлемой частью оценки системы.

При подготовке к оценке может быть установлено, что определение границ системы является слишком узким. Например, для средства с двумя или более версиями совместного пользования системы управления, например сети, необходимо учитывать вопросы сосуществования и функциональной совместимости. В этом случае система, подлежащая оценке, не должна ограничиваться "новыми" ОСУ. Такая система должна включать в себя как "новые", так и "старые" системы. То есть, система должна изменять свои границы, чтобы включать в себя достаточный объем другой системы для решения требуемых от нее задач.

Структура настоящей части и ее взаимосвязь с другими частями МЭК 61069 показаны на рисунке 1.

Рисунок 1 - Общий состав МЭК 61069

Некоторые примеры элементов оценки объединены в приложении С.

1 Область применения

Настоящий стандарт:

- устанавливает детальный метод оценки других системных свойств основной системы управления (ОСУ) на основании общих концепций, данных в МЭК 61069-1, и методологии, приведенной в МЭК 61069-2;

- устанавливает основную классификацию других свойств системы;

- описывает факторы, влияющие на другие свойства системы, и которые необходимо учитывать при оценке других свойств системы; и

- предоставляет руководство по выбору методов из набора вариантов (с нормативными ссылками) для определения других свойств системы.

2 Нормативные ссылки

В настоящем стандарте использованы нормативные ссылки на следующие стандарты. Для датированных ссылок применяют только указанное издание ссылочного стандарта. Для недатированных ссылок применяют последнее издание ссылочного стандарта (включая все изменения к нему).

IEC 61069-1:2016, Industrial-process measurement, control and automation - Evaluation of system properties for the purpose of system assessment - Part 1: Terminology and basic concepts (Измерение и управление промышленным процессом. Определение свойств системы с целью ее оценки. Часть 1. Общие подходы и терминология)

IEC 61069-2:2016, Industrial-process measurement, control and automation - Evaluation of system properties for the purpose of system assessment - Part 2: Assessment methodology (Измерение и управление промышленным процессом. Определение свойств системы с целью ее оценки. Часть 2. Методология оценки)

3 Термины, определения, обозначения и сокращения

3.1 Термины и определения

В настоящем стандарте применены термины по МЭК 61069-1.

3.2 Обозначения и сокращения

В настоящем стандарте применены обозначения и сокращения по МЭК 61069-1.

4 Основы оценки, имеющие отношение к другим системным свойствам

4.1 Другие свойства системы

4.1.1 Общие положения

Свойства, не рассмотренные в МЭК 61069-3 - МЭК 61069-7, сгруппированы в категорию "другие свойства системы".

Это свойства, относящиеся к различным областям, или свойства, которые не могут быть непосредственно связаны с любой задачей или функцией.

Однако данная категория других свойств системы важна для эффективного использования системы и обеспечения ее целевого назначения в течение всех этапов ее жизненного цикла, а именно установки, эксплуатации, вывода из эксплуатации, утилизации.

Классификация других свойств системы приведена на рисунке 2.

Рисунок 2 - Другие свойства системы

Другие свойства системы не могут быть оценены непосредственно и описаны по одному свойству. Другие свойства системы могут определяться только при помощи анализа и испытания каждого свойства по отдельности.

Способность перечислить характеристики в рамках других свойств системы позволяет произвести разработку этих свойств, если это требуется.

4.1.2 Обеспечение качества

ОСУ, как правило, разрабатываются, проектируются, конструируются и конфигурируются с использованием системы модулей и элементов, которые могут иметь единственного изготовителя, или частично могут быть получены от других изготовителей.

При условии, что системные свойства соответствуют описанию в МЭК 61069, ожидается, что ОСУ будет способна выполнять требуемые от нее задачи.

Ожидается, что данная способность будет сохраняться на протяжении всего жизненного цикла ОСУ.

Крайне важно, чтобы соответствующие процедуры использовались в создании системы для обеспечения ее качества, в целом.

Таким образом, ожидается, что будет использована надежная программа обеспечения качества для создания и сопровождения ОСУ на протяжении всего ее жизненного цикла.

Учитывая, что в создании ОСУ могут участвовать несколько изготовителей, должна быть оценена одна или несколько программ обеспечения качества.

Рекомендации по тем положениям, к которым следует обратиться в руководстве по обеспечению качества, даются в серии стандартов ИСО 9000 по вопросам управления и обеспечения качества - ИСО 9001 и приложении В. Руководство по безотказности изделия приведено в МЭК 60300-2.

Неотъемлемой частью ОСУ может быть программное обеспечение.

Примечание - Руководство по действиям, связанным с программным обеспечением, приводится в стандартах ИСО/МЭК 12207 и ИСО/МЭК 9126.

Особое внимание следует уделить системе управления внесением изменений для гарантии соответствия между всеми версиями средств автоматизации, программного обеспечения и системы поддержки документации.

Важно, чтобы в целом система обеспечения качества содержала определенные меры по координации и учету изменений различными изготовителями, ответственными за правильную работу системы, в течение ее жизненного цикла.

4.1.3 Поддержка системы

4.1.3.1 Общие положения

Поддержка системы требуется на всех этапах жизненного цикла ОСУ.

Цели поддержки системы состоят в том, чтобы увеличить доверительность пользователя к системе, которая содержится на необходимом уровне, и обладает требуемым уровнем качества, на которое способна система.

На каждом из этапов жизненного цикла системы важны следующие аспекты поддержки системы:

- техническое обслуживание;

- эксплуатационное обслуживание;

- документация;

- обучение.

Обстоятельства могут диктовать, как и кем должна обеспечиваться поддержка системы.

4.1.3.2 Техническое обслуживание

Техническое обслуживание может включать:

- информационные услуги, например, по вопросам спецификации, обновлений, новой техники или методов, инструкций по применению;

- проектирование и инжиниринговые услуги;

- услуги по вводу в эксплуатацию, например, установка, пуско-наладочные работы, пуск в работу и т.д.

Степень важности этого технического обслуживания изменяется от одного этапа жизненного цикла системы к другому.

4.1.3.3 Эксплуатационное обслуживание

Эксплуатационное обслуживание может включать в себя:

- обслуживание на месте эксплуатации системы (например, обновление программных и программно-аппаратных средств);

- удаленное обслуживание (например, диагностика, контроль, ремонт/обновление программного обеспечения);

- запасные части, и т.д.

Уровень важности эксплуатационного обслуживания изменяется от одного этапа жизненного цикла системы к другому.

4.1.3.4 Документация

Документация может содержать:

- спецификации, например: функциональные спецификации, спецификации соединений, рабочие спецификации;

- спецификации надежности;

- инструкции, например: инструкции по установке, эксплуатации, обслуживанию;

- руководства, например, по применению;

- описания, например, подробный отчет о том, как система в целом выполняет задачи, и т.д.

Документация может быть выполнена на различных носителях, например, таких как бумага, диски, сеть. Требуемые материалы и методы для представления данных, зависят от потребностей различных групп потребителей, работающих с системой на различных этапах ее жизненного цикла.

ДТС может также включать в себя особые требования к форматам электронной документации и баз данных системы. В этом случае соответствие этим требованиям образует часть общей оценки.

МЭК 60300-3-10 представляет руководство по поддержке обслуживания.

МЭК 61082 дает общую информацию относительно документации, используемой в электронном виде.

МЭК 61346 содержит правила и руководство для однозначной идентификации конкретных объектов любых систем, с целью возможности выявления связанной информации об объекте среди различных видов документов и изделий, реализующих систему.

МЭК 61506 содержит информацию по документации прикладного программного обеспечения.

4.1.3.5 Обучение

Специальное обучение особенно важно для всех специалистов, которые обязаны эффективно применять систему, для выполнения задач, требуемых целевым назначением системы, как это изложено в подразделе 4.1 МЭК 61069-6:2016.

Цель обучения состоит в том, чтобы персонал обладал знаниями и навыками, необходимыми для выполнения стоящих перед ним задач, которые являются частью целевого назначения всей системы. Для обеспечения эффективности, обучение следует ориентировать как на коллективные, так и на индивидуальные потребности.

В программах обучения следует предусмотреть совершенствование навыков и повышение уровня знаний, необходимых для выполнения задач, которые должны достигаться на каждом этапе жизненного цикла.

Руководство по различным аспектам такого обучения приведено в приложении О.

Требования к навыкам и знаниям должны, по крайней мере, охватывать вопросы:

- установки системы;

- конфигурирования;

- верификация правильности;

- функционирования;

- поддержки системы.

Обучение может проводиться, например:

- преподавателем: проводится инструктором;

- самостоятельно: проводится самим обучающимся персоналом;

- непосредственно на рабочем месте, что продиктовано необходимостью изучения работы с задачей (задачами).

Эти методы обучения могут быть объединены, например, с обучением на учебных тренажерах или автоматическим курсом практических занятий.

4.1.4 Совместимость

Совместимость - свойство системы, которое поддерживает взаимодействие в пределах системы (внутренняя совместимость) и взаимодействие системы с внешними системами (внешняя совместимость).

Совместимость обеспечивается с помощью определенных интерфейсов, разработанных на основе строгих правил и протоколов. Они изложены, например:

- в международных и национальных стандартах;

- в действующих де-факто стандартах, например, ТСР/IP или других широко используемых на практике промышленных стандартах;

- в фирменных, корпоративных стандартах, которые могут быть, как опубликованными, так и не опубликованными, и т.д.

Совместимость обеспечивает:

- замену элементов и модулей различных поставщиков;

- способность к взаимодействию между различными системами;

- поддержку применения прогрессивных технологий.

Примечание - Даже если совместимость обеспечена, тем не менее, могут потребоваться дополнительные шаги, которые должны быть предприняты для обеспечения требуемой поддержки, например, адаптации к новой операционной системе.

Совместимость может существовать на различных уровнях в иерархии системы или в таких областях как:

- коммуникационные линии связи;

- линии связи между модулями программного обеспечения;

- линии связи между компонентами средств автоматизации;

- человеко-машинный интерфейс;

- форматы электронной документации и баз данных системы.

К совместимости можно также отнести простое подключение оборудования аппаратного обеспечения к общей системе.

4.1.5 Физические свойства

Физические свойства системы следует рассматривать с учетом ограничений, которые наложены условиями применения. Физические свойства, которые следует рассматривать, включают:

- вес;

- размер (и место, требуемое для обслуживания);

- вибрацию;

- расход (например, воздуха, жидкости гидросистемы и/или потребление электроэнергии);

- отвод тепла;

- эмиссию (например, света, шума, ультрафиолетового излучения, инфракрасного или любого другого электромагнитного излучения).

Некоторые из этих свойств могут также иметь значение для безопасности системы, которое рассмотрено в МЭК 61069-7.

4.2 Факторы, влияющие на другие свойства системы

На другие свойства системы могут оказать воздействие влияющие факторы, перечисленные в подразделе 5.3 МЭК 61069-1:2016.

Для каждого из свойств, перечисленных в подразделе 4.1, основными влияющими факторами являются следующие:

- нет дополнительных пунктов для данного свойства.

5 Метод оценки

5.1 Общие положения

Оценку следует проводить в соответствии с методологией, приведенной в разделе 5 МЭК 61069-2:2016.

5.2 Определение целей оценки

Определение цели оценки следует проводить в соответствии с процедурами, приведенными в подразделе 5.2 МЭК 61069-2:2016.

5.3 Проектирование и схема оценки

Проектирование и схему оценки следует выполнять в соответствии с процедурами, приведенными в подразделе 5.3 МЭК 61069-2:2016.

Определение объема оценки следует проводить в соответствии с 5.3.1 МЭК 61069-2:2016.

Сопоставление документированной информации следует проводить в соответствии с 5.3.3 МЭК 61069-2:2016.

Заключения, сформулированные в соответствии с 5.3.3 МЭК 61069-2, должны содержать следующую информацию в дополнение к пунктам, перечисленным в 5.3.3 МЭК 61069-2:2016:

- нет дополнительных пунктов для данного свойства.

Документирование информации для сопоставления следует проводить в соответствии с 5.3.4 МЭК 61069-2.

Выбор элементов оценки должен производиться в соответствии с 5.3.5 МЭК 61069-2:2016.

Спецификация оценки должна быть разработана в соответствии с 5.3.6 МЭК 61069-2:2016.

Сравнение ДТС и ДСС следует проводить в соответствии с подразделом 5.3 МЭК 61069-2.

Примечание 1 - Контрольный перечень ДТС для определения надежности системы приведен в приложении А.

Примечание 2 - Контрольный перечень ДСС для определения надежности системы приведен в приложении В.

5.4 Планирование программы проведения оценки

Планирование программы проведения оценки следует выполнять в соответствии с процедурами, приведенными в подразделе 5.4 МЭК 61069-2:2016.

Действия по оценке должны быть разработаны в соответствии с 5.4.2 МЭК 61069-2:2016.

В итоговой программе проведения оценки следует определить пункты, перечисленные в 5.4.3 МЭК 61069-2:2016.

5.5 Проведение оценки

Оценки следует проводить в соответствии с подразделом 5.5 МЭК 61069-2:2016.

5.6 Отчет об оценке

Отчет об оценке следует оформлять в соответствии с подразделом 5.6 МЭК 61069-2:2016.

Отчет должен содержать информацию, приведенную в подразделе 5.6 МЭК 61069-2:2016. Дополнительно отчет по оценке должен включать в себя следующие пункты:

- дополнительные пункты не отмечены.

6 Методы определения свойств

6.1 Общие положения

В настоящем стандарте предложено несколько методов для определения свойств. Могут применяться и другие методы, однако в этом случае в отчете об оценке следует указывать ссылки на документы, в которых описано применение таких методов.

Данные методы определения свойств сгруппированы согласно требованиям, установленным в разделе 6 МЭК 61069-2:2016.

Необходимо учитывать факторы, влияющие на ДСС в соответствии с подразделом 4.2.

Методы, указанные в подразделах 6.2, 6.3 и 6.4, рекомендованы для оценки других свойств системы.

Примечание - Пример перечня пунктов оценки приведен в приложении С.

6.2 Аналитические методы определения свойств

6.2.1 Анализ свойства обеспечения качества

Анализ свойства обеспечения качества (ОК) может быть выполнен аналитически посредством проведения аудита качества.

Аудит качества, в основном, устанавливает:

- завершенность руководства по обеспечению качества;

- меры по обеспечению качества;

- результаты этих мер, отмеченные в течение жизненного цикла системы.

- наличие соглашения между поставщиком и пользователем по системе обеспечения качества, которую надлежит применять.

ИСО 19011 определяет руководство по выполнению аудита, содержит критерии для квалификации аудиторов и руководство по управлению аудитами. Важно, чтобы:

- поставщик имел сертифицированную систему обеспечения качества;

- для оцениваемой системы был назначен менеджер по качеству и т.д.

В приложении Е в качестве примера приведены показатели, применяемые для оценки свойства обеспечения качества системы ОСУ.

6.2.2 Анализ свойства поддержки системы

Анализ свойства поддержки системы может быть выполнен аналитически прямым сравнением ДТС и ДСС в соответствии с разделом 5.

Анализ свойства поддержки системы, особенно сказывающейся на повышении уровня доверительности, может быть получен, исходя из прежнего опыта работы с поставщиком.

6.2.3 Определение свойств совместимости

Определение свойства совместимости может быть выполнено аналитически на основании рассмотрения внутренних и внешних интерфейсов, как это указано в 4.1.4.

Рекомендуется, чтобы все внутренние и внешние интерфейсы были идентифицированы и установлены на уровне элемента, модуля, устройства и системы, включая любые требования соответствия форматам документации или данных, со ссылкой на соответствующие используемые стандарты.

В качестве признака уровня совместимости применяемые стандарты обычно могут ранжироваться в следующем нисходящем порядке:

- международные и национальные стандарты;

- стандарты де-факто;

- корпоративные стандарты и т.д.

Тем не менее, другие конкретные соображения могут изменить ранжирование. В некоторых случаях предпочтителен более низкий уровень стандартизации, например, корпоративный стандарт будет иметь безоговорочное преимущество над международным стандартом, когда система должна войти в качестве составной части в состав уже существующей системы. Кроме того, различные интерфейсы могут иметь изменяющуюся важность для достижения целевого назначения или для работы в предполагаемой окружающей среде.

Как показано в приложении F, для оценивания совместимости может быть предложена специальная матричная таблица.

В каждой ячейке матрицы приводится комбинация ранг интерфейса и используемый стандарт. Этот анализ может быть поддержан опытом испытаний от проверки простого разъема до всесторонних испытаний всего аппаратно-программного комплекса системы.

6.2.4 Определение физических свойств

Определение физических свойств может быть выполнено аналитически путем прямого сравнения данных ДТС и ДСС в соответствии с разделом 5.

Большинство физических свойств не будет иметь большого значения, если они не превышают пределы, установленные заказчиком или в международных или национальных стандартах.

Некоторые из свойств могут потребовать ранжирования в соответствии с основным правилом, таким как "чем ниже, тем лучше".

Для определения свойств, подлежащих оценке, может быть проведено аналитическое исследование перечня значений физических свойств из ДСС и данных ранжирования каждого из этих значений.

6.3 Эмпирические методы определения свойств

6.3.1 Определение свойства поддержки систем

При рассмотрении документации, касающейся вопросов поддержки системы и обучения, можно применять эмпирическую проверку некоторых типовых репрезентативных образцов.

6.3.2 Определение свойств совместимости

Как показано в приложении F, для оценки совместимости может быть предложена матрица.

В каждой ячейке матрицы приводится комбинация ранг интерфейса и используемый стандарт. Этот анализ может быть поддержан опытом испытаний от проверки простого разъема до всесторонних испытаний всего аппаратно-программного комплекса системы.

6.4 Дополнительные вопросы методов определения свойств

Дополнительные пункты не отмечены.

Библиография

[1]	IEC 60300-2, Dependability management - Part 2: Dependability programme elements and tasks 1)

------------------------------

¹⁾_{Данная публикация отменена.}

------------------------------

[2]	IEC 60300-3-10, Dependability management - Part 3-10: Application guide - Maintainability
[3]	IEC 61069-3:2016, Industrial-process measurement, control and automation - Evaluation of system properties for the purpose of system assessment - Part 3: Assessment of system functionality
[4]	IEC 61069-4:2016, Industrial-process measurement, control and automation - Evaluation of system properties for the purpose of system assessment - Part 4: Assessment of system performance
[5]	IEC 61069-5:2016, Industrial-process measurement, control and automation - Evaluation of system properties for the purpose of system assessment - Part 5: Assessment of system dependability
[6]	IEC 61069-6:2016, Industrial-process measurement, control and automation - Evaluation of system properties for the purpose of system assessment - Part 6: Assessment of system operability
[7]	IEC 61069-7:2016, Industrial process measurement, control and automation - valuation of system properties for the purpose of system assessment - Part 7: Assessment of system safety
[8]	IEC 61082-1, Preparation of documents used in electrotechnology - Part 1: Rules
[9]	IEC 61082-2, Preparation of documents used in electrotechnology - Part 2: Function oriented diagrams 2)

------------------------------

²⁾_{Данная публикация отменена и заменена на IEC 61082-1:2006.}

------------------------------

[10]	IEC 61082-3, Preparation of documents used in electrotechnology - Part 3: Connection diagrams, tables and lists 3)

------------------------------

³⁾_{Данная публикация отменена и заменена на IEC 61082-1:2006.}

------------------------------

[11]	IEC 61082-4, Preparation of documents used in electrotechnology - Part 4: Location and installation documents 4)

------------------------------

⁴⁾_{Данная публикация отменена и заменена на IEC 61082-1:2006.}

------------------------------

[12]	IEC 61187, Electrical and electronic measuring equipment - Documentation
[13]	IEC 61346-1, Industrial systems, installations and equipment and industrial products - Structuring principles and reference designation - Part 1: Basic rules 5)

------------------------------

⁵⁾_{Данная публикация отменена и заменена на IEC 81346-1:2009.}

------------------------------

[14]	IEC 61346-2, Industrial systems, installations and equipment and industrial products - Structuring principles and reference designations - Part 2: Classification of objects and codes for classes 6)

------------------------------

⁶⁾_{Данная публикация отменена и заменена на IEC 81346-2:2009.}

------------------------------

[15]	IEC 61346-4, Industrial systems, installations and equipment and industrial products - Structuring principles and reference designation - Part 4: Discussion of concepts 7)

------------------------------

⁷⁾_{Данная публикация отменена.}

------------------------------

[16]	IEC 61506:1997, Industrial-process measurement and control - Documentation of application software
[17]	IEC 61355 (all parts), Classification and designation of documents for plants, systems and equipment
[18]	IEC 61508 (all parts), Functional safety of electrical/electronic/programmable electronic safety-related systems
[19]	ISO/IEC/IEEE 15288, Systems and software engineering - System life cycle processes
[20]	IEC TS 62603-1, Industrial process control systems - Guideline for evaluating process control systems - Part 1: Specifications
[21]	ISO 19011, Guidelines for quality and/or environmental management systems auditing
[22]	ISO/IEC 25000, Software engineering - Software product Quality Requirements and Evaluation (SQuaRE) - Guide to SQuaRE
[23]	FV 23, Supplier evaluation system, ZVEI,
[24]	Saaty, Thomas, The analytical hierarchy process, McGraw-Hill, New York
[25]	Kepner, C & Tregoe, B, The rational manager, McGraw-Hill, New York
[26]	Smith, M, Dennis, Two views of "Total System", ISA paper ISBN 0-87664-701-8
[27]	ISO 9000, Quality management systems - Fundamentals and vocabulary
[28]	ISO 9001, Quality management systems - Requirements
[29]	ISO/IEC 9126 (all parts), Software engineering - Product quality
[30]	ISO/IEC 12207:1995, Systems and software engineering - Software life cycle processes