Практическая работа № 5 Оценивание качества программного продукта по стандарту гост 28195
Цель выполнения работы: приобретение практических навыков по оценке качества программных средств различного назначения согласно требованиям стандарта ГОСТ 28195.
Стандарт ГОСТ 28195 устанавливает общие положения по оценке качества ПС: номенклатуру и применяемость показателей качества по подклассам и по фазам жизненного цикла.
Основные задачи, решаемые при оценке качества ПС:
планирование номенклатуры показателей качества;
планирование уровней показателей качества;
выбор методов контроля показателей качества ПС;
контроль значений показателей качества;
принятие решения о соответствии реальных значений показателей качества установленным требованиям.
Согласно стандарту методы определения показателей качества ПС различаются:
по методам получения информации о показателе:
измерение,
регистрация,
расчет,
восприятие человеком;
по источникам получения информации о ПС:
непосредственное наблюдение за их функционированием в процессе работы (традиционный);
обработка заключений экспертов (экспертный).
Номенклатура показателей качества
Показатели качества представляют собой иерархическую многоуровневую систему, в которой показатели вышестоящих уровней определяются через показатели нижестоящих уровней. Только на последнем уровне оценка значений показателей осуществляется на основе информации, относящейся непосредственно к ПС.
Номенклатура первого и второго уровней показателей качества и характеризуемые ими свойства ПС приведены в табл.1.
Таблица 1
Номенклатура показателей качества программных средств
Наименование группы и комплексных показателей качества | Обозначение показателя | Характеризуемое свойство |
1. Надежность |
| Характеризует способность ПС в конкретных областях применения выполнять заданные функции в соответствии с программными документами в условиях возникновения отклонений в среде функционирования, вызванных сбоями технических средств, ошибками во входных данных, ошибками обслуживания и другими дестабилизирующими воздействиями |
1.1. Устойчивость функционирования | Н1 | Способность обеспечивать продолжение работы программы после возникновения отклонений, вызванных сбоями технических средств, ошибками во входных данных и ошибками обслуживания |
1.2. Работоспособность | Н2 | Способность программы функционировать в заданных режимах и объемах обрабатываемой информации в соответствии с программными документами при отсутствии сбоев технических средств |
2. Сопровождаемость |
| Характеризует технологические аспекты, обеспечивающие простоту устранения ошибок в программе и программных документах и поддержания ПС в актуальном состоянии |
2.1. Структурность | С1 | Организация всех взаимосвязанных частей программы в единое целое с использованием логических структур «последовательность», «выбор», «повторение» |
2.2. Простота конструкции | С2 | Построение модульной структуры программы наиболее рациональным, с точки зрения восприятия и понимания, образом |
2.3. Наглядность | С3 | Наличие и представление в наиболее легко воспринимаемом виде исходных модулей ПС, полное их описание в соответствующих программных документах |
2.4. Повторяемость | С4 | Степень использования типовых проектных решений или компонентов, входящих в ПС |
2.5. Полнота документации
| С5 | Наличие документов, необходимых для понимания всех технических решений, принятых на фазах проектирования, реализации, тестирования и изготовления жизненного цикла ПС |
3. Удобство использования
|
| Характеризует свойства ПС, способствующие быстрому освоению, применению и эксплуатации ПС с минимальными трудозатратами с учетом характера решаемых задач и требований к квалификации обслуживающего персонала |
3.1. Легкость освоения | У1 | Представление программных документов и программы в виде, способствующем пониманию логики функционирования программы в целом и ее частей |
3.2. Доступность программных документов | У2 | Понятность, наглядность и полнота описания взаимодействия пользователя с программой в программных документах |
3.3. Удобство эксплуатации и обслуживания | У3 | Соответствие процесса обработки данных и форм представления результатов характеру решаемых задач |
4. Эффективность |
| Характеризует степень удовлетворения потребности пользователя в обработке данных с учетом экономических, людских ресурсов и ресурсов системы обработки информации |
4.1. Уровень автоматизации | Э1 | Уровень автоматизации функций процесса обработки данных с учетом рациональности функциональной структуры программы с точки зрения взаимодействия с ней пользователя и использования ресурсов системы обработки информации |
4.2. Временная эффективность | Э2 | Способность программы выполнять заданные действия в интервале времени, отвечающем заданным требованиям |
4.3. Ресурсоемкость | Э3 | Минимально необходимые ресурсы системы обработки информации и число обслуживающего персонала для эксплуатации ПС |
5. Универсальность |
| Характеризует адаптируемость ПС к новым функциональным требованиям, возникающим вследствие изменения условий функционирования |
5.1. Гибкость | Г1 | Возможность использования ПС в различных областях применения |
5.2. Мобильность | Г2 | Возможность применения ПС без существенных дополнительных трудозатрат на ЭВМ аналогичного класса |
5.3. Модифицируемость | Г3 | Обеспечение простоты внесения необходимых изменений и доработок в программу в процессе эксплуатации |
6. Функциональность |
| Характеризует степень соответствия ПС требованиям, установленным в ТЗ, требованиям к обработке данных и общесистемным требованиям |
6.1. Полнота реализации | К1 | Полнота реализации заданных функций ПС и достаточность их описания в программной документации |
6.2. Согласованность | К2 | Однозначное, непротиворечивое описание и использование тождественных объектов, функций, терминов, определений, идентификаторов и т.д. в различных частях программных документов и текста программы |
6.3. Логическая корректность | К3 | Функциональное и программное соответствие процесса обработки данных при выполнении задания общесистемным требованиям |
6.4. Проверенность | К4 | Полнота проверки возможных маршрутов выполнения программы в процессе тестирования |
6.5. Защищенность | К5 | Способность программного средства предотвращать несанкционированный доступ к программам и данным, а также степень удобства и полноты обнаружения результатов такого доступа или действий по разрушению программ и данных |
Первый уровень (пункты 1, 2, 3, 4, 5, 6 табл.1) определяется группой показателей ПС, характеризующих потребительски ориентированные свойства, которые соответствуют потребностям населения, народного хозяйства и экспорта продукции.
Второй уровень (1.1, 1.2, 2.1 и т.д. табл.1) определяется комплексными показателями качества ПС, характеризующими программно–ориентированные свойства, которые обеспечивают достижение требуемых потребительски ориентированных свойств.
Выбор номенклатуры показателей качества для конкретного ПС осуществляется с учетом его назначения и требований областей применения. В табл.2 представлена рекомендуемая применяемость показателей качества в зависимости от принадлежности ПС к тому или иному подклассу в соответствии с общесоюзным классификатором продукции. Наименование подкласса ПС следует выбирать по общесоюзному классификатору продукции:
5011 – операционные системы и средства их расширения;
5012 – программные средства управления базами данных;
5013 – инструментально–технологические средства программирования;
5014 – ПС интерфейса и управления коммуникациями;
5015 – ПС организации вычислительного процесса (планирования, контроля);
5016 – сервисные программы;
5017 – ПС обслуживания вычислительной техники;
503 – прикладные программы для научных исследований;
504 – прикладные программы для проектирования;
505 – прикладные программы для управления техническими устройствами и технологическими процессами;
506 – прикладные программы для решения экономических задач;
509 – прочие ПС.
Таблица 2
Применяемость показателей качества программных средств
Номер показателя по табл.1 | Применяемость показателя по подклассу ПС | ||||||||||
5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 | |
1.1 | + | + | + | + | + | + | + | – | + | + | + – |
1.2 | + | + | + | + | + | + | + | + | + | + | + |
2.1 | + – | + – | + – | + – | + – | +– | + – | + – | + – | + – | + – |
2.2 | + – | + – | + – | + – | + – | + – | + – | – | + – | + – | + – |
2.3 | + – | + – | + – | + – | + – | + – | + – | – | + – | + – | + – |
2.4 | + – | + – | + – | + – | + – | + – | + – | – | + – | + – | + – |
2.5 | + | + | + | + | + | + | + – | + – | + – | + | + – |
3.1 | + – | + – | + – | + | + | + | + | + – | + | + – | + – |
3.2 | + | + | + | + | + | + | + | + | + | + | + |
3.3 | + | + | + – | + | + | + | + | – | + | + | + – |
4.1 | + – | + – | + – | + – | + – | + – | + – | – | + – | + – | + – |
4.2 | + – | + – | + – | + – | + – | + – | + – | + – | + – | + – | + – |
4.3 | + | + | + | + – | + – | + | + – | – | + – | + – | + – |
5.1 | – | + – | – | + – | + – | – | – | – | + | + – | + – |
5.2 | + – | + – | + – | + – | + – | + – | + – | + – | + – | + – | + – |
5.3 | + | + | + – | + – | + – | + – | + – | – | + – | + – | + – |
6.1 | + | + | + | + | + | + | + | + | + | + | + |
6.2 | + | + | + | + | + | + | + | + | + | + | + |
6.3 | + | + | + | + | + | + | + | + | + | + | + |
6.4 | + | + | + | + | + | + | + | + | + | + | + |
6.5 | + | + | + – | + – | + – | + – | + – | + – | + – | + – | + – |
Обозначения: знак "+" означает применяемость соответствующего показателя ПС, знак "–" – неприменяемость, знак "+–" – применяемость показателя ПС определяется пользователем настоящего стандарта.
Выбор показателей качества ПС для подкласса 509 осуществляется в зависимости от их назначения с учетом требований областей применения.
Методика оценки качества программных средств
Оценку качества ПС проводят на фазах жизненного цикла.
В данной практической работе предлагается оценить качество уже разработанного ПС, т.е. на выходе фазы изготовления ПС. Она включает выбор номенклатуры показателей, их оценку и сопоставление значений показателей, полученных в результате сравнения с базовыми значениями.
Показатели качества объединены в систему из четырех уровней, указанных ниже. Допускается вводить дополнительные показатели на каждом из уровней.
Для обеспечения возможности получения интегральной оценки по группам показателей качества используют факторы качества (первый уровень):
надежность ПС,
сопровождаемость,
удобство использования,
эффективность,
универсальность,
функциональность.
Каждому фактору качества соответствует определенный набор критериев качества (комплексные показатели – второй уровень):
устойчивость функционирования,
работоспособность,
структурированность,
простота конструкции,
наглядность,
повторяемость,
легкость освоения,
доступность программных документов,
удобство эксплуатации и обслуживания,
уровень автоматизации,
временная эффективность,
ресурсоемкость,
гибкость,
мобильность,
модифицируемость,
полнота реализации,
согласованность,
логическая корректность,
полнота документации,
управление и контроль доступом,
резервирование,
проверенность.
Критерии качества определяются одной или несколькими метриками (третий уровень). Если критерий качества определяется одной метрикой, то уровень метрики опускается.
Метрики составляются из оценочных элементов (единичных показателей – четвертый уровень), определяющих заданное в метрике свойство. Число оценочных элементов, входящих в метрику, неограниченно. Взаимосвязь факторов, критериев и метрик с классами ПС приведена в таблицах 3–10.
Выбор оценочных элементов в метрике зависит от функционального назначения ПС и проводится с учетом данных, полученных при проведении испытаний различных видов, а также по результатам эксплуатации ПС.
Для выбора оценочных элементов используются таблицы 11–16 и п.6.11.2–6.11.5 (программа и методика испытаний). В этих таблицах приняты следующие обозначения:
знак "+" означает применяемость соответствующего показателя ПС, знак "–" – неприменяемость, знак "+–" – применяемость показателя ПС определяется пользователем стандарта;
коды оценочных элементов составлены из 5 символов следующим образом:
1–й символ – буква русского алфавита указывает на принадлежность элемента тому или иному фактору:
Н – надежности,
С – сопровождаемости,
У – удобству применения,
Э – эффективности,
Г – универсальности,
К – корректности;
2–й и 3–й символы – номера метрик, которым принадлежит оценочный элемент;
4–й и 5–й символы – порядковый номер данного оценочного элемента в метрике.
Например: «К1004» означает, что это 4–й оценочный элемент из 10–й метрики фактора «корректность».
При указании кода метода оценки приняты следующие условные обозначения:
ЭК – экспертный;
ИЗ – измерительный;
РГ – регистрационный;
РС – расчетный.
Если для определения показателя используются разные методы, их обозначения перечисляют через запятую. Если для определения показателя поочередно используются несколько методов, их обозначения объединяют знаком плюс в той последовательности, в которой предполагается их выполнение.
Оценку качества ПС проводят в следующей последовательности.
1) На фазе анализа проводят выбор показателей и их базовых значений.
2) Для показателей качества на всех уровнях (факторы, критерии, метрики, оценочные элементы) принимают единую шкалу оценки от нуля до единицы.
3) Показатели качества на каждом вышестоящем уровне (кроме уровня оценочных элементов) определяются показателями качества нижестоящего уровня, т.е.:
результаты оценки каждого фактора определяются результатами оценки соответствующих ему критериев;
результаты оценки каждого критерия определяются результатами оценки соответствующих ему метрик;
результаты оценки каждой метрики определяются результатами оценки определяющих ее оценочных элементов.
4) В процессе оценки качества ПС на каждом уровне (кроме оценочных элементов) проводят вычисления показателей качества ПС, т.е. определение количественных значений:
абсолютных показателей (Pij), где j – порядковый номер показателя данного уровня для i–го показателя вышестоящего уровня;
относительных показателей (Kij), являющихся функцией показателя Pij и базового значения существующего аналога или эталонного образца.
5) Каждый показатель качества второго и третьего уровней (критерий и метрика) характеризуется двумя числовыми параметрами – количественным значением и весовым коэффициентом (Vij).
6) Сумма весовых коэффициентов показателей уровня (l), относящихся к i–му показателю вышестоящего уровня (l–1), есть величина постоянная. Сумма весовых коэффициентов Vij принимается равной единице в соответствии с выражением
, (1)
где n – число показателей уровня l, относящихся к i–му показателю вышестоящего уровня (l–1).
7) Общая оценка качества ПС в целом формируется экспертами по набору полученных значений оценок факторов качества ПС.
8) Для оценки качества ПС различного назначения методом экспертного опроса составляется таблица значений базовых показателей качества ПС.
9) Определение усредненной оценки mkq, оценочного элемента по нескольким его значениям (mэ) проводят по формуле
, (2)
где k – порядковый номер метрики; q – порядковый номер оценочного элемента; э – индекс суммирования; t – число значений оценочного элемента.
10) Итоговую оценку k–й метрики j–го критерия проводят по формуле
, (3)
где М – признак метрики; Q – число оценочных элементов в k–й метрике.
11) Абсолютный показатель критерия i–го фактора качества Pij определяют по формуле
, (4)
где n – число метрик, отнесенных к j–му критерию.
12) Относительный показатель j–го критерия i–го фактора качества Kij вычисляют по формуле
, (5)
13) Фактор качества вычисляют по формуле
, (6)
где – признак фактора; N – число критериев качества, отнесенных к i–му фактору; K – признак критерия.
Качество ПС определяют путем сравнения полученных расчетных значений показателей с соответствующими базовыми значениями показателей существующего аналога или расчетного ПС, принимаемого за эталонный образец. Базовые значения показателей качества ПС должны соответствовать значениям показателей, отражающих современный уровень качества и прогнозируемый мировой уровень.
В качестве аналогов выбирают реально существующие сертифицированные ПС того же функционального назначения, с такими же основными параметрами, подобной структуры и применяемые в тех же условиях эксплуатации, что и сравниваемые.
Таблица 3
Взаимосвязь факторов и критериев с классами ПС, по которым проводят оценку качества
Фактор | Критерий по табл. 1 | Весовой коэффициент показателя по подклассу ПС | |||||||||||
Номер | Наименование | 5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 | |
Надежность | 1.1 | Легкость освоения | 0,5 | – | 0,3 | 0,5 | 0,3 | ||||||
1.2 | Доступность программных документов | 0,5 | 1 | 0,7 | 0,5 | 0,7 | |||||||
Сопровождаемость | 2.1 | Удобство эксплуатации и обслуживания | 0,20 | 1 | 0,20 | ||||||||
2.2 | Уровень автоматизации | 0,25 | – | 0,25 | |||||||||
2.3 | Временная эффективность | 0,2 | – | 0,2 | |||||||||
2.4 | Ресурсоемкость | 0,3 | 0,5 | 0,3 | |||||||||
2.5 | Гибкость | 0,35 | 1 | 0,35 | |||||||||
Удобство использования | 3.1 | Мобильность | 0,2 | 0,25 | 0,3 | 0,2 | 0,25 | ||||||
3.2 | Модифицируемость | 0,4 | 0,5 | 0,35 | 0,7 | 0,35 | 0,4 | 0,5 | |||||
3.3 | Полнота реализации | 0,4 | 0,25 | 0,35 | – | 0,35 | 0,4 | 0,25 | |||||
Эффективность | 4.1 | Согласованность | 0,25 | 0,3 | 0,25 | 0,3 | – | 0,3 | |||||
4.2 | Логическая корректность | 0,25 | 0,35 | 0,25 | 0,35 | 1 | 0,35 | ||||||
4.3 | Проверенность | 0,5 | 0,35 | 0,5 | 0,35 | – | 0,35 | ||||||
Универсальность | 5.1 | Защищенность | – | 0,25 | – | 0,3 | – | 0,5 | 0,3 | 0,3 | |||
5.2 | Легкость освоения | 0,3 | 0,25 | 0,5 | 0,35 | 0,5 | 1 | 0,25 | 0,35 | ||||
5.3 | Доступность программных документов | 0,7 | 0,5 | 0,5 | 0,35 | 0,5 | – | 0,25 | 0,35 | ||||
Функциональность | 6.1 | Удобство эксплуатации и обслуживания | 0,25 | ||||||||||
6.2 | Уровень автоматизации | 0,2 | |||||||||||
6.3 | Временная эффективность | 0,2 | |||||||||||
6.4 | Ресурсоемкость | 0,2 | |||||||||||
6.5 | Гибкость | 0,2 |
Таблица 4
Базовые значения критериев
Фактор | Критерий по табл. 1 | Базовое значение показателя по подклассу ПС | |||||||||||
Номер | Наименование | 5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 | |
Надежность | 1.1 | Устойчивость функционирования | 1 | 1 | 0,9 | 1 | 0,95 | 0,95 | 0,9 | – | 0,9 | 1 | 0,95 |
1.2 | Работоспособность | 1 | 1 | 0,96 | 1 | 0,97 | 0,97 | 0,97 | 0,9 | 0,96 | 1 | 0,98 | |
Сопровождаемость | 2.1 | Структурность | 0,9 | 0,95 | 1 | 0,97 | 0,97 | 1 | 0,97 | 1 | 1 | 0,95 | 1 |
2.2 | Простота конструкции | 0,95 | 0,95 | 1 | 0,97 | 1 | 1 | 1 | – | 1 | 0,97 | 1 | |
2.3 | Наглядность | 1 | – | 1 | |||||||||
2.4 | Повторяемость | 0,8 | 0,8 | 0,8 | 0,9 | 0,8 | 0,7 | 0,7 | 0,5 | 0,8 | 0,8 | 0,9 | |
2.5 | Полнота документации | 1 | |||||||||||
Удобство использования | 3.1 | Легкость освоения | 0,9 | 0,8 | 0,9 | 0,9 | 0,7 | 0,9 | 0,7 | 0,7 | 0,9 | ||
3.2 | Доступность программных документов | 0,95 | |||||||||||
3.3 | Удобство эксплуатации и обслуживания | 0,9 | 0,85 | 0,85 | 0,9 | 0,8 | 0,9 | 0,8 | – | 0,85 | 0,85 | 0,9 | |
Эффективность | 4.1 | Уровень автоматизации | 0,9 | 0,8 | 0,9 | 0,8 | – | 0,9 | |||||
4.2 | Временная эффективность | 0,9 | 0,8 | 0,9 | 0,9 | 0,8 | 0,9 | ||||||
4.3 | Ресурсоемкость | 0,9 | 0,9 | 0,8 | 0,9 | 0,9 | 0,9 | 0,8 | – | 0,8 | 0,9 | 0,9 | |
Универсальность | 5.1 | Гибкость | – | 0,8 | – | 0,9 | 0,8 | – | – | – | 0,8 | 0,8 | 0,9 |
5.2 | Мобильность | 0,7 | 0,8 | 0,8 | 0,7 | 0,7 | 0,8 | 0,7 | 0,8 | 0,8 | 0,7 | 0,8 | |
5.3 | Модифицируемость | 1 | 0,9 | 0,9 | 1 | 0,9 | – | 1 | |||||
Функциональность | 6.1 | Полнота реализации | 1 | ||||||||||
6.2 | Согласованность | 1 | |||||||||||
6.3 | Логическая корректность | 1 | |||||||||||
6.4 | Проверенность | 0,9 | 0,8 | 0,8 | 0,9 | ||||||||
6.5 | Защищенность | 0,8 | 0,8 | 0,7 | 0,8 | 0,8 | – | 0,7 | 0,7 |
Таблица 5
Взаимосвязь критериев и метрик надежности с классами ПС
Критерий по табл.1 | Метрика | Весовой коэффициент показателя по подклассу ПС | ||||||||||||
Номер | Наименование | Обозначение | Наименование | 5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 |
1.1 | Устойчивость функционирования | Н01 | Средства восстановления при ошибках на входе | 0,35 | – | 0,35 | ||||||||
Н02 | Средства восстановления при сбоях оборудования | 0,35 | – | 0,35 | ||||||||||
Н03 | Реализация управления средствами восстановления | 0,3 | –
| 0,3 | ||||||||||
1.2 | Работоспособность | Н04 | Функционирование в заданных режимах | 0,5 | ||||||||||
Н05 | Обеспечение обработки заданного объема информации | 0,5 |
Таблица 6
Взаимосвязь критериев и метрик сопровождаемости с классами ПС
Критерий по табл.1 | Метрика | Весовой коэффициент показателя по подклассу ПС | ||||||||||||
Номер | Наименование | Обозначение | Наименование | 5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 |
2.1 | Структурность | С05 | Использование основных логических структур | 0,35 | ||||||||||
С06 | Соблюдение принципа нисходящего программирования | 0,35 | ||||||||||||
С07 | Комментарии обоснования декомпозиции программ при кодировании | 0,3 | ||||||||||||
2.2 | Простота конструкции | С01 | Простота архитектуры проекта | 0,5 | – | 0,5 | ||||||||
С02 | Сложность архитектуры проекта | 0,5 | – | 0,5 | ||||||||||
С03 | Межмодульные связи | 0,3 | – | 0,3 | ||||||||||
С10 | Простота кодирования | 0,5 | – | 0,5 | ||||||||||
2.3 | Наглядность | С04 | Экспертиза принятой системы идентификации | 0,35 | – | 0,35 | ||||||||
С08 | Комментарии логики программ | 0,35 | – | 0,35 | ||||||||||
С09 | Оформление текста программ | 0,3 | – | 0,3 | ||||||||||
2.4 | Повторяемость | С13 | Использование типовых компонентов ПС | 0,5 | ||||||||||
С14 | Использование типовых проектных решений | 0,5 | ||||||||||||
2.5 | Полнота документации | С15 | Полнота документации фазы проектирования | 0,25 | 0,2 | 0,25 | ||||||||
С16 | Полнота документации фазы реализации | 0,25 | 0,3 | 0,25 | ||||||||||
С17 | Полнота документации фазы тестирования | 0,25 | 0,3 | 0,25 | ||||||||||
С18 | Полнота документации фазы изготовления | 0,25 | 0,2 | 0,25 |
Таблица 7
Взаимосвязь критериев и метрик удобства использования с классами ПС
Критерий по табл.1 | Метрика | Весовой коэффициент показателя по подклассу ПС | ||||||||||||
Номер | Наименование | Обозначение | Наименование | 5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 |
3.1 | Легкость освоения | У01 | Освоение работы ПС | 0,35 | ||||||||||
У02 | Документация для освоения | 0,35 | ||||||||||||
У0З | Полнота пользовательской документации | 0,3 | ||||||||||||
3.2 | Доступность программных документов | У0З | Полнота пользовательской документации | 0,2 | ||||||||||
У04 | Точность пользовательской документации | 0,25 | ||||||||||||
У05 | Понятность пользовательской документации | 0,25 | ||||||||||||
У06 | Техническое исполнение пользовательской документации | 0,25 | ||||||||||||
У07 | Прослеживание вариантов пользовательской документации | 0,25 | ||||||||||||
3.3 | Удобство эксплуатации и обслуживания | У08 | Эксплуатация | 0,2 | – | 0,2 | ||||||||
У09 | Управление меню | 0,2 | – | 0,2 | ||||||||||
У10 | Функция HELP | 0,2 | – | 0,2 | ||||||||||
У11 | Управление данными | 0,2 | – | 0,2 | ||||||||||
У12 | Рабочие процедуры | 0,2 | – | 0,2 |
Таблица 8
Взаимосвязь критериев и метрик эффективности с классами ПС
Критерий по табл.1 | Метрика | Весовой коэффициент показателя по подклассу ПС | ||||||||||||
Номер | Наименование | Обозначение | Наименование | 5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 |
4.1 | Уровень автоматизации | Э01 | Функциональная автоматизация | 0,35 | 0,35 | 0,35 | о.з | 0,35 | 0,3 | 0,35 | – | 0,5 | 0,35 | 0,35 |
| Э02 | Автоматизация интерфейсов | 0,3 | 0,3 | 0,3 | 0,35 | о,з | 0,35 | 0,35 | – | 0,3 | 0,3 | 0,3 | |
Э03 | Автоматизация контроля | 0,35 | 0,35 | 0,35 | 0,35 | 0,35 | 0,35 | 0,3 | – | 0,2 | 0,35 | 0,35 | ||
4.2 | Временная эффективность | Э04 | Эффективность выполнения | 0,7 | 0,7 | 0,7 | 0,7 | 0,7 | 0,6 | 0,6 | 0,5 | 0,6 | 0,35 | 0,35 |
| Э05 | Эффективность подготовки | 0,3 | 0,3 | 10,3 | 0,3 | 0,3 | 0,4 | 0,4 | 0,5 | 0,4 | 0,3 | 0,3 | |
4.3 | Ресурсоемкость | Э06 | Стационарная ресурсоемкость | 0,7 | 0,6 | 0,6 | 0,7 | 0,7 | 0,6 | 0,5 | 0,5 | 0,5 | 0,6 | 0,6 |
| Э07 | Динамическая ресурсоемкость | 0,3 | 0,4 | 0,4 | 0,3 | 0,3 | 0,4 | 0,5 | 0,5 | 0,5 | 0,4 | 0,4 |
Таблица 9
Взаимосвязь критериев и метрик универсальности с классами ПС
Критерий по табл.1 | Метрика | Весовой коэффициент показателя по подклассу ПС | ||||||||||||
Номер | Наименование | Обозначение | Наименование | 5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 |
5.1 | Гибкость | Г01 | Широта охвата функций | – | 0,17 | – | 0,17 | – | 0,17 | |||||
Г02 | Простота архитектуры проекта | – | 0,15 | – | 0,15 | – | 0,15 | |||||||
Г03 | Сложность архитектуры проекта | – | 0,17 | – | 0,17 | – | 0,17 | |||||||
Г04 | Сложность структуры кода программ | – | 0,17 | – | 0,17 | – | 0,17 | |||||||
Г05 | Применение стандартных протоколов связи | – | 0,17 | – | 0,17 | – | 0,17 | |||||||
Г06 | Применение стандартных интерфейсных программ | – | 0,17 | – | 0,17 | – | 0,17 | |||||||
5.2 | Мобильность | Г07 | Зависимость от используемого комплекса технических средств | 0,35 | ||||||||||
Г08 | Зависимость от базового программного обеспечения | 0,35 | ||||||||||||
Г09 | Изоляция немобильности | 0,3 | – | 0,3 | ||||||||||
5.3 | Модифицируемость | Г10 | Простота кодирования | 0,2 | – | 0,2 | ||||||||
Г11 | Число комментариев | 0,2 | – | 0,2 | ||||||||||
Г12 | Качество комментариев | 0,2 | – | 0,2 | ||||||||||
Г13 | Использование описательных средств языка | 0,2 |
| 0,2 | ||||||||||
Г14 | Независимость модулей | 0,2 | – | 0,2 |
Таблица 10
Взаимосвязь критериев и метрик функциональности с классами ПС
Критерий по табл.1 | Метрика | Весовой коэффициент показателя по подклассу ПС | ||||||||||||
Номер | Наименование | Обозначение | Наименование | 5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 |
6.1 | Полнота реализации | К01 | Требования, предъявляемые к полноте документации разработчика | 1 | ||||||||||
Полнота документации разработчика | 0,5 | |||||||||||||
К02 | Полнота программной документации | 0,5 | ||||||||||||
6.2 | Согласованность | К03 | Непротиворечивость документации разработчика | 0,14 | ||||||||||
К04 | Непротиворечивость программы | 0,14 | ||||||||||||
К05 | Требования, предъявляемые к единообразию интерфейсов между модулями и пользователями | 0,35 | ||||||||||||
Единообразие интерфейсов между модулями и пользователями | 0,14 | |||||||||||||
К06 | Требования, предъявляемые к единообразию кодирования, символике и определению общих переменных | 0,35 | ||||||||||||
Единообразие кодировки | 0,14 | |||||||||||||
К07 | Соответствие документации стандартам | 0,15 | ||||||||||||
К08 | Требования, предъявляемые к соответствию ПС стандартам программирования | 0,3 | ||||||||||||
Соответствие ПС стандартам программирования | 0,15 | |||||||||||||
К09 | Соответствие ПС документации | 0,14 | ||||||||||||
6.3 | Логическая корректность | К11 | Требования, предъявляемые к реализации ПС | 1 | ||||||||||
Реализация всех решений | 0,5 | |||||||||||||
К12 | Отсутствие явных ошибок и достаточность реквизитов | 0,5 | ||||||||||||
6.4 | Проверенность | К13 | Полнота динамического тестирования | 0,5 | 0,5 | 0,7 | 0,5 | 0,5 | 0,5 | 0,8 | 0,8 | 0,7 | 0,5 | 0,5 |
К14 | Полнота статического тестирования | 0,5 | 0,5 | 0,3 | 0,5 | 0,5 | 0,5 | 0,2 | 0,2 | 0,3 | 0,5 | 0,5 | ||
6.5 | Защищенность | К15 | Аутентификация элементов систем обработки данных | 0,3 | 0,25 | 0,3 | 0 | 0,3 | 0 | |||||
К16 | Управление доступом | 0,3 | 0,25 | 0,3 | 0 | 0,3 | 0 | |||||||
К17 | Протоколирование обращений | 0,3 | 0,25 | 0,3 | 0 | 0,3 | 0 | |||||||
К18 | Криптографическая защита | 0,1 | 0,25 | 0,1 | 0 | 0,1 | 0 | |||||||
К19 | Превентивное реагирование | 0,2 | 0 | 0,1 | 0 |
Таблица 11
Оценочные элементы фактора надежность
Код оценочного элемента | Наименование | Код метода оценки | Применяемость показателя по подклассу ПС | ||||||||||
5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 | |||
Н0101 | Наличие требований по устойчивости функционирования при наличии ошибок во входных данных | ЭК | + | – | +– | + | +– | ||||||
Н0102 | Возможность обработки ошибочных ситуаций | ЭК | + | – | +– | + | +– | ||||||
Н0103 | Полнота обработки ошибочных ситуаций | ЭК | + | – | +– | + | +– | ||||||
Н0104 | Наличие тестов для проверки допустимых значений входных данных | ЭК | + | – | +– | + | +– | ||||||
Н0105 | Наличие системы контроля полноты входных данных | ЭК | + | – | +– | + | +– | ||||||
Н0106 | Наличие средств контроля корректности входных данных | ЭК | + | – | +– | + | +– | ||||||
Н0107 | Наличие средств контроля непротиворечивости входных данных | ЭК | + | – | +– | + | +– | ||||||
Н0108 | Наличие проверки параметров и адресов по диапазону их значений | ЭК | + | – | +– | + | +– | ||||||
Н0109 | Наличие обработки граничных результатов | ЭК | + | – | +– | + | +– | ||||||
Н0110 | Наличие обработки неопределенностей | ЭК | + | – | +– | + | +– | ||||||
Н0201 | Наличие требований к программе по восстановлению процесса выполнения в случае сбоя операционной системы, процессора, внешних устройств | ЭК | + | – | +– | + | +– | ||||||
Н0202 | Наличие требований к программе по восстановлению результатов при отказах процессора, операционной системы | ЭК | + | – | +– | + | +– | ||||||
Н0203 | Наличие средств восстановления процесса в случае сбоев оборудования | ЭК | + | – | +– | + | +– | ||||||
Н0204 | Наличие возможности разделения по времени выполнения отдельных функций программ | ЭК | + | – | +– | + | +– | ||||||
Н0205 | Наличие возможности повторного старта с точки останова | ЭК | + | – | +– | + | +– | ||||||
Н0301 | Наличие централизованного управления процессами, конкурирующими из–за ресурсов | ЭК | + | – | +– | + | +– | ||||||
Н0302 | Наличие возможности автоматически обходить ошибочные ситуации в процессе вычисления | ЭК | + | – | +– | + | +– | ||||||
Н0303 | Наличие средств, обеспечивающих завершение процесса решения в случае помех | ЭК | + | – | +– | + | +– | ||||||
Н0304 | Наличие средств, обеспечивающих выполнение программы в сокращенном объеме в случав ошибок или помех | ЭК | + | – | +– | + | +– | ||||||
Н0305 | Показатель устойчивости к искажающим воздействиям Р(Y) рассчитывают по формуле Р(Y)=1–D/K, где D – число экспериментов, в которых искажающие воздействия приводят к отказу; K – число экспериментов, в которых имитируются искажающие воздействия | РГ + РС | + | – | +– | + | +– | ||||||
Н0401 | Вероятность безотказной работа Р рассчитывают по формуле Р=1–Q/N, где Q – число зарегистрированных отказов; N – число экспериментов | РГ + РС | + | ||||||||||
Н0501 | Оценку по среднему времени восстановления Qb рассчитывают по формуле
где – допустимое среднее время восстановления; Tb – среднее время восстановления, определяемое по формуле:
где N – число восстановлений; Tbi – время восстановления после i–го отказа | ИЗ + РС | + | ||||||||||
Н0502 | Оценку по продолжительности преобразования входного набора данных в выходной (Qni) рассчитывают по формуле
где – допустимое время преобразования i–го входного набора данных; Tni – фактическая продолжительность преобразования i–го входного набора данных в выходной | ИЗ + РС | + |
Таблица 12
Оценочные элементы фактора сопровождаемость
Код оценочного элемента | Наименование | Код метода оценки | Применяемость показателя по подклассу ПС | ||||||||||
5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 | |||
С0101 | Наличие модульной схемы программы | ЭК | +– | – | +– | ||||||||
С0102 | Оценка программы по числу уникальных модулей | ЭК ИЗ | +– | – | +– | ||||||||
С0201 | Наличие ограничений на размеры модуля | ЭК | +– | – | +– | ||||||||
С0301 | Наличие проверки корректности передаваемых данных | ЭК | +– | – | +– | ||||||||
С0302 | Оценку простоты программы по числу точек входа и выхода W рассчитывают по формуле , где D – общее число точек входа в программу; F – общее число точек выхода из программы | ИЗ + РС | +– | – | +– | ||||||||
С0303 | Осуществляется ли передача результатов работы модуля через вызывающий его модуль | ЭК | +– | – | +– | ||||||||
С0304 | Осуществляется ли контроль за правильностью данных, поступающих в вызывающий модуль от вызываемого | ЭК | +– | – | +– | ||||||||
С0305 | Наличие требований к независимости модулей программы от типов и форматов выходных данных | ЭК | +– | – | +– | ||||||||
С0401 | Наличие требований к системе идентификации | ЭК | +– | – | +– | ||||||||
С0501 | Наличие требований по использованию основных логических структур | ЭК | +– | ||||||||||
С0601 | Использование при построении программ метода структурного программирования | ЭК ИЗ | +– | ||||||||||
С0602 | Соблюдение принципа разработки программы сверху вниз | ЭК | +– | ||||||||||
С0603 | Оценка программы по числу циклов с одним входом и одним выходом | ЭК ИЗ | +– | ||||||||||
С0604 | Оценка программы по числу циклов | ЭК ИЗ | +– | ||||||||||
С0701 | Наличие комментариев обоснования декомпозиции программ при кодировании | ЭК | +– | ||||||||||
С0801 | Наличие комментариев ко всем машинозависимым частям программы | ЭК | +– | – | +– | ||||||||
С0802 | Наличие комментариев ко всем машинозависимым операторам программы | ЭК | +– | – | +– | ||||||||
С0803 | Наличие комментариев в точках входа и выхода программы | ЭК | +– | – | +– | ||||||||
С0901 | Соответствие комментариев принятым соглашениям | ЭК | +– | – | +– | ||||||||
С0902 | Наличие комментариев–заголовков программы с указанием ее структурных и функциональных характеристик | ЭК | +– | – | +– | ||||||||
С0903 | Оценка ясности и точности описания последовательности функционирования всех элементов программы | ЭК | +– | – | +– | ||||||||
С1001 | Используется ли язык высокого уровня | ЭК | +– | – | +– | ||||||||
С1002 | Оценка простоты программы по числу переходов по условию U= (1 – А/В), где А – общее число переходов по условию; В – общее число исполняемых операторов | ИЗ + РС | +– | – | +– | ||||||||
С1301 | Использование типовых компонентов ПС | ЭК | +– | ||||||||||
С1401 | Использование типовых проектных решений | ЭК | +– | ||||||||||
С1501 | Наличие программных спецификаций и требований, предъявляемых к программным средствам | ЭК | + | +– | + | +– | |||||||
С1502 | Наличие документов, содержащих детальное описание принятых проектных решений | ЭК | + | +– | + | +– | |||||||
С1503 | Наличие заключений по принятым проектным решениям, требованиям и спецификациям | ЭК | + | +– | + | +– | |||||||
С1601 | Наличие описания и схемы иерархии модулей программы | ЭК | + | +– | + | +– | |||||||
С1602 | Наличие описания основных функций | ЭК | + | +– | + | +– | |||||||
С1603 | Наличие описания частных функций | ЭК | + | +– | + | +– | |||||||
С1604 | Наличие описания данных | ЭК | + | +– | + | +– | |||||||
С1605 | Наличие описания алгоритмов | ЭК | + | +– | + | +– | |||||||
С1606 | Наличие описания интерфейсов | ЭК | + | +– | + | +– | |||||||
С1607 | Наличие описания интерфейсов с пользователем | ЭК | + | +– | + | +– | |||||||
С1608 | Наличие описания используемых числовых методов | ЭК | + | +– | + | +– | |||||||
С1609 | Наличие описания всех параметров | ЭК | + | +– | + | +– | |||||||
С1610 | Наличие описания методов настройки системы | ЭК | + | +– | + | +– | |||||||
С1611 | Наличие описания всех диагностических сообщений | ЭК | + | +– | + | +– | |||||||
С1612 | Реализация всех исходных модулей | ЭК | + | +– | + | +– | |||||||
С1701 | Наличие описания всех диагностических сообщений эталонного образца | ЭК | + | +– | + | +– | |||||||
С1702 | Наличие требований к тестированию программ | ЭК | + | +– | + | +– | |||||||
С1703 | Достаточность требований к тестированию программ | ЭК | + | +– | + | +– | |||||||
С1801 | Наличие описания процедуры изготовления эталонного образца | ЭК | + | +– | + | +– | |||||||
С1802 | Наличие описания процедуры изготовления рабочих копий | ЭК | + | +– | + | +– | |||||||
С1805 | Наличие описания процедуры контроля на идентичность рабочих копий с эталонным образцом | ЭК | + | +– | + | +– |
Таблица 13
Оценочные элементы фактора удобство применения
Код оценочного элемента | Наименование | Код метода оценки | Применяемость показателя по подклассу ПС | ||||||||||
5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 | |||
У0101 | Возможность освоения программных средств по документации | ЭК | +– | + | +– | + | +– | ||||||
У0102 | Возможность освоения ПС на контрольном примере при помощи ЭВМ | ЭК | +– | + | +– | + | +– | ||||||
У0103 | Возможность поэтапного освоения ПС | ЭК | +– | + | +– | + | +– | ||||||
У0201 | Полнота и понятность документации для освоения | ЭК | +– | + | +– | + | +– | ||||||
У0202 | Точность документации для освоения | ЭК | +– | + | +– | + | +– | ||||||
У0203 | Техническое исполнение документации | ЭК | +– | + | +– | + | +– | ||||||
У0301 | Наличие краткой аннотации | ЭК | +– | + | +– | + | +– | ||||||
У0302 | Наличие описания решаемых задач | ЭК | +– | + | +– | + | +– | ||||||
У0303 | Наличие описания структуры функций ПС | ЭК | +– | + | +– | + | +– | ||||||
У0304 | Наличие описания основных функций ПС | ЭК | +– | + | +– | + | +– | ||||||
У0306 | Наличие описания частных функций | ЭК | +– | + | +– | + | +– | ||||||
У0307 | Наличие описания алгоритмов | ЭК | +– | + | +– | + | +– | ||||||
У0308 | Наличие описания межмодульных интерфейсов | ЭК | +– | + | +– | + | +– | ||||||
У0309 | Наличие описания пользовательских интерфейсов | ЭК | +– | + | +– | + | +– | ||||||
У0310 | Наличие описания входных и выходных данных | ЭК | +– | + | +– | + | +– | ||||||
У0311 | Наличие описания диагностических сообщений | ЭК | +– | + | +– | + | +– | ||||||
У0312 | Наличие описания основных характеристик ПС | ЭК | +– | + | +– | + | +– | ||||||
У0314 | Наличие описания программной среды функционирования ПС | ЭК | +– | + | +– | + | +– | ||||||
У0315 | Достаточность документации для ввода ПС в эксплуатацию | ЭК | +– | + | +– | + | +– | ||||||
У0316 | Наличие информации технологии переноса для мобильных программ | ЭК | +– | + | +– | + | +– | ||||||
У0401 | Соответствие оглавления содержанию документации | ЭК | + | ||||||||||
У0402 | Оценка оформления документации | ЭК | + | ||||||||||
У0403 | Грамматическая правильность изложения документации | ЭК | + | ||||||||||
У0404 | Отсутствие противоречий | ЭК | + | ||||||||||
У0405 | Отсутствие неправильных ссылок | ЭК | + | ||||||||||
У0406 | Ясность формулировок и описаний | ЭК | + | ||||||||||
У0407 | Отсутствие неоднозначных формулировок и описаний | ЭК | + | ||||||||||
У0408 | Правильность использования терминов | ЭК | + | ||||||||||
У0409 | Краткость, отсутствие лишней легализации | ЭК | + | ||||||||||
У0410 | Единство формулировок | ЭК | + | ||||||||||
У0411 | Единство обозначений | ЭК | + | ||||||||||
У0412 | Отсутствие ненужных повторений | ЭК | + | ||||||||||
У 0413 | Наличие нужных объяснений | ЭК | + | ||||||||||
У0501 | Оценка стиля изложения | ЭК | + | ||||||||||
У0502 | Дидактическая разделенность | ЭК | + | ||||||||||
У0503 | Формальная разделенность | ЭК | + | ||||||||||
У0504 | Ясность логической структуры | ЭК | + | ||||||||||
У0505 | Соблюдение стандартов и правил изложения в документации | ЭК | + | ||||||||||
У0506 | Оценка по числу ссылок к нижеследующему тексту документа | ЭК | + | ||||||||||
У0601 | Наличие оглавления | ЭК | + | ||||||||||
У0602 | Наличие предметного указателя | ЭК | + | ||||||||||
У0603 | Наличие перекрестных ссылок | ЭК | + | ||||||||||
У0604 | Наличие всех требуемых разделов | ЭК | + | ||||||||||
У0605 | Соблюдение непрерывности нумерации страниц документов | ЭК | + | ||||||||||
У0606 | Отсутствие незаконченных разделов абзацев, предложений | ЭК | + | ||||||||||
У0607 | Наличие всех рисунков, формул, таблиц | ЭК | + | ||||||||||
У0608 | Наличие всех строк и примечаний | ЭК | + | ||||||||||
У0609 | Логический порядок частей внутри главы | ЭК | + | ||||||||||
У 0701 | Наличие полного перечня документации | ЭК | + | ||||||||||
У0801 | Уровень языка общения пользователя с программой | ЭК | + | +– | + | – | + | +– | |||||
У0802 | Легкость и быстрота загрузки и запуска программы | ЭК | + | +– | + | – | + | +– | |||||
У0803 | Легкость и быстрота завершения работы программы | ЭК | + | +– | + | – | + | +– | |||||
У0804 | Возможность распечатки содержимого программы | ЭК | + | +– | + | – | + | +– | |||||
У0805 | Возможность приостанова и повторного запуска работы без потерь информации | ЭК | + | – | + | + | +– | + | – | + | +– | ||
У0901 | Соответствие программного меню требованиям пользователя | ЭК | + | +– | + | – | + | +– | |||||
У0902 | Возможность прямого перехода вверх и вниз по многоуровневому программному меню (пропуск уровней) | ЭК | + | +– | + | – | + | +– | |||||
У1001 | Возможность управления подробностью получаемых выходных данных | ЭК | + | +– | + | – | + | +– | |||||
У1002 | Достаточность полученной информации для продолжения работы | ЭК | + | +– | + | – | + | +– | |||||
У1101 | Обеспечение удобства ввода данных | ЭК | + | +– | + | – | + | +– | |||||
У1102 | Легкость восприятия | ЭК | + | +– | + | – | + | +– | |||||
У1201 | Обеспечение программой выполнения предусмотренных рабочих процедур | ЭК | + | +– | + | – | + | +– | |||||
У1202 | Достаточность информации , выдаваемой программой для составления дополнительных процедур | ЭК | + | +– | + | – | + | +– |
Таблица 14
Оценочные элементы фактора эффективность
Код оценочного элемента | Наименование | Код метода оценки | Применяемость показателя по подклассу ПС | ||||||||||
5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 | |||
Э0101 | Проблемно–ориентированные функции | ЭК | +– | – | +– | ||||||||
Э0102 | Машинно–ориентированные функции | ЭК | +– | – | +– | ||||||||
Э0203 | Функции ведения и управления | ЭК | +– | – | +– | ||||||||
Э0204 | Функции ввода/вывода | ЭК | +– | – | +– | ||||||||
Э0305 | Функции защиты и проверки данных | ЭК | +– | – | +– | ||||||||
Э0307 | Функции контроля доступа | ЭК | +– | – | +– | ||||||||
Э0308 | Функции контроля внесения изменений | ЭК | +– | – | +– | ||||||||
Э0309 | Наличие соответствующих границ функциональных областей | ЭК | +– | – | +– | ||||||||
Э0310 | Число знаков после запятой в результатах вычислений | ЭК | +– | – | +– | ||||||||
Э0401 | Время выполнения программ | ЭК ИЗ+РС | +– | ||||||||||
Э0402 | Время реакции и ответов | ЭК ИЗ+РС | +– | ||||||||||
Э0503 | Время подготовки | ЭК ИЗ+РС | +– | ||||||||||
Э0505 | Затраты времени на защиту данных | ЭК | +– | ||||||||||
Э0506 | Время компиляции | ЭК ИЗ+РС | +– | ||||||||||
Э0601 | Требуемый объем внутренней памяти | ЭК ИЗ+РС | + | +– | + | +– | – | +– | |||||
Э0602 | Требуемый объем внешней памяти | ЭК ИЗ+РС | + | +– | + | +– | – | +– | |||||
Э0703 | Требуемые периферийные устройства | ЭК | + | +– | + | +– | – | +– | |||||
Э0704 | Требуемое базовое программное обеспечение | ЭК | + | +– | + | +– | – | +– |
Таблица 15
Оценочные элементы фактора универсальность
Код оценочного элемента | Наименование | Код метода оценки | Применяемость показателя по подклассу ПС | ||||||||||
5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 | |||
Г0101 | Оценка числа потенциальных пользователей | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0102 | Оценка числа функций ПС | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0103 | Насколько набор функций удовлетворяет требованиям пользователя | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0104 | Насколько возможности программ охватывают область решаемых пользователем задач | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0105 | Возможность настройки формата выходных данных для конкретных пользователей | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0201 | Наличие схемы иерархии модулей программы | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0202 | Оценка независимости модулей | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0203 | Оценка числа уникальных элементов/реквизитов | ЭК ИЗ | – | +– | – | +– | – | + | +– | ||||
Г0204 | Используется ли в текущем вызове модуля информация, полученная в предыдущем вызове | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0205 | Оценка организации точек входа и выхода модуля | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0206 | Наличие описания атрибутов модуля | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0301 | Оценка программ по числу переходов и точек ветвления | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0401 | Использование метода пошагового уточнения | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0402 | Наличие описания структуры программ | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0403 | Наличие описания связей между элементами структуры программ | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0404 | Наличие в программе повторного выполнения функций (подпрограмм) | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0501 | Использование стандартных протоколов связи | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0601 | Использование стандартных интерфейсных подпрограмм | ЭК | – | +– | – | +– | – | + | +– | ||||
Г0701 | Оценка зависимости программ от емкости оперативной памяти ЭВМ | ЭК | +– | ||||||||||
Г0702 | Оценка зависимости временных характеристик программы от скорости вычислений ЭВМ | ЭК | +– | ||||||||||
Г0703 | Оценка зависимости функционирования программы от числа внешних запоминающих устройств и их общей емкости | ЭК | +– | ||||||||||
Г0704 | Оценка зависимости функционирования программы от специальных устройств ввода–вывода | ЭК | +– | ||||||||||
Г0801 | Применение специальных языков программирования | ЭК | +– | ||||||||||
Г0802 | Оценка зависимости программы от программ операционной системы | ЭК | +– | ||||||||||
Г0803 | Зависимость от других программных средств | ЭК | +– | ||||||||||
Г0901 | Оценка локализации непереносимой части программы | ЭК | +– | ||||||||||
Г1001 | Оценка использования отрицательных или булевых выражений | ЭК ИЗ | + | +– | – | +– | |||||||
Г1002 | Оценка программы по использованию условных переходов | ЭК ИЗ | + | +– | – | +– | |||||||
Г1003 | Оценка программы по использованию безусловных переходов | ЭК ИЗ | + | +– | – | +– | |||||||
Г1004 | Оформление процедур входа и выхода из циклов | ЭК | + |
| +– | – | +– | ||||||
Г1005 | Ограничения на модификацию переменной индексации в цикле | ЭК | + |
| +– | – | +– | ||||||
Г1006 | Оценка модулей по направлению потока управления | ЭК | + | +– | +– | – | +– | ||||||
Г1007 | Оценка программ по использованию локальных переменных | ЭК | + | +– | +– | – | +– | ||||||
Г1101 | Оценка программы по числу комментариев | ЭК ИЗ | + | +– | +– | – | +– | ||||||
Г1201 | Наличие заголовка в программе | ЭК ИЗ | + | +– | +– | – | +– | ||||||
Г1202 | Комментарии к точкам ветвлений | ЭК | + | +– | +– | – | +– | ||||||
Г1203 | Комментарии к машинозависимым частям программы | ЭК | + | +– | +– | – | +– | ||||||
Г1204 | Комментарии к машинозависимым операторам программы | ЭК | + | +– | +– | – | +– | ||||||
Г1205 | Комментарии к операторам объявления переменных | ЭК | + | +– | +– | – | +– | ||||||
Г1206 | Оценка семантики операторов | ЭК | + | +– | +– | – | +– | ||||||
Г1207 | Наличие соглашений по форме представления комментариев | ЭК | + | +– | +– | – | +– | ||||||
Г1208 | Наличие общих комментариев к программам | ЭК РГ | + | +– | +– | – | +– | ||||||
Г1301 | Использование языков высокого уровня | ЭК | + – | – | +– | ||||||||
Г1302 | Семантика имен используемых переменных | ЭК | + | +– | – | +– | |||||||
Г1303 | Использование отступов, сдвигов и пропусков при формировании текста | ЭК | + | +– | – | +– | |||||||
Г1304 | Размещение операторов по строкам | ЭК | + | +– | – | +– | |||||||
Г1401 | Передача информации для управления по параметрам | ЭК | + | +– | – | +– | |||||||
Г1402 | Параметрическая передача входных данных | ЭК | + | +– | – | +– | |||||||
Г1403 | Наличие передачи результатов работы между модулями | ЭК | + | +– | – | +– | |||||||
Г1404 | Наличие проверки правильности данных, получаемых модулями от вызываемого модуля | ЭК | + | +– | – | +– | |||||||
Г1405 | Использование общих областей памяти | ЭК | + | +– | – | +– |
Таблица 16
Оценочные элементы фактора функциональность
Код оценочного элемента | Наименование | Код метода оценки | Применяемость показателя по подклассу ПС | ||||||||||
5011 | 5012 | 5013 | 5014 | 5015 | 5016 | 5017 | 503 | 504 | 505 | 506 | |||
К0101 | Наличие всех необходимых документов для понимания и использования ПС | ЭК | + | ||||||||||
К0102 | Наличие описания и схемы иерархии модулей программы | ЭК | + | ||||||||||
К0103 | Наличие описания основных функций | ЭК | + | ||||||||||
К0104 | Наличие описания частных функций | ЭК | + | ||||||||||
К0105 | Наличие описания данных | ЭК | + | ||||||||||
К0106 | Наличие описания алгоритмов | ЭК | + | ||||||||||
К0107 | Наличие описания интерфейсов между модулями | ЭК | + | ||||||||||
К0108 | Наличие описания интерфейсов с пользователем | ЭК | + | ||||||||||
К0109 | Наличие описания используемых численных методов | ЭК | + | ||||||||||
К0110 | Указаны ли все численные методы | ЭК | + | ||||||||||
К0111 | Наличие описания всех параметров | ЭК | + | ||||||||||
К0112 | Наличие описания методов настройки системы | ЭК | + | ||||||||||
К0113 | Наличие описания всех диагностических сообщений | ЭК | + | ||||||||||
К0114 | Наличие описания способов проверки работоспособности программы | ЭК | + | ||||||||||
К0201 | Наличие всех исходных модулей | ЭК РГ | + | ||||||||||
К0209 | Наличие определения всех данных (переменные, индексы, массивы и проч.) | ЭК | + | ||||||||||
К0210 | Наличие интерфейсов с пользователем | ЭК | + | ||||||||||
К0301 | Отсутствие противоречий в описании частных функций | ЭК | + | ||||||||||
К0302 | Огсутствие противоречий в описании основных функций в разных документах | ЭК | + | ||||||||||
К0303 | Огсутствие противоречий в описании алгоритмов | ЭК | + | ||||||||||
К0304 | Отсутствие противоречий в описании взаимосвязей в системе | ЭК | + | ||||||||||
К0305 | Отсутствие противоречий в описании интерфейсов между модулями | ЭК | + | ||||||||||
К0306 | Отсутствие противоречий в описании интерфейсов с пользователями | ЭК | + | ||||||||||
К0307 | Отсутствие противоречий в описании настройки системы | ЭК | + | ||||||||||
К0309 | Огсутствие противоречий в описании иерархической структуры сообщений | ЭК | + | ||||||||||
К0310 | Отсутствие противоречий в описании диагностических сообщений | ЭК | + | ||||||||||
К0311 | Отсутствие противоречий в описании данных | ЭК | + | ||||||||||
К0401 | Огсутствие противоречий в выполнении основных функций | ЭК | + | ||||||||||
К0402 | Огсутствие противоречий в выполнении частных функций | ЭК | + | ||||||||||
К0403 | Отсутствие противоречий в выполнении алгоритмов | ЭК | + | ||||||||||
К0404 | Правильность взаимосвязей | ЭК | + | ||||||||||
К0405 | Правильность реализации интерфейса между модулями | ЭК | + | ||||||||||
К0406 | Правильность реализации интерфейса с пользователем | ЭК | + | ||||||||||
К0407 | Отсутствие противоречий в настройке системы | ЭК | + | ||||||||||
К0408 | Отсутствие противоречий в диагностике системы | ЭК | + | ||||||||||
К0409 | Отсутствие противоречий в общих переменных | ЭК | + | ||||||||||
К0501 | Единообразие способов вызова модулей | ЭК | + | ||||||||||
К0502 | Единообразие процедур возврата управления из модулей | ЭК | + | ||||||||||
К0503 | Единообразие способов сохранения операции для возврата | ЭК | + | ||||||||||
К0504 | Единообразие способов восстановления информации для возврата | ЭК | + | ||||||||||
К0505 | Единообразие организации списков передаваемых параметров | ЭК | + | ||||||||||
К0601 | Единообразие наименования каждой переменной и константы | ЭК | + | ||||||||||
К0602 | Все ли одинаковые константы встречаются во всех программах под одинаковыми именами | ЭК | + | ||||||||||
К0603 | Единообразие определения внешних данных во всех программах | ЭК | + | ||||||||||
К0604 | Используются ли разные идентификаторы для разных переменных | ЭК | + | ||||||||||
К0605 | Все ли общие переменные объявлены как общие переменные | ЭК | + | ||||||||||
К0701 | Комплектность документации в соответствии со стандартами | ЭК | + | ||||||||||
К0702 | Правильное оформление частей документов | ЭК | + | ||||||||||
К0703 | Правильное оформление титульных и заглавных листов документов | ЭК | + | ||||||||||
К0704 | Наличие в документах всех разделов в соответствии со стандартами | ЭК | + | ||||||||||
К0705 | Полнота содержания разделов в соответствии со стандартами | ЭК | + | ||||||||||
К0706 | Деление документов на структурные элементы: разделы, подразделы, пункты, подпункты | ЭК | + | ||||||||||
К0801 | Соответствие организации и вычислительного процесса эксплуатационной документации | ЭК | + | ||||||||||
К0802 | Правильность заданий на выполнение программы, правильность написания управляющих операторов (отсутствие ошибок) | ЭК | + | ||||||||||
К0803 | Отсутствие ошибок в описании действий пользователя | ЭК | + | ||||||||||
К0804 | Отсутствие ошибок в описании запуска | ЭК | + | ||||||||||
К0805 | Отсутствие ошибок в описании генерации | ЭК | + | ||||||||||
К0806 | Огсутствие ошибок в описании настройки | ЭК | + | ||||||||||
К0901 | Соответствие ПС документации | ЭК | + | ||||||||||
К0902 | Соответствие изменений, внесенных в программу, изменениям в документации | ЭК | + | ||||||||||
К1101 | Реализация всех исходных модулей | ЭК РГ | + | ||||||||||
К1102 | Реализация всех основных функций | ЭК РГ | + | ||||||||||
К110З | Реализация всех частных функций | ЭК РГ | + | ||||||||||
К1104 | Реализация всех алгоритмов | ЭК РГ | + | ||||||||||
К1105 | Реализация всех взаимосвязей в системе | ЭК | + | ||||||||||
К1106 | Реализация всех интерфейсов между модулями | ЭК | + | ||||||||||
К1107 | Реализация возможности настройки системы | ЭК | + | ||||||||||
К1108 | Реализация диагностики всех граничных и аварийных ситуаций | ЭК | + | ||||||||||
К1201 | Отсутствие ошибок в настройке системы | ЭК | + | ||||||||||
К1202 | Отсутствие ошибок при запуске системы | ЭК | + | ||||||||||
К1203 | Отсутствие ошибок в выполнении основных функций | ЭК | + | ||||||||||
К1301 | Наличие требований к динамическому тестированию программ | ЭК | + | ||||||||||
К1302 | Отношение числа модулей, отработавших в процессе тестирования и отладки , к общему числу модулей | РГ + РС | + | ||||||||||
К1303 | Отношение числа логических блоков, отработавших в процессе тестирования и отладки , к общему числу логических блоков в программе | РГ + РС | + | ||||||||||
К1401 | Наличие требований к статическому тестированию программ | ЭК | + | +– | + | +– | |||||||
К1402 | Наличие протоколов проведения статического тестирования программ | ЭК | + | +– | + | +– | |||||||
К1501 | Наличие перечня элементов, подлежащих аутентификации | ЭК | + | +– | – | +– | – | ||||||
К1502 | Наличие описания принципов и механизмов аутентификации элементов | ЭК | + | +– | – | +_ | – | ||||||
К1601 | Наличие описания перечня элементов, подлежащих ограничению доступа | ЭК | + | +– | – | +– | – | ||||||
К1602 | Наличие описания принципов и механизмов управления доступом | ЭК | + | +– | – | +– | – | ||||||
К1603 | Функция защита от несанкционированного доступа | ЭК | + | +– | – | +– | – | ||||||
К1604 | Функция контроля доступа | ЭК | + | +– | – | +– | – | ||||||
К1605 | Функция защиты от внесения изменений | ЭК | + | +– | – | +– | – | ||||||
К1701 | Наличие перечня элементов, обращение к которым протоколируется | ЭК | + | +– | – | +– | – | ||||||
К1702 | Наличие описания принципов и механизмов протоколирования обращений | ЭК | +– | +– | – | +– | – | ||||||
К1801 | Наличие перечня элементов, подлежащих криптографической защите | ЭК | +– | +– | – | +– | – | ||||||
К1802 | Наличие описания принципов и механизмов криптографической защиты | ЭК | +– | +– | – | +– | – | ||||||
К1901 | Наличие требований по регистрации попыток реализации угроз | ЭК | + | +– | + | +– | + | ||||||
К1902 | Наличие требований по анализу попыток проявления угроз | ЭК | + | +– | + | +– | + | ||||||
К1903 | Наличие средств предупреждения о возникновении реального риска | ЭК | + | +– | + | +– | + |
- Стандартизация и сертификация программного обеспечения
- © Уо «пгу», 2007Содержание введение
- Рабочая программа
- Рейтинговая оценка знаний
- Конспект лекций
- 1. Качество как экономическая категория и объект управления
- 1.1. Понятие качества. Предмет и задачи курса
- 1.2. Управление качеством как фактор успеха предприятия в конкурентной борьбе
- 1.3. Стандартизация в системе управления качеством
- 1.3.1. Система стандартизации
- 1.3.2. Категории нормативных документов
- 1.3.3. Уровни стандартизации
- 1.4. Механизм управления качеством
- 1.5. Стандарты исо серии 9000
- 1.5.1. Фундаментальные требования
- 1.5.2. Структура комплекса стандартов
- 1.5.3. Структура документов системы управления качеством
- 1.5.4. Как работает система управления качеством
- 1.6. Сертификация продукции, услуг и систем менеджмента качества
- 1.6.1. Основные предпосылки сертификации
- 1.6.2. Обязательная и добровольная сертификация
- 1.6.3. Национальная система сертификации
- 1.6.4. Схемы сертификации и условия их применения
- 1.6.5. Порядок проведения работ по сертификации
- Вопросы по теме
- 2. Жизненный цикл программнЫх средств
- 2.1. Понятие жизненного цикла
- 2.2. Базовый профиль жизненного цикла программных средств
- 2.3. Особенности стандартизации жизненного цикла программных средств
- 2.4. Методическая основа технологии жизненного цикла программных средств
- 2.5. Преимущества применения стандартов жизненного цикла
- 2.6. Структура профилей стандартов жизненного цикла программных средств
- 2.7. Стандартизация жизненного цикла программных средств
- 2.7.1. Стандарт iso/iec 12207
- 2.7.2. Стандарт iso 15504
- 2.8. Модель жизненного цикла программного продукта
- 2.8.1. Схема модели
- 2.8.2. Каскадная модель
- 2.8.3. Спиральная модель
- 2.8.4. Другие типы моделей
- Вопросы по теме
- 3. Основные понятия и характеристики качества программных средств
- 3.1. Основные факторы, определяющие качество программных средств
- 3.2. Стандарты, регламентирующие характеристики качества
- 3.3. Метрики характеристик качества программных средств
- 3.4. Особенности измерения и оценивания характеристик качества
- 3.5. Негативные факторы, влияющие на качество
- 3.6. Ресурсы, ограничивающие достижимые характеристики качества
- Вопросы по теме
- 4. Выбор мер и шкал характеристик качества программных средств
- 4.1. Принципы выбора характеристик качества
- 4.2. Выбор свойств и атрибутов качества функциональных возможностей
- 4.2.1. Функциональная пригодность
- 4.2.2. Корректность и надежность
- 4.2.3. Способность к взаимодействию
- 4.2.4. Защищенность
- 4.3. Выбор количественных атрибутов характеристик качества
- 4.3.1. Надежность
- 4.3.2. Эффективность
- 4.4. Выбор качественных атрибутов характеристик качества
- 4.4.1. Практичность
- 4.4.2. Сопровождаемость
- 4.4.3. Мобильность
- 4.4.4. Качество документации
- 4.5. Процессы выбора и установления характеристик и мер качества в проектах программных средств
- Вопросы по теме
- 5. Стандартизация оценивания технологических процессов жизненного цикла и характеристик качества программных средств
- 5.1. Оценивание уровня зрелости процессов жизненного цикла и обеспечения качества программных средств
- 5.2. Оценивание жизненного цикла программных средств по стандарту iso 15504
- 5.3. Оценивание качества готового программного продукта по стандарту iso 14598
- 5.4. Организация и средства для оценивания качества комплексов программ
- 5.4.1. Модель внешней среды
- 5.4.2. Испытания программного продукта
- 5.4.3. Альфа– и Бета–тестирование
- 5.4.4. Программная генерация тестов
- 5.4.5. Обработка результатов испытаний
- Вопросы по теме
- 6. Единая система программной документации
- 6.1. Общая характеристика еспд
- 6.2. Структура еспд
- 6.3. Гост 19.101. Виды программ и программных документов
- 6.4. Гост 19.102. Стадии разработки
- 6.5. Гост 19.103. Обозначение программ и программных документов
- 6.6. Гост 19.105. Общие требования к программным документам
- 6.7. Гост 19.104. Основные надписи
- 6.8. Гост 19.106. Требования к программным документам, выполненным печатным способом
- 6.9. Гост 19.201. Техническое задание. Требования к содержанию и оформлению
- 6.10. Гост 19.202. Спецификация. Требования к содержанию и оформлению
- 6.11. Гост 19.301. Программа и методика испытаний. Требования к содержанию, оформлению и контролю качества
- 6.11.1. Требования к содержанию
- 6.11.2. Показатели качества, определяемые на основе результатов анализа раздела «Требования к программе»
- 6.11.3. Показатели качества, определяемые на основе результатов анализа раздела «Требования к программной документации»
- 6.11.4. Показатели качества, определяемые на основе результатов анализа раздела «Средства и порядок испытаний»
- 6.11.5. Показатели качества, определяемые на основе результатов анализа раздела «Методы испытаний»
- 6.12. Гост 19.401. Текст программы. Требования к содержанию и оформлению
- 6.13. Гост 19.402. Описание программы
- 6.14. Гост 19.404. Пояснительная записка. Требования к содержанию и оформлению
- 6.15. Гост 19.502. Описание применения. Требования к содержанию и оформлению
- 6.16. Гост 19.503. Руководство системного программиста. Требования к содержанию и оформлению
- 6.17. Гост 19.504. Руководство программиста. Требования к содержанию и оформлению
- 6.18. Гост 19.505. Руководство оператора. Требования к содержанию и оформлению
- 6.19. Гост 19.508. Руководство по техническому обслуживанию. Требования к содержанию и оформлению
- Вопросы по теме
- 7. Оценивание характеристик качества программных средств
- 7.1. Оценивание функциональных возможностей
- 7.1.1. Функциональная пригодность
- 7.1.2. Корректность
- 7.1.3. Способность к взаимодействию
- 7.1.4. Защищенность
- 7.2. Оценивание надежности функционирования
- 7.3. Оценивание эффективности использования ресурсов эвм
- 7.4. Оценивание практичности
- 7.5. Оценивание сопровождаемости
- 7.6. Оценивание мобильности
- 7.7. Оценивание качества эксплуатационной и технологической документации
- 7.7.1. Документирование в процессах жизненного цикла
- 7.7.2. Технологическая документация
- 7.7.3. Эксплуатационная документация
- 7.8. Оценивание рисков в жизненном цикле
- 7.9. Интегральное оценивание характеристик качества
- Вопросы по теме
- 8. Сертификация программного обеспечения
- 8.1. Организация сертификации программных продуктов
- 8.2. Документирование процессов и результатов сертификации
- Вопросы по теме
- Практические занятия практическая работа № 1 выбор характеристик и мер качества программного средства по стандарту isO 9126
- План практического занятия
- Практическая работа № 2 разработка технического задания на создание программного средства
- План практического занятия
- Практическая работа № 3 разработка технологической документации на программное средство
- План практического занятия
- Практическая работа № 4 разработка эксплуатационной документации на программное средство
- План практического занятия
- Практическая работа № 5 Оценивание качества программного продукта по стандарту гост 28195
- Словарь основных терминов
- Список использованных источников
- Перечень основных международных стандартов в области обеспечения жизенного цикла и качества программных средств
- 211440 Г. Новополоцк, ул. Блохина, 29