17.2. Вопросы
Отчет по результатам анализа систем или исследования операций представляется заказчику в виде хорошо отработанной докладной записки или производящей внушительное впечатление брошюры, которые, демонстрируя ход анализа, в равной степени скрывают его недостатки. Существуют ли средства, с помощью которых заказчик мог бы защитить себя от субъективных склонностей исследователя или его ошибок и быть уверенным в том, что постиг содержание и возможное значение данного исследования? Полную уверенность он, естественно, может получить, только если детально разберет всю работу. Это невозможно. Однако существует весьма полезный и хорошо известный способ: можно задавать вопросы исполнителю.
Естественно, нельзя составить универсального, не зависящего от конкретного содержания работы перечня вопросов, позволяющего оценить ее качество. Однако даже примерный перечень вопросов позволяет хотя бы указать заказчику и исследователю на некоторые соображения, которые можно легко упустить в процессе работы. Хотя конкретные вопросы по отдельным деталям исследования будут, вероятно, более эффективны, чем вопросы общего порядка, однако последние могут быть также полезны как исследователю, так и лицу, оценивающему результаты его работ.
Обладает ли руководитель работ достаточной подготовкой и знаниями в данной области? Если нет, то по каким дополнительным соображениям ему может быть поручено руководство работой?
Свидетельствует ли предварительная постановка задачи исследования о понимании исполнителями характера недостающей информации? Насколько перспективным кажется предлагаемое направление исследований?
Насколько продумана организация работ? Разделена ли она по элементам и разработан ли график их выполнения по срокам? Есть ли оценка стоимости работ? Или же это исследование относится к тем работам, где об организационных вопросах и не помышляют?
Следующие вопросы можно задавать как на ранних, так и на поздних этапах анализа.
4. Какова цель анализа? Заключена ли она в том, чтобы выбрать единственный, наилучший курс действий; или в том, чтобы собрать информацию, хотя и недостаточную, чтобы служить единственной основой для выбора наилучшего курса действий, но все же полезную для подобного выбора; или в том, чтобы подтвердить справедливость действий, в которых кровно заинтересован исследователь или его заказчик? Если фирма хочет доказать, что ее изделие будет наилучшим образом удовлетворять условиям операции, то анализ систем используется, только чтобы установить, нет ли упущений в предлагаемой конструкции. Такое исследование не может служить основой для решения о начале разработки данной конструкции без дополнительного рассмотрения.
5. Кто ведет анализ? Хотя отсутствие личной заинтересованности исследователя не служит гарантией высокого качества работы, его заинтересованность в определенном результате сужает его кругозор. Исследования, выполняемые организацией, располагающей данными о нескольких независимых решениях, дадут более надежный результат, чем работа, выполненная промышленной фирмой, которая вряд ли способна на что-либо большее, чем на обоснование достоинств своего изделия.
5. Какое решение должен принять руководитель по результатам исследования? Насколько исследование может быть полезно руководителю?
Кто принимает решение? Один человек или организация? Понимает ли исследователь разницу между вопросами, решаемыми различными лицами или организациями?
Когда должно или может быть принято решение? Понимает ли исследователь разницу между проблемами, которые требуют скорого решения, и теми, решение которых может быть отложено на будущее?
Какие альтернативы решений были рассмотрены в процессе исследований? Есть ли неучтенные возможности?
Учел ли исследователь все необходимые факторы? Если нет, то как их учет может сказаться на результатах анализа? (Возьмем, например, исследование по выбору типа ракет для стратегических сил. Если в составе этих сил совместно с ракетами будут действовать самолеты, то следует учитывать их число и тип.)
Все ли альтернативные курсы действий, рассмотренные в анализе, возможны? Если нет, то как исключение нереальных альтернатив может сказаться на выводах? Некоторые альтернативные действия, например желательные или возможные в экономическом или военном отношении, в сущности, невозможны по политическим, культурным или другим принципиальным соображениям, неизвестным исследователю.
Учел ли исследователь все те последствия решений, которые следует иметь в виду, принимая такое решение?
Все ли исходные предположения четко выражены? Существуют ли альтернативные предположения, не рассмотренные в процессе исследований, которые могут быть столь же разумными? Имеются ли предположения, весьма необычные по существу? Могут ли некоторые предположения изменить характер выводов? Если некоторые условия могут повести к их изменению, то указаны ли подобные условия?
На каком основании некоторые альтернативы в предварительном анализе были исключены как не представляющие ценности? Обосновано ли это решение расчетами или суждениями? Если в расчетах использовались определенные формулы, то каковы ограничения их применения? Если использовались суждения, то кто и с учетом каких факторов проверил их справедливость?
Сколь разумны критерии, учтенные в подготовке решений? Как они согласуются с критериями более высокого уровня? Существуют ли другие критерии, которые также представляются разумными? Насколько чувствительны к подобным критериям выводы исследований?
Полностью ли раскрыл автор анализа системы свои субъективные суждения, и если такие суждения были использованы, то достаточно ли четко выражена логика, положенная в основу мнения исследователя?
Снизил ли исследователь эффективность своей работы тем, что передал трудный вопрос на решение руководителя, т.е. доказал ли исследователь свою способность довести исследование до того, чтобы исключить непригодные альтернативы?
Представлены ли результаты анализа в форме, удобной для использования, и выражены ли выводы столь ясно, чтобы они были понятны заказчику?
Указаны ли ограничения анализа так же искренне и четко, как и его положительные стороны?
Приведены ли в исследовании относительно простые правила для вычислений или любой другой системы действия, с помощью которых руководитель сможет самостоятельно исключить некоторые, не удовлетворяющие его альтернативы? Может ли он сделать это с помощью суждений или следует провести дополнительную работу, чтобы извлечь необходимые формулы из материалов исследования? Например, показаны ли соответствующие исходы действий по каждой из возможных альтернатив?
21. Представляются ли выводы интуитивно справедливыми? Достаточно ли убедительно материалы исследования подтверждают выводы? Если заключение представляется интуитивно справедливым, то будет ли это именно тем случаем, когда заключения могут быть достигнуты на основе интуиции? Если заключение не убедительно по интуитивной оценке, то будет ли это именно тем случаем, когда интуиция не может быть надежной? Или это, с другой стороны, служит указанием, что сам анализ может быть ошибочен, возможно, потому, что упущены некоторые незначительные или не поддающиеся аналитической обработке соображения, которые, однако, могут быть оценены интуитивно?
Если имеются специальные частные случаи, для которых заключения известны, то как они согласуются с общими выводами?
Рассмотрена ли именно главная проблема или наибольшее значение имеет не она, а другая, связанная с нею проблема?
Учтены ли в данном исследовании помимо неопределенностей в оценках параметров также неопределенности в достоверности внутренних связей модели, или неопределенности в оценке будущей обстановки, или вероятностные неопределенности и пр.?
Какие из возможных случайностей были рассмотрены? Существуют ли возможные, но не учтенные события? Если приведена величина вероятности появления отдельных событий, то субъективна или объективна такая оценка? Если субъективна, то для кого? Можно ли некоторые события считать случайными? Справедлива ли численная оценка вероятности их появления?
Правильно ли учтены возможности противника или конкурентов?
Если по новой разработке оцениваются несколько предложений, то произведено ли сравнение на общей основе и по единым правилам, как-то: 1) число областей конструкции, для создания которых необходимы научно-технические открытия; 2) число элементов конструкции, находящихся на пределе современного уровня развития техники; 3) число хорошо освоенных узлов конструкции; 4) предложения по системам руководства и контроля качества; 5) опыт работы подрядчика в данной области.
Выражены ли четко предположения, положенные в основу построения модели?
Приемлема ли данная модель?
а) правильно ли отражены в модели известные данные и ситуации?
б) приводят ли изменения основных параметров модели к появлению противоречивых или не заслуживающих доверия результатов?
в) пригодна ли данная модель для анализа частных случаев, в которых существуют указания на возможный результат?
г) позволяет ли модель установить причины известных результатов действия?
Учтены ли в данных исследованиях возможности использования других моделей?
Учтены ли в рекомендациях с достаточной полнотой возможные неопределенности?
- Анализ сложных систем
- Предисловие
- Выражение признательности
- 1. Введение
- 2. Анализ и принятие решений в военно-воздушных силах
- 2.1. Использование анализа при подготовке решений по структуре сил и разработке вооружения
- 2.2. Увеличение количества переменных величин
- 2.3. Подробное рассмотрение неопределенностей
- 2.4. Противник
- 2.5. Учет фактора времени
- 2.6. Расширение критериев
- 2.7. Заключение
- 3. Выбор и использование стратегических авиационных баз
- 3.1. Введение
- 3.2. Постановка задачи
- 3.3. Исходные положения
- 3.4. Альтернативы
- 3.5. Решающие факторы
- 3.6. План проведения анализа
- 3.7. Расстояние от базы до цели. Издержки, связанные с увеличением радиуса полета
- 3.8. Расстояние от базы до пунктов входа в зону обороны противника. Стоимость преодоления обороны
- 3.9. Расстояние от базы до континентальной части сша. Издержки на проведение операций за пределами сша
- 3.10 Влияние расстояния от базы до границы противника на издержки, связанные с уязвимостью базы
- 3,12 Неопределенность в оценке возможностей противника
- 3.14. Кампании при постоянной величине расходов
- 3.15. Гибкость системы и время кампании
- 3.16. Операции с заокеанских баз после проведения кампании против авиации противника
- 3.17. Ограничения эффективности систем и их гибкость
- 3.18. Заключение
- Элементы и методы
- 4. Зачем и каким образом создается модель
- 4.1. Выявление релевантных факторов
- 4.2. Выбор факторов, описываемых количественно
- 4.3. Объединение в группы описываемых количественно факторов
- 4.4. Установление количественных соотношений между элементами
- 4.5. Создание модели и реальный мир
- 4.6. Суждения человека
- 4.7. Модель, использующая вычислительную машину
- 4.8. Заключение
- 5. Критерии
- 5.1. Неизбежность приближенных критериев
- 5.2. Субоптимизация и критерии
- 5.3. Некоторые распространенные ошибки при выборе критериев
- 5.4. Что можно сделать?
- 6. Значение затрат39
- 6.1. Заданный объем ресурсов при единственной цели
- 6.2. Заданный объем ресурсов при нескольких целях
- 6.3. Переменный объем затрат ресурсов
- 6.4. Некоторые частные аспекты проблемы
- 7. Анализ и построение конфликтных систем44
- 7.1. Анализ систем в сравнении с моделями и проблемы, побуждающие к анализу
- 7.2. Пример из деятельности ввс - история межконтинентальных боевых действий
- 7.3. Цели и ограничения системных исследований
- 7.4. Более широкие задачи: параллельные и отдаленные цели
- 7.5. Происхождение и изменение целей
- 7.6. Сдерживание: пример с межконтинентальными полетами
- 7.7. Ведение войны
- 7.8. Противодействие и содействие противника
- 7.9. Малая ценность взаимно неудовлетворительных стратегий
- 7.10. Неопределенность и определение диапазона достижимых целей
- 7.11. Проектирование систем в сравнении с анализом систем
- 8. Методы и процедуры
- 8.1. Введение
- 8.2. Инженерное искусство
- 8.3. Методологические вопросы анализа систем
- Часть 3 специальные вопросы
- 9. Фактор техники
- 9.1. Введение
- 9.2. Технические характеристики
- 9.3. Параметры уровня развития техники
- 9.4. Законы масштабности
- 9.5. Оптимум и ограничения
- 9.6. Фактор надежности
- 10. Предположения о поведении противника
- 10.1. Введение
- 10.2. Пример проблемы выбора системы оружия из нескольких ее вариантов
- 10.3 - Выгодность четырех возможных результатов
- 10.3. Более широкое истолкование. Всесторонняя стратегия
- 10.4. Заключение
- 11. Методы теории игр и их применение
- 11.1. Использование военных игр
- 11.2. Методика военных игр
- 11.3. Этапы проведения военной игры
- 12. Стратегия разработок
- 12.1. Насколько велика неопределенность?
- 12,2. Что следует сделать для уменьшения неопределенности?
- 12.3. Каковы затраты на уменьшение неопределенности?
- 12.4. Какова степень уменьшения неопределенности продолжения разработки?
- 13. Математика и анализ систем
- 13.1. Линейное программирование
- 13.2. Метод Монте-Карло
- 13.3. Теория игр
- 13.4. Электронно-вычислительные машины
- 13.5. Роль математики
- 14. Применение электронно-вычислительных машин
- 14.1. Преимущества вычислительных машин
- 14.2. Недостатки вычислительных машин
- 14.3. Программирование модели
- 14.4. Постановка задачи
- 14.5. Несогласованность языков программирования
- 14.6. Заключение
- 15.1. Введение
- 15.2. Анализ стоимости отдельных систем
- 15.3. Анализ стоимости структуры вида сил
- 15.4. Анализ чувствительности модели стоимости
- 15.5. Представление результатов анализа
- 15.6. Заключение
- 16. Опасности анализа систем
- 16.1. Постановка задачи
- 16.2. Поиск
- 16.3. Толкование
- 16.4. Рекомендация
- 17. Повторение пройденного
- 17.1. Правила
- 17.2. Вопросы
- 17.3. Ретроспективный взгляд
- Введение в проблему создания лунной базы
- А.1. Базы на Луне - доводы за и против
- А.2. Некоторые элементы ракетной техники
- А.3. Варианты систем
- А.4. Модель системы прямого полета
- Сравнение ракетных систем
- Б.1. Введение
- Б.2. Пример
- Б.З. Сравнение ракет
- В.4. Заключение