- Главная
- Менеджмент
- Методы качественного оценивания систем
Содержание
- 2. 1. МЕТОДЫ ТИПА «МОЗГОВАЯ АТАКА» ИЛИ «КОЛЛЕКТИВНАЯ ГЕНЕРАЦИЯ ИДЕЙ» Методы оценивания систем разделяются на качественные и
- 3. Более сложные задачи оценивания разделяются на задачи парного сравнения, ранжирования, классификации, численной оценки. При этом задача
- 4. Концепция «мозговая атака» получила широкое распространение с начала 50-х гг. как метод тренировки мышления, нацеленный на
- 5. 2. МЕТОДЫ ТИПА СЦЕНАРИЕВ Методы подготовки и согласования представлений о задаче или анализируемом объекте, приведенные в
- 6. 3. МЕТОДЫ ЭКСПЕРТНЫХ ОЦЕНОК Группа методов экспертных оценок наиболее часто используется в практике оценивания сложных систем
- 7. Этапы экспертизы: формирование цели; разработка процедуры экспертизы; формирование группы экспертов; опрос, анализ и обработка информации. При
- 8. Тип используемых процедур экспертизы зависит от задачи оценивания. К наиболее часто используемым процедурам экспертных измерений относятся:
- 9. Ранжирование – метод представляет процедуру упорядочения объектов, выполняемую экспертом. На основе знаний и опыта эксперт располагает
- 10. В практике ранжирования чаще всего применяется числовое представление последовательности в виде натуральных чисел: т.е. используется числовая
- 11. При групповом ранжировании каждый S-й эксперт присваивает каждому i –му объекту ранг riS . В результате
- 12. Парное сравнение – метод представляет процедуру установления предпочтения объектов при сравнении всех возможных пар. В отличие
- 13. Используя числовое представление (1), составим матрицу измерения результатов парных сравнений. В табл. 2 по диагонали располагаются
- 14. Вместо представления (2) используют эквивалентное ему представление вида которое получается из (2) заменой 2 на +1,
- 15. Множественные сравнения – отличаются от парных тем, что экспертам последовательно предъявляются не пары, а тройки, четверки,
- 16. Измерения в шкале интервалов могут быть достаточно точными при полной информированности экспертов о свойствах объектов. Эти
- 17. Наиболее сильным является последнее предположение об аддитивности оценок альтернатив. Согласно методу Черчмена-Акоффа альтернативы При достаточно большом
- 18. Метод Черчмена-Акоффа является одним самых эффективных, его использует при измерениях в шкале отношений. В этом случае
- 19. Т.о., устанавливается существование функции полезности значение которой характеризует степень предпочтительности любой смешанной альтернативы, в частности и
- 20. 4. МЕТОДЫ ТИПА ДЕЛЬФИ Название метода экспертной оценки типа Дельфи связано с древнегреческим городом Дельфи, где
- 21. Процедура Дельфи-метода заключается в следующем: организуется последовательность циклов «мозговой атаки»; разрабатывается программа последовательных индивидуальных опросов с
- 22. Метод QUEST (Qualitative Utility Estimates for Science and Technology – количественные оценки полезности науки и техники)
- 23. 5. МЕТОДЫ ТИПА ДЕРЕВА ЦЕЛЕЙ Термин «дерево целей» подразумевает использование иерархической структуры, полученной разделения общей цели
- 24. 6. МОРФОЛОГИЧЕСКИЕ МЕТОДЫ Основная идея методов систематически находить все мыслимые альтернативы решения задачи или реализации системы
- 25. Этап 2. Выделение показателей , от которых зависит решение задачи; при наличии точной формулировки выделение показателей
- 27. Скачать презентацию
Слайд 21. МЕТОДЫ ТИПА «МОЗГОВАЯ АТАКА» ИЛИ «КОЛЛЕКТИВНАЯ
ГЕНЕРАЦИЯ ИДЕЙ»
Методы оценивания систем разделяются на
1. МЕТОДЫ ТИПА «МОЗГОВАЯ АТАКА» ИЛИ «КОЛЛЕКТИВНАЯ
ГЕНЕРАЦИЯ ИДЕЙ»
Методы оценивания систем разделяются на
Простейшей формой задачи оценивания является задача измерения, когда оценивание есть сравнение с эталоном, а решение задачи находится подсчетом числа эталонных единиц в измеряемом объекте.
Слайд 3Более сложные задачи оценивания разделяются на задачи парного сравнения, ранжирования, классификации, численной оценки.
Более сложные задачи оценивания разделяются на задачи парного сравнения, ранжирования, классификации, численной оценки.
При этом задача парного сравнения заключается в выявлении лучшего из двух имеющихся объектов, ранжирования – в упорядочении объектов, образующих систему, по убыванию (возрастанию) значения некоторого признака, классификации – в отнесении заданного элемента к одному из подмножеств, численной оценки – в сопоставлении системе одного или нескольких чисел. Перечисленные задачи могут быть решены непосредственно лицом, принимающим решение (ЛПР), или с помощью экспертов (решение задачи оценивания называется экспертизой).
Качественные методы измерения и оценивания характеристик систем, используемые в CА, достаточно многочисленны и разнообразны.
К основным методам качественного оценивания систем относят:
методы типа мозговой атаки или коллективной генерации идей;
типа сценариев;
экспертных оценок;
типа Дельфи;
типа дерева целей;
морфологические методы.
Слайд 4Концепция «мозговая атака» получила широкое распространение с начала 50-х гг. как метод тренировки
Концепция «мозговая атака» получила широкое распространение с начала 50-х гг. как метод тренировки
Применение метода КГИ основывается на выполнении определенные правил:
обеспечения как можно большей свободы мышления участников КГИ и высказывания ими новых идей;
высказывания любых идей, даже если вначале они кажутся сомнительными или абсурдными (обсуждение и оценка идей производятся позднее);
не допущения критики любой идеи, не объявляя ее ложной и не прекращая обсуждения;
рассмотрения как можно больше идей, особенно нетривиальных.
В зависимости от принятых правил их выполнения различают прямую «мозговую атаку», метод обмена мнениями и другие виды коллективного обсуждения идей и вариантов принятия решений. В последнее время стараются ввести правила, помогающие сформировать некоторую систему идей, т.е. предлагается, например, считать наиболее ценными те из них, которые связаны с ранее высказанными и представляют собой их развитие и обобщение. Участникам не разрешается зачитывать списки предложений, которые они подготовили заранее. В то же время, чтобы предварительно сориентировать участника на обсуждаемый вопрос, при организации сессий КГИ заранее или перед началом сессии участникам представляется некоторая предварительная информация об обсуждаемой задаче в письменной или устной форме.
Слайд 52. МЕТОДЫ ТИПА СЦЕНАРИЕВ
Методы подготовки и согласования представлений о задаче или анализируемом объекте,
2. МЕТОДЫ ТИПА СЦЕНАРИЕВ
Методы подготовки и согласования представлений о задаче или анализируемом объекте,
Сценарий предусматривает содержательные рассуждения, которые помогают не упустить детали, обычно не учитываемые при формальном представлении системы, и содержит результаты количественного технико-экономического или статистического анализа с предварительными выводами, которые можно получить на их основе. Группа экспертов, подготавливающих сценарии, пользуется правом получения необходимых справок от различных организаций и консультаций специалистов. Понятие сценариев расширяется в направлении областей применения, форм представления и методов их разработки: в сценарий не только вводятся количественные параметры и устанавливаются их взаимосвязи, но и предлагаются методики составления сценариев с использованием ЭВМ.
Сценарий является предварительной информацией, на основе которой проводится дальнейшая работа по прогнозированию или разработке вариантов проекта. Т.о., сценарий помогает составить представление о задаче и затем приступить к более формализованному представлению системы в виде графиков, таблиц для проведения других методов системного анализа.
Слайд 63. МЕТОДЫ ЭКСПЕРТНЫХ ОЦЕНОК
Группа методов экспертных оценок наиболее часто используется в практике оценивания
3. МЕТОДЫ ЭКСПЕРТНЫХ ОЦЕНОК
Группа методов экспертных оценок наиболее часто используется в практике оценивания
Все множество задач, решаемых методом, делится на два класса. К первому классу относятся, которые достаточно обеспечены информацией. При этом методы опроса и обработки основываются на использовании принципа «хорошего измерителя», т.е. эксперт – источник достоверной информации; групповое мнение экспертов близко к истинному решению. Ко второму классу относятся задачи, в отношении которых знаний для уверенности в указанных гипотезах недостаточно. В этом случае необходимо осторожно подходить к обработке результатов экспертизы.
Экспертные оценки несут в себе как узко субъективные черты, присущие каждому эксперту, так и коллективно-субъективные, присущие группе экспертов. И если первые устраняются в процессе обработки индивидуальных экспертных оценок, то вторые не исчезают, независимо от способов их обработки.
Слайд 7Этапы экспертизы: формирование цели; разработка процедуры экспертизы; формирование группы экспертов; опрос, анализ и
Этапы экспертизы: формирование цели; разработка процедуры экспертизы; формирование группы экспертов; опрос, анализ и
При обработке материалов коллективной экспертной оценки используются методы теории ранговой корреляции. Для количественной оценки степени согласованности мнений экспертов используется коэффициент конкордации W, позволяющий оценить согласованность между собой рядов предпочтительности, построенных каждым экспертом. Его значение находится в пределах , где W=0 означает полную противоположность, a W=1 – полное совпадение результатов ранжировок (достоверность считается хорошей, если W=0,7-0,8). Небольшое значение коэффициента конкордации, характеризующее слабую согласованность мнений экспертов, является следствием того, что в группе экспертов отсутствует общность мнений или внутри группы экспертов существуют подгруппы с высокой согласованностью мнений, однако обобщенные мнения таких подгрупп противоположны.
Для наглядности представления о степени согласованности мнений экспертов А и В служит коэффициент парной ранговой корреляции р, принимающий значения . Значение р =+1 характеризует полное совпадение оценок в рангах двух экспертов (полная согласованность мнений двух экспертов), а значение р =-1 – двум взаимно противоположным ранжировкам важности свойств (мнение одного эксперта противоположно мнению другого).
Слайд 8Тип используемых процедур экспертизы зависит от задачи оценивания.
К наиболее часто используемым процедурам
Тип используемых процедур экспертизы зависит от задачи оценивания.
К наиболее часто используемым процедурам
парное сравнивание;
множественные сравнения;
непосредственная оценка;
Черчмена-Акоффа;
метод Терстоуна;
метод Неймана-Моргенштерна.
Целесообразность их применения определяется характером анализируемой информации. Если необходимы качественные оценки объектов по некоторым качественным признакам, то используются методы ранжирования, парного и множественного сравнения. Если информация позволяет получить численные оценки, то используют методы численной оценки, начиная от непосредственных численных оценок и кончая методами Терстоуна и Неймана-Моргенштерна.
При описании каждого из данных методов предполагается, что имеется конечное число измеряемых или оцениваемых альтернатив свойств (объектов) A={a1,a2,.,.,an} и сформулированы один или несколько признаков сравнения свойств объектов. Следовательно, методы измерения различаются процедурой сравнения объектов, которая включает построение отношений между объектами системы, выбор преобразования и определение типа шкал измерений. С учетом изложенных обстоятельств рассмотрим возможность применения каждого метода измерения.
Слайд 9Ранжирование – метод представляет процедуру упорядочения объектов, выполняемую экспертом. На основе знаний и
Ранжирование – метод представляет процедуру упорядочения объектов, выполняемую экспертом. На основе знаний и
Пусть среди объектов нет одинаковых по сравниваемым показателям, т.е. нет эквивалентных объектов. В этом случае между объектами существует только отношение строгого порядка. В результате сравнения всех объектов по отношению строгого порядка составляется упорядоченная последовательность a1>a2>…>aN, где объект №1 является наиболее предпочтительным из всех объектов, объект с №2 менее предпочтителен, чем объект №1, но предпочтительнее всех остальных объектов и т.д. Полученная система объектов с отношением строгого порядка при условии сравнимости всех объектов по этому отношению образует полный строгий порядок. Для этого отношения доказано существование числовой системы, элементами которой являются действительные числа, связанные между собой отношением неравенства >. Это означает, что упорядочению объектов соответствует упорядочение чисел x1>…>xN, где .
Соответствие перечисленных последовательностей можно осуществить, выбирая любые числовые представления в предположении монотонности преобразования. Т.е., допустимое преобразование при переходе от одного числового представления к другому должно обладать свойством монотонности. Таким свойством допустимого преобразования обладает шкала порядков, поэтому ранжирование объектов представляет измерение в порядковой шкале.
Слайд 10В практике ранжирования чаще всего применяется числовое представление последовательности в виде натуральных чисел:
В практике ранжирования чаще всего применяется числовое представление последовательности в виде натуральных чисел:
т.е. используется числовая последовательность. Числа x1,x2,…, xN называются рангами и обычно обозначаются буквами r1,r2,…,rN. Применение строгих численных отношений «больше» (>), «меньше» (<) или «равно» (=) не всегда позволяет установить порядок между объектами. Поэтому наряду с ними используются отношения для определения большей или меньшей степени какого-то качественного признака (отношения частичного порядка, например полезности), отношения типа «более предпочтительно» ( ), «менее предпочтительно» ( ), «равноценно» (=) или «безразлично» (~). Упорядочение объектов при этом имеет вид: . Для отношения нестрогого линейного порядка доказано существование числовой системы с отношениями неравенства и равенства между числами, описывающими объект. Любые две числовые системы для нестрогого линейного порядка связаны монотонным преобразованием. Тогда ранжирование эквивалентных объектов представляет измерение в порядковой шкале. При ранжирования объектов, между которыми отношения строгого порядка и эквивалентности, числовое представление выбирается с.о. Наиболее предпочтительному объекту присваивается ранг «1», второму по – ранг «2» и т.д. Для эквивалентных объектов назначать одинаковые ранги, равные среднеарифметическому значению рангов, присваиваемых одинаковым объектам – такие ранги называют связанными рангами.
Слайд 11При групповом ранжировании каждый S-й эксперт присваивает каждому i –му объекту ранг riS
При групповом ранжировании каждый S-й эксперт присваивает каждому i –му объекту ранг riS
. Результаты группового экспертного ранжирования представляются в табл. 1.
Аналогичный вид имеет таблица, если осуществляется ранжирование объектов одним экспертом по нескольким показателям. При этом в таблице вместо экспертов в соответствующих графах указываются показатели.
Достоинство ранжирования – простота реализации, а недостатком - невозможность упорядочения большого числа объектов. При числе объектов, большем 10-15, эксперты затрудняются в их ранжировке, т.к. эксперт должен установить взаимосвязь между объектами, рассматривая их как единую совокупность. При увеличении числа объектов количество связей между ними растет пропорционально квадрату числа объектов. Анализ большой совокупности взаимосвязей между объектами ограничиваются психологическими возможностями эксперта. Оперативная память человека позволяет оперировать в среднем не более чем 7±2 объектами одновременно. Поэтому при ранжировании большого числа объектов эксперты могут допускать существенные ошибки.
Слайд 12Парное сравнение – метод представляет процедуру установления предпочтения объектов при сравнении всех возможных
Парное сравнение – метод представляет процедуру установления предпочтения объектов при сравнении всех возможных
В практике применения процедуры парного сравнения используются следующие числовые представления:
(1) (2)
Слайд 13Используя числовое представление (1), составим матрицу измерения результатов парных сравнений. В табл. 2
Используя числовое представление (1), составим матрицу измерения результатов парных сравнений. В табл. 2
Слайд 14Вместо представления (2) используют эквивалентное ему представление вида
которое получается из (2) заменой 2
Вместо представления (2) используют эквивалентное ему представление вида
которое получается из (2) заменой 2
Если сравнение пар объектов производится отдельно по различным показателям или сравнение осуществляет группа экспертов, то по каждому показателю или эксперту составляется своя таблица результатов сравнений. Сравнение во всех возможных парах не дает полного упорядочения объектов, поэтому дальше решается задача ранжирования объектов по результатам их парного сравнения.
последовательность эксперта объясняется различными причинами: сложностью задачи, неочевидностью предпочтительности объектов или разбиения их на классы, недостаточной компетентностью и четкой постановкой задачи, многокритериальностью рассматриваемых объектов и т.д. Непоследовательность мнений эксперта приводит к тому, что в результате парных сравнений при определении сравнительной предпочтительности объектов не получается ранжировка и даже отношений частичного порядка, не выполняется свойство транзитивности.
Слайд 15Множественные сравнения – отличаются от парных тем, что экспертам последовательно предъявляются не пары,
Множественные сравнения – отличаются от парных тем, что экспертам последовательно предъявляются не пары,
Непосредственная оценка – заключается в присваивании объектам числовых значений в шкале интервалов. Эксперту необходимо поставить в соответствие каждому объекту точку на определенном отрезке числовой оси. При этом необходимо, чтобы эквивалентным объектам приписывались одинаковые числа. На рис. 1 в качестве примера приведено такое представление для пяти объектов на отрезок числовой оси [0,1].
Поскольку за начало отсчета выбрана нулевая точка, то в примере измерение производится в шкале отношений. Эксперт соединяет каждый объект линией с точкой числовой оси и получает числовые представления объектов (см. рис. 1):
Слайд 16Измерения в шкале интервалов могут быть достаточно точными при полной информированности экспертов о
Измерения в шкале интервалов могут быть достаточно точными при полной информированности экспертов о
Эксперт, приписывая объекту балл, тем самым измеряет его с точностью до определенного отрезка числовой оси. Применяются 5-, 10- и 100-балльные шкалы.
Метод Черчмена-Акоффа (последовательное сравнение) –относится к числу наиболее популярных при оценке альтернатив. В нем предполагается последовательная корректировка оценок, указанных экспертами. Основные предположения, положенные в основу метода:
Слайд 17Наиболее сильным является последнее предположение об аддитивности оценок альтернатив. Согласно методу Черчмена-Акоффа альтернативы
При
Наиболее сильным является последнее предположение об аддитивности оценок альтернатив. Согласно методу Черчмена-Акоффа альтернативы
При
Слайд 18Метод Черчмена-Акоффа является одним самых эффективных, его использует при измерениях в шкале отношений.
Метод Черчмена-Акоффа является одним самых эффективных, его использует при измерениях в шкале отношений.
Метод фон Неймана-Моргенштерна – заключается в получении численных оценок альтернатив решений с помощью, так называемых вероятностных смесей. В
В литературе рассматривается также система предположений о свойствах смешанных и несмешанных альтернатив. К числу таких предположений относятся предположение о связности и транзитивности отношения предпочтительности альтернатив, предположение о том, что смешанная альтернатива
Слайд 19Т.о., устанавливается существование функции полезности значение которой характеризует степень предпочтительности любой смешанной альтернативы,
Т.о., устанавливается существование функции полезности значение которой характеризует степень предпочтительности любой смешанной альтернативы,
Рассмотренные методы экспертных оценок обладают различными качествами, но приводят в общем случае к близким результатам. Наиболее эффективно комплексное применение различных методов для решения одной и той же задачи. Сравнительный анализ результатов повышает обоснованность делаемых выводов. При этом следует учитывать, что методом, требующим минимальных затрат, является ранжирование, а наиболее трудоемким метод последовательного сравнения (Черчмена-Акоффа). Метод парного сравнения без дополнительной обработки не позволяет осуществить полное упорядочение объектов.
Слайд 204. МЕТОДЫ ТИПА ДЕЛЬФИ
Название метода экспертной оценки типа Дельфи связано с древнегреческим городом
4. МЕТОДЫ ТИПА ДЕЛЬФИ
Название метода экспертной оценки типа Дельфи связано с древнегреческим городом
Метод Дельфи первоначально был предложен как итеративная процедура «мозговой атаки», которая должна помочь снизить влияние психологических факторов и повысить объективность результатов. Однако почти одновременно Дельфи-процедуры стали основным средством повышения объективности экспертных опросов с использованием количественных оценок при оценке деревьев цели и при разработке сценариев за счет использования обратной связи, ознакомления экспертов с результатами предшествующего тура опроса и учета этих результатов при оценке значимости мнений экспертов.
Слайд 21Процедура Дельфи-метода заключается в следующем:
организуется последовательность циклов «мозговой атаки»;
разрабатывается программа последовательных индивидуальных опросов
Процедура Дельфи-метода заключается в следующем:
организуется последовательность циклов «мозговой атаки»;
разрабатывается программа последовательных индивидуальных опросов
в наиболее развитых методиках экспертам присваиваются весовые коэффициенты значимости их мнений, вычисляемые на основе предшествующих опросов, уточняемые от тура к туру и учитываемые при получении обобщенных результатов оценок.
Первое применение метода Дельфи к решению некоторых задач министерства обороны США, осуществленное RAND Corporation во второй половине 40-х гг., показало его эффективность и целесообразность распространения на широкий класс задач, связанный с оценкой будущих событий.
Недостатки метода Дельфи:
значительный расход времени на проведение экспертизы, связанный с большим количеством последовательных повторений оценок;
необходимость неоднократного пересмотра экспертом своих ответов, вызывающая у него отрицательную реакцию, что сказывается на результатах.
В 60-е гг. область практического применения метода Дельфи значительно расширилась, однако присущие ему ограничения привели к возникновению других методов, использующих экспертные оценки. Среди них особого внимания заслуживают методы QUEST, SEER и PATTERN.
Слайд 22Метод QUEST (Qualitative Utility Estimates for Science and Technology – количественные оценки полезности
Метод QUEST (Qualitative Utility Estimates for Science and Technology – количественные оценки полезности
Метод SEER (System for Event Evaluation and Review – система оценок и обзора событий) предусматривает два тура оценки. В каждом туре привлекается различный состав экспертов. Эксперты 1 тура – специалисты промышленности, эксперты 2 тура – наиболее квалифицированные специалисты из органов, принимающих решения, и специалисты в области естественных и технических наук. Эксперт каждого тура не возвращается к рассмотрению своих ответов за исключением тех случаев, когда его ответ выпадает из некоторого интервала, в котором находится большинство оценок (например, интервала, в котором находится 90 % всех оценок).
Слайд 235. МЕТОДЫ ТИПА ДЕРЕВА ЦЕЛЕЙ
Термин «дерево целей» подразумевает использование иерархической структуры, полученной разделения
5. МЕТОДЫ ТИПА ДЕРЕВА ЦЕЛЕЙ
Термин «дерево целей» подразумевает использование иерархической структуры, полученной разделения
Разновидностью методов дерева целей и Дельфи является метод PATTERN (помощь планированию посредством относительных показателей технической оценки), разработанный для повышения эффективности принятия решений в области долгосрочной научно-технической ориентации промышленной фирмы.
Сущность метода PATTERN заключается в следующем. Исходя из сформулированных целей потребителей продукции фирмы на прогнозируемый период осуществляется развертывание дерева целей. Для каждого уровня дерева целей вводится ряд критериев. С помощью экспертной оценки определяются веса критериев и коэффициенты значимости, характеризующие важность вклада целей в обеспечение критериев. Значимость некоторой цели определяется коэффициентом связи, представляющим сумму произведений всех критериев на соответствующие коэффициенты значимости. Общий коэффициент связи некоторой цели (относительно достижения цели высшего уровня) определяется путем перемножения соответствующих коэффициентов связи в направлении вершины дерева.
Слайд 246. МОРФОЛОГИЧЕСКИЕ МЕТОДЫ
Основная идея методов систематически находить все мыслимые альтернативы решения задачи или
6. МОРФОЛОГИЧЕСКИЕ МЕТОДЫ
Основная идея методов систематически находить все мыслимые альтернативы решения задачи или
Цвикки предложил три метода морфологического исследования.
Метод систематического покрытия поля - основан на выделении так называемых опорных пунктов знания в любой исследуемой области и использовании для заполнения поля некоторых сформулированных принципов мышления.
Метод отрицания и конструирования, заключающийся в том, что на пути конструктивного прогресса стоят догмы и компромиссные ограничения, которые есть смысл отрицать, и следовательно, сформулировав некоторые предложения, полезно заменить их затем на противоположные и использовать при проведении анализа.
Метод морфологического ящика - состоит в определении всех мыслимых параметров, от которых может зависеть решение задачи, представить их в виде матриц-строк, а затем определить в этом морфологическом матрице-ящике все возможные сочетания параметров по одному из каждой строки. Полученные таким образом альтернативы могут снова подвергаться оценке и анализу в целях выбора наилучшего. Морфологический ящик может быть не только двумерным.
Исследование по методу морфологического ящика проводится в 5 этапов.
Этап 1. Точная формулировка поставленной задачи.
Слайд 25Этап 2. Выделение показателей , от которых зависит решение задачи; при наличии точной
Этап 2. Выделение показателей , от которых зависит решение задачи; при наличии точной
Этап 4. Оценка всех имеющихся в морфологической таблице (ящике) вариантов.
Этап 5. Выбор из морфологической таблицы наиболее желательного варианта задачи.
Морфологические ящики нашли широкое применение для анализа и разработки прогнозов в технике.