Методы исследования систем управления. Учебное пособие
.pdfВажно подчеркнуть, что количество приглашаемых экспертов зависит, с одной стороны, от наличия специалистов нужной квалификации, а с другой стороны, особенностей метода исследования. Так, например, такие методы как дискуссия, мозговая атака, совещание, деловая игра, тем более результативны, чем большее количество экспертов принимает в них участие. Метод 6-3-5 предполагает определенное количество участников. Метод построения дерева целей ориентирован на индивидуальный опрос.
Вряде случаев мнение отдельного эксперта, как наиболее квалифицированного, представляется особенно важным. В этом случае, как правило, используется индивидуальная оценка. В тоже время может быть применена смешанная форма, как сравнение средних экспертных оценок и индивидуальной оценки отдельного эксперта.
При таких формах работы с экспертами как дискуссия, мозговая атака, совещание, деловая игра, 6-3-5, ориентированным на участие нескольких экспертов, фиксация результатов должна осуществляться в заранее разработанные организаторами бланки. Причем фиксировать результаты может как каждый из экспертов, так и ведущий. В этих случаях можно говорить не только о формализованном опросе экспертов, но и об использовании метода анализа документов (заполненных бланков).
Втоже время такой метод исследования систем управления, как дерево целей, может рассматриваться как индивидуальное интервью с необходимостью заполнения рисуночного бланка, который по своей сути представляет документ. В тоже время в этом случае можно говорить о полуструктурированном интервью.
3.4. НАБЛЮДЕНИЕ
Наблюдение — это сбор информации путём визуального фиксирования происходящих явлений и событий. Считается, что этот метод сбора эмпирических данных более объективный, чем опрос.
В ходе наблюдения могут фиксироваться разнообразные показатели: действия, жесты, мимика, выражение эмоций. При этом анализ может вестись как в отношении индивидов, так и групп.
Результаты наблюдений могут быть использованы для статистических методов, построения графиков и контрольных карт. На основе наблюдения может быть построено дерево целей. Материалы наблюдения могут экспертами для опосредованного анализа ситуации. Именно наблюдение часто используется в деловых играх.
Формы и приемы фиксации данных при наблюдении могут быть различными. Они могут фиксироваться лично (прямое наблюдение) или опосредовано (например, с использованием фото или видео аппаратуры).
61
Наблюдений могут быть разделены по степени формализации. Они
варьируются |
от |
формализованных |
(структурированных) |
до |
|
неформализованных (неструктурированных). |
|
|
|
||
Проведение |
формализованных наблюдений |
связано с разработкой |
|||
инструментов фиксации данных, которыми, как правило, выступают бланк или дневник наблюдений. На основе материалов формализованных наблюдений реализуются статистические методы исследований систем управления, строятся графики и контрольные карты. В тоже время дерево целей, как правило, строится на основе неструктурированных наблюдений эксперта.
При проведении деловых игр часто используются полуструктурированные формы наблюдения. В заранее заготовленных бланках предусматривается возможность комментариев наблюдателя, отражающие результаты неструктурированного получения данных. Этот же прием может быть использован при использовании многих эвристических методов, что позволяет говорить о наблюдении, как вспомогательном методе исследования.
Сказанное позволяет утверждать, что основной особенностью наблюдения
как метода сбора эмпирической информации, является |
возможность |
получения данных для многомерного анализа ситуации. |
|
К недостаткам наблюдения следует отнести высокую трудоемкость и, соответственно, достаточно большие сроки получения эмпирических данных. При использовании технологий стороннего наблюдателя (регистрируемого наблюдаемыми как наблюдатель) существенно снижается надежность полученных результатов из-за возможности преднамеренного изменения характера действий наблюдаемых. Это, например, существенно снижает качество данных, полученных в ходе деловых игр. При этом включенное наблюдение (наблюдатель является членом группы наблюдения) в основном устраняет этот недостаток. Однако в этом случае могут возникнуть проблемы с подробной фиксацией данных наблюдателем, вынужденным исполнять роль незаинтересованного в происходящем члена группы.
Кроме того, неправильно организованное наблюдение (например, приглашение для наблюдения нетипичной для генеральной совокупности фокус-группы) определяет частный характер выводов, которые может сделать исследователь. Учитывая, что в последнее время метод фокус групп активно используется многими исследователями, правильность выборки при проведении наблюдения приобретает особенно значимый характер. В тоже время проведение массовых, повторных и панельных наблюдений позволяет повысить качество полученных данных.
3.5. АНАЛИЗ ДОКУМЕНТОВ
Анализ документов позволяет получить данные о прошедших событиях, непосредственное наблюдение которых невозможно.
62
При анализе документов источником информации выступают разнообразные документы: текстовые сообщения, визуальный ряд.
Особенностью исследования документов является возможность получения данных за большие периоды времени.
Вуправленческой деятельности анализ документов является одним из основных методов сбора информации, а иногда единственно эффективным.
Основное назначение анализа документов: извлечь содержащуюся в документе информацию об изучаемом объекте и зафиксировать ее в виде признаков (категорий анализа), выработать с ее помощью объективные и субъективно-оценочные характеристики исследуемого процесса, явления. При этом значимым этапом при выборе документов является определение их надежности достоверности содержащейся в них информации.
Ограничением применения метода анализа документов является тот факт, что составляющая их информация, является вторичной (собранной, составленной другим исследователем). Ее достоверность и надежность зависят от позиции человека, проводившего первичное исследование. Поэтому только заведомо заслуживающие доверия документы могут быть использованы для анализа В других случаях, использование информации, представленной в документах, невозможно без предварительного анализа, проверки подлинности, достоверности, авторства документов и назначения информации.
Втоже время заслуживающие доверия документы, в первую очередь официальные документы, могут выступать источником аналитического и статистического анализа.
Традиционным для текстовых документов является качественный анализ, который включает исследование содержания:
автор;
цель создания;
форма и вид;
надежность документов;
достоверность используемой информации.
Всовременных исследованиях часто используется качественноколичественный метод анализа содержания документов или формализованный – контент-анализ. Его цель – выявление или измерения
количества выбранных смысловых единиц. Суть метода – сбор количественных данных об изучаемом явлении, объекте или процессе, содержащихся в документах.
Основная задача сбора информации в ходе контент-анализа – поиск индикатора, указывающего на наличие в документе исследуемой проблемы, идеи, темы. Для этого исследуемые документ (документы) должны быть систематизированы (упорядочены в категориях, в которых будет производиться исследование), которые и будут посчитаны, а результаты измерения выражены в количественных показателях (частота употребления, объем и т.п.)
63
При этом документ рассматривается как объект, используемый для хранения и передачи информации. При этом контент-анализ может быть использован для анализа различных типов документов: книг, газетных или журнальных статей, объявлений, телевизионных выступлений, кино- и видеозаписей, фотографий, лозунгов, этикеток, рисунков, произведений искусств, а также, официальных документов.
Категории анализа – смысловые единицы, обозначающие эмпирические признаки информации (индикаторы), являющиеся результатом операционализации опорных теоретических понятий в концепции исследования. Категории анализа характеризуются интенсивностью, направленностью, выраженной значимостью идеи, проблемы, темы.
Категории анализа могут характеризоваться как:
уместные, т.е. соответствовали решению исследовательских задач;
исчерпывающие, достаточно полно отражающие смысл основных понятий исследования;
взаимоисключающие (одно и то же содержание не должно входить в различные категории в одинаковом объеме);
надежные, не вызывающие разногласий между исследователями по
поводу своего отнесения к той или иной категории в процессе анализа документа.
Единицы анализа – части документа соответствующие категориям анализа. Если провести параллель классификатора и анкеты – категории анализа играют роль вопросов, а единицы анализа – ответов.
Единицы счета – количественная характеристика единицы анализа; фиксирует регулярность, с которой встречается в документе та или иная смысловая единица. За единицу счета могут быть приняты:
частота появления признака категории анализа,
объем внимания, уделяемый категории анализа. За единицу анализа текста может быть принято:
слово,
предложение,
тема,
идея,
автор,
персонаж,
социальная ситуация,
часть текста, объединенная чем-то, что соответствует смыслу категории анализа.
Так в текстах для установления объема внимания могут быть приняты: количество печатных знаков, абзац, площадь текста, выраженная в сантиметрах. Для газетных и других стандартных текстов – ширина колонки и высота высказывания. Для текстов, передаваемых устно, в качестве единицы счета могут использоваться единицы времени.
64
Считается, что контент-анализ наиболее эффективен в применении при изучении массовой документальной информации. При этом использование статистических методов исследования чрезвычайно актуально.
3.6. ЭКСПЕРИМЕНТ
Метод получения информации об изменении показателей деятельности социального объекта (индикаторов) в результате воздействия на него контролируемых или не контролируемых факторов (переменных). Основное назначение эксперимента выявление информации о причинно-следственных связях между исследуемыми явлениями, их свойствами,
В отличие от метода наблюдения на основе данных эксперимента не только получают описательную информацию, но и дают объяснение связей, отношений, процессов.
Отличительная особенность эксперимента состоит в том, что его проведение требует обязательной разработки и постановки гипотезы о причинно-следственных связях между исследуемыми явлениями или о характере какого-либо механизма функционирования системы управления. Такая гипотеза, выведенная логическим путем на основании теоретических или опытных данных, является основой разработки проведения методики эксперимента. Это требует от исследователя определенных усилий по интерпретации проблемы. Эффективность применения экспериментального метода к исследованию систем управления зависит от правильно разработанной методики (в том числе основ интерпретации полученных результатов). Все это говорит о необходимости владения экспериментатором определенным багажом профессиональных знаний, т.е. по сути, предъявляет к нему требования как к эксперту. С этим связано широкое использование эксперимента как основы качественного анализа при эвристических методах исследования систем управления, например, методом Дельфи, ранжирования
инепосредственного оценивания.
Втоже время при проведении большого количества данных, например, при проведении серии экспериментов, возможна статистическая обработка полученных результатов. В этом случае можно говорить об эксперименте, как наиболее объективном методе получения эмпирических данных.
Эксперимент может быть реальным или мысленным (имитация) как воображаемый опыт, невыполнимый в действительности. Использование мысленных экспериментов связано с тем, что применение реальных экспериментов при исследовании систем управления ограничены. Так, например, в области социальных отношений они должны использоваться крайне осторожно, так как предполагают изменение уже установившихся связей и отношений, последствие которых непредсказуемы. В этом случае целесообразно применять мысленные имитацию, которые позволяют смоделировать ситуацию, например, в ходе деловой игры, как
имитационного эксперимента. Однако в этом случае локальность
65
эксперимента ограничивает исследователя в возможностях широких обобщающих выводов. При этом достоверность результатов может обеспечить многократное повторение деловой игры как имитационного эксперимента, проведение его в разных группах, целенаправленное изменение контролируемых факторов проведения превращает деловую игру в живую модель ситуации. В этом случае возможно получение информации о поведении объекта исследования в критической ситуации, изменении внешних условий. Причем грамотно составленная программа эксперимента позволяет исследователю учитывать при анализе, например влияние на принятие управленческих решений динамизма ситуации, уровня неопределенности внешней среды, неполноты информации о текущей ситуации, конфликтности ситуации. При этом включение человека в эксперимент позволяет говорить об особенностях принятия управленческих решений.
Изменения условий проведения деловой игры позволяют говорить об игровом моделировании как ориентированном на задачи корректировки индивидуальных предпочтений и условий выработки решений, приемлемых для всех участников игры.
Накопление массива эмпирических данных по результатам деловых игр позволяет проводить статистическую оценку результатов и делать обобщающие выводы, в том числе на основе использования аналитических методов.
Моделирование может выступать средством эффективного отображения сложных хозяйственных ситуаций, в том числе с использованием компьютерных технологий. Принципиальным отличием компьютерного моделирования от игрового является исключение человека из цепочки принятия решения. От игрового моделирования. В тоже время.
Методы сбора эмпирических данных при проведении эксперимента разнообразны (наблюдение, опрос, анализ документов). Выбор метода определяется характером проводимого эксперимента.
3.7. ТЕСТИРОВАНИЕ
Тестирование – количественный метод исследований, позволяющий оценить и сравнить интересующие исследователя объекты по заданным параметрам. Тестирование может использовать опрос, наблюдение или анализ документов, как метод сбора эмпирической информации.
С помощью тестов целесообразно изучать и сравнивать между собой характерологические свойства различных объектов, выставлять им дифференцированные и сопоставимые оценки. Тестирования часто используют на практике в исследованиях, например при работе с персоналом.
Тестирование предполагает четкую процедуру сбора и обработки первичных данных, последующий качественный анализ их и интерпретацию.
66
Тесты (от англ. test – опыт, проба) в исследовании систем управления – это стандартизированные методики диагностики, представляющие собой серию относительно коротких испытаний (например, задач, вопросов, ситуаций и т.п.). Каждый тест имеет ключ, позволяющий обработать полученную информацию в соответствии с целями тестирования. Конструкция теста должна предполагать возможность обработки его результатов по определённым статистическим программам.
По форме представления тесты можно разделить на два основных типа: стандартизированные и проективные.
Проективные тесты предназначены для изучения психологических особенностей индивидов, особенностей их поведения. В основе проективных тестов лежит механизм проекции, согласно которому неосознаваемые психологические свойства личности и недостатки поведения индивид склонен приписывать другим людям. Чаще всего проективные тесты включают рассмотрение набора ситуаций. О психологических особенностях испытуемого судят на основании того, как он воспринимает и оценивает соответствующие ситуации, поведение людей, какие личностные качества и мотивы он им приписывает. Ключи к таким тестам, как правило, несколько размыты. Это определяет ориентацию на качественную обработку результатов проективных тестов. При этом большое значение имеет квалификация эксперта, оценивающего мнение испытуемого о ситуации.
Результаты |
проективных |
тестов может |
подвергаться |
статистической |
||
обработке, |
но это |
достаточно сложно |
из-за |
выраженной |
||
персонифицированности полученных результатов. |
|
|
|
|||
Стандартизированными |
называются |
тесты, |
прошедшие |
этап |
||
стандартизации (проверку на валидность и надёжность, соответствие другим требованиям, предъявляемым к тестам). Такие тесты ориентированы на оценку и могут служить надёжным ее инструментом. Ключ к таким тестам чаще всего содержит конкретные шкалы измерения рассматриваемых качеств.
Стандартизированные тесты в свою очередь делятся на два подтипа: тест
– опросник и тест – задание. При этом конкретные шкалы используются и в том и в другом случае.
Достоинством стандартизированных тестов является возможность получения больших массивов информации, позволяющих сделать количественные оценки относительно больших групп.
Недостатком стандартизированных тестов является возможность знания испытуемыми содержания теста, методику оценки его поведения. В этом случае результаты теста не являются истинными.
Другим недостатком стандартизированных тестов является потенциальное нарушение саморегуляции испытуемых, из-за чего они начинают волноваться, ошибаться в элементарных для них вопросах и заданиях.
67
Контрольные вопросы:
1.Что такое метод?
2.Что такое корреляционная связь?
3.Какая основная задача корреляционного анализа?
4.Какая основная задача регрессионного анализа?
5.Что понимается под однофакторной или парной корреляцией?
6.Назовите известные Вам графические методы исследования.
7.Для чего строится диаграмма Исикавы?
8.Какова цель построения диаграммы Парето?
9.Что такое тренд?
10.Что понимают под сезонностью?
11.Чем контрольные карты отличаются от обычных графиков?
12.Каковы основные элементы сетевого графика?
13.В чем смысл построения сетевого графика?
14.Какой путь называют критическим?
15.Перечислите основные логико-интуитивные методы исследования систем управления.
16.Что такое интуиция, и какую роль, по Вашему мнению, она играет при проведении исследований систем управления?
17.Назовите области применения методов экспертных оценок.
18.Раскройте содержание и порядок проведения организационных работ по использованию экспертных методов в исследованиях систем управления.
19.Каков порядок формирования экспертной группы?
20.Назовите требования, предъявляемые к экспертам экспертной комиссии.
21.Раскройте основные положения оценки согласованности мнений экспертов.
22.В чем состоит сущность методов рангов (ранжирования), непосредственного оценивания и последовательного сопоставления?
23.В чем состоит сущность и содержание метода парных сравнений?
24.В каких случаях применим метод парных сравнений?
25.В чем состоит сущность метода Дельфи?
26.Раскройте преимущества и недостатки метода Дельфи.
27.В чем состоит сущность метода «мозгового штурма?
28.Какие проблемы могут наиболее эффективно решаться методом
«мозгового штурма»?
29. Какие требования предъявляются к участникам мозгового штурма» и как они подбираются в группы?
30.Как эффективно обеспечить взаимодействие участников при «мозговом штурме»?
31.Раскройте сущность основных творческих методов исследования систем управления (творческого коллективного обсуждения, коллективного блокнота, контрольных вопросов, 6—3—5, морфологического анализа и др.).
68
32.Как Вы думаете, в каких условиях предпочтительнее использовать методы коллективных экспертных методов исследования, а в каких - индивидуальных?
33.Раскройте основные положения методов анкетирования и интервью и назовите их виды.
34.В каких условиях, на Ваш взгляд, наиболее эффективно интервьюирование, а каких – анкетирование?
35.Какие формы опроса используются в управленческом исследовании?
36.В чем сущность экспертного подхода?
37.Каковы виды метода наблюдения?
38.Раскройте достоинства и недостатки метода наблюдения.
39.В чем отличие методов наблюдение и эксперимент?
40.В чем сущность метода «контент-анализ»?
41.Как Вы думаете, почему в современных условиях при проведении исследования системы управления возрастает роль тестирования?
69
Список использованной литературы:
1.Мельников В.П., Схиртладзе А.Г. Исследование систем управления. .- М.: Юрайт, 2018. – 448 с.
2.Мишин В.М. Исследование систем управления. – М.: ЮНИТИ,
2010. – 528 с.
3.Мыльник В.В., Титаренко Б.П. Исследование систем управления.
–М.: Инфра-М, РИОР, 2014. – 240 с.
4.Серенков П.С., Курьян А.Г., Волонтей В.П. Методы менеджмента качества. Процессный подход. – М.: Новое знание, Инфра-М, 2017. – 448 с.
5.Фомичев А.Н. Исследование систем управления. – М.: Дашков и Ко, 2015 -348 с.
6.Фрейдина Е.В. Исследование систем управления. – М.: ОМЕГА-
Л, 2014. – 368 с.
70
