1406

6. Оценочные системы.

Оценочная система формируется при индивидуальных и коллективных сравнительных оценках объектов экспертизы для определения степени достижения цели. Большое внимание при этом уделяется оценке сравнительной важности критериев.

7. Принятие коллективных решений.

Это одна из наиболее важных процедур процесса управления. Она предполагает не только расчет коллективной экспертизы, но и использование специальных методов открытого обсуждения альтернативных вариантов решения, дополнительного обмена информацией между лицами, принимающими непосредственное участие в процессе принятия решений, согласования, поиска компромисса. Повышение надежности экспертных оценок при разработке важных стратегических и тактических решений – одна из проблем эффективного управления предприятием. Важное место в экспертных технологиях занимают коллективные экспертизы.

Особенности коллективной экспертизы и ее свойства

Особенности и достоинства коллективной экспертизы состоят в следующем:

1.Более полное представление о ситуации. Опыт проведения экспертиз показывает, что отдельные эксперты нередко представляют достаточно детально различные аспекты анализируемой ситуации. Объединение и сопоставление экспертных заключений позволяет получить более полную картину объекта экспертизы.

2.Выявление заведомо неконкурентных вариантов. Сопоставление различных точек зрения способствует выявлению альтернативных вариантов, использование которых нецелесообразно.

3.Выявление верных личностных суждений. Правильное решение порой могут предложить высококлассные специалисты, глубоко разбирающиеся в узкой профессиональной области. Мнение таких экспертов может существенно отличаться от мнения большинства, но именно оно может оказаться верным.

4.Получение объективных оценок. Мнения отдельных экспертов содержат оттенок субъективизма. Поэтому обсуждение экспертных заключений (предусматриваемое рядом экспертов процедур) повышает их объективность. Этому же способствуют процедуры выработки коллективных экспертных суждений и оценок на основании индивидуальных суждений и оценок.

5.Получение оценок повышенной надежности. Экспертные заключения, получаемые в результате коллективных экспертиз.

141

Основные свойства коллективных решений

Существуют некоторые свойства коллективных решений, которые необходимо учитывать при обработке экспертной информации и выработке экспертных заключении по определению предпочтительности альтернативных вариантов. В их составе свойства:

–независимости. Результирующая коллективная экспертная оценка не зависит от добавления новых или исключения части старых рассматриваемых вариантов;

–непредвзятости. В результирующей коллективной оценке принципиально могут быть реализованы все возможные сочетания сравнительной предпочтительности вариантов решений;

–монотонности. Если какой-либо из экспертов изменил мнение в сторону коллективного, то результирующая коллективная оценка не изменится;

–ненавязанности. Всегда можно подобрать такие оценки сравнительной предпочтительности альтернативных вариантов, что в одном случае один альтернативный вариант будет лучше другого, а в другом случае – наоборот;

–отсутствия диктата. Не должно существовать сравнительной оценки альтернативных вариантов, данной одним из экспертов, которая принималась бы в качестве результирующей, независимо от сравнительных оценок, данных другими экспертами.

Направления развития экспертных технологий

1. Формирование экспертной комиссии.

При этом необходимо предусмотреть возможность эффективного взаимодействия экспертов с целью получения полной и адекватной оценки объекта экспертизы. В ее составе должны быть высокие профессионалы, имеющие опыт эффективной работы эксперта и хорошо знакомые с объектом экспертиз. Информационный обмен между экспертами необходим, прежде всего в экспертных процедурах, целью которых является выработка альтернативных вариантов решений в сложных ситуациях. Так, в основе экспертных процедур метода «мозговой атаки» лежит активный обмен информацией с обязательным приведением аргументации как в поддержку высказанной идеи, так и против нее. Без эффективной организации такого обмена информацией уровень подготовленности управленческих решений значительно снижается.

2. Организация и проведение экспертиз.

Наличие аналитической группы, профессионально владеющей технологией организации и проведения экспертиз, методами получения и анализа экспертной информации – одно из условий эффективности экспертиз. Совершенствованию методов экспертных оценок посвящен ряд работ. Они касаются систематизации разновидностей метода Дельфи. Дальнейшее развитие получают методы «мозговой атаки», сценариев, ситуационного анализа.

142

3. Получение достоверной экспертной информации.

К числу основных проблем в этой части относятся: представимость экспертной информации, однозначность измерений, адекватность, что весьма важно для определения корректных преобразований экспертной информации.

4.Определение результирующих экспертных оценок.

5.Многокритериальные оценки.

6.Корректная обработка и анализ результатов экспертиз.

7.Компьютерные системы поддержки.

Автоматизированные системы включают технологическое сопровождение, необходимое автоматическое обеспечение процесса экспертного оценивания для организации и проведения экспертиз специфического характера.

Расчет коэффициентов по качеству экспертов:

где Ккомп.экс – коэффициент компетентности от 0 до 1; Чвкл – число экспертов, высказавшихся за включение данного лица

143

Примеры:

1.Чобщ = 16 чел.; Чвкл = 10 чел.;

Кэкс.комп = 10/16 = 0,63 (достаточно высокий результат).

2.Энест = 8 руб. в 1 месяц; Эобщ=132 руб. в 1 год;

Кэкс.крет = 8/11 = 0,73 (высокая).

3.Эконф = 0 руб. в 1 месяц; Эобщ = 36 руб. в 1 полугодие;

Кэкс.конф = 0/6 = 0 (отсутствует).

4.Эв = 4 руб. в 1 месяц; Эобщ = 27 руб. в 1 квартал;

Кэкс.констр = 4/9 = 0,44 (среднее).

Характеристика основных качеств эксперта:

–высокая компетентность;

–высокая креативность;

–отсутствие конформизма;

–средняя конструктивность.

Вывод: эксперт пригоден, рекомендуем, эффективен и т.д.

Тема 13. ВОПРОС И ОПРОС В ИССЛЕДОВАНИИ СИСТЕМ УПРАВЛЕНИЯ

Вопрос как инструмент получения данных. Виды опросов в практике исследования.

Вопрос как инструмент получения эмпирических данных

Понятие вопроса

Познавательные возможности метода социологического опроса реализуются в диалогическом вопросно-ответном общении исследователя с респондентами. В этом общении именно вопрос выступает элементарным техническим инструментом опроса. Именно с помощью вопроса социолог получает в виде ответов респондентов ту совокупность единиц эмпирической информации (первичных данных), которая служит основой для установления социальных фактов.

144

Использование вопросов в социологических опросах базируется на многовековом опыте и результатах исследований вопросов в логике, гносеологии, философии, языкознании, психологии и других науках.

Познавательная задача вопроса – это определение искомой информации, необходимой исследователю для описания анализа, объяснения изучаемой переменной.

Основные концепции вопроса

Разработка вопроса предусматривает разделение и социальное обоснование двух его сторон: какую информацию необходимо получить с помощью данного вопроса (о чем нужно спросить) и как следует спросить данную группу респондентов, чтобы получить искомую информацию. В зависимости от того, как социологи решают эти задачи, различают несколько концепций вопроса:

а) тестовую, связанную с психологической традицией; б) традиционную; в) индикаторную;

г) расширенной информации.

Тестовая (психологическая) концепция вопроса предусматривает разработку множества вопросов, характеризующих только одну изучаемую переменную (установку, информированность, уровень интеллекта и т.д.). Принципиальным условием является то, что каждый отдельный вопрос и получаемая информация самостоятельного значения не имеют и не подлежат отдельной интерпретации. Состояние изучаемой переменной, показатель этого состояния являются результатом учета всей совокупности ответа.

Ясно, что в социологическом вопроснике соотношение вопроса с поставленной задачей совершенно иное. Обычно каждый отдельный вопрос предназначен для получения значений отдельной характеристики или единицы искомой информации. Значительно реже в социологическом вопроснике информация об одной переменной получается с помощью блока вопросов.

Это отличие тестового использования вопроса от социологического является принципиальным для методов оценки качества вопросников в социологии. Например, для оценки социологической анкеты не пригоден метод деления пополам или консистентный анализ, который механически переносятся в социологию из психологии.

Психологические тесты иногда применяются в социологии для изучения психологических характеристик респондентов, но информация такого рода имеет для социолога лишь вспомогательный характер. В то же время в практике социологических вопросов получили распространение

145

различные модификации тестов, механически заимствованных из психологии.

б) Традиционная концепция вопроса основана на тех вариантах исследовательских ситуаций, в которых полностью совпадают познавательная задача вопроса, его формулировка, восприятие смысла вопроса респондента, его желание и способность дать достоверный ответ. Это вопросы о месте жительства, годе рождения, режиме работы, о числе детей и т.д.

в) Индикаторная концепция вопроса, широко распространенная в современной исследовательской практике, основана на следующих посылках:

изучаемые переменные далеко не всегда доступны прямому наблю-

дению;

содержание переменных (или их совокупность) не тождественно содержанию индикатора, т.е. оно только представляет (репрезентирует) изучаемую переменную. Это означает, что индикатор или их совокупность должны отвечать требованиям полноты и достаточности. Следовательно, их отбор, использование и интерпретация нуждаются в социальном обосновании;

переход от ответов респондентов, полученных на вопросы-индика- торы, к определению состояния изучаемой переменной должен основываться на достаточно высоких корреляциях между значениями совокупности индикаторов. Таким образом, когда социолог ограничивается одним индикатором для изучаемой переменной, то он оказывается в рамках упрощенной информационной концепции. Если же социолог использует несколько индикаторов для изучаемой переменной, то он приближается к тестовой традиции.

г) Расширенная информационная концепция вопроса, основана на выделении трех элементов в структуре вопроса как исследовательского инструмента: 1) первый – это текст вопроса, задаваемого респонденту;

2)второй – это способ классификации полученного ответа. Иначе говоря, это решение кодировщика, которым может быть анкетер, интервьюер, респондент (в случае самозаполнения вопросника) о том, к какому классу явлений относится ответ на вопрос; 3) третий элемент вопроса в данной концепции – это искомая информация данного вопроса, связь с изучаемой переменной, которая задается исследователем.

Классификация вопросов интервью

Основные признаки классификации: 1) по компетентности опрашиваемых:

а) экспертный опрос (уполномочен, заинтересован, компетентен); б) обычный опрос.

146

стоятельно формулирует один из возможных ответов, основываясь на собственном понимании смысла вопроса. Ответ записывается либо интервьюером, либо самим респондентом.

Взакрытом вопросе область поиска ответов априорно (еще до контакта

среспондентом) жестко определена автором анкеты с помощью списка вариантов ответов. Ответ фиксируется, как правило, с помощью специальной отметки выбранного варианта (крестик, галочка и т.д.).

Полузакрытая формулировка вопроса дает возможность респонденту не только выбирать вариант из предложенного списка, но и записать дополнительные варианты.

Система оценки трудности вопроса

1. Структурные параметры вопросов (грамматика и лексика). Не рекомендуется:

а) избыточность терминов; б) неясность терминов, т.к. уровень внимания повышается при

легкости прочтения; в) вопрос более 20 слов – как очень сложный;

г) вопрос менее 5 слов – как очень простой; д) преобладание существительных над глаголами – отсутствие ощуще-

ния движения.

2. Уровень ясности смысла вопроса. Недопустимы:

а) формулировки с двойным отрицанием; б) обыденность в лексике (понижает интерес, лучше восклицание,

уточнение, просьба или даже требование).

Индикат – программный вопрос, а индикатор – задается респондентом

вупрощенной форме (количественная оценка):

1индикат = индикаторов.

3.Оценка трудности формирования ответа связана с параметрами: а) компетентность и кругозор респондентов; б) память на прошлые события; в) способность к воображению;

г) возможность исчисления (коммерческая тайна); д) возможность сравнения данных.

Повышение надежности информации1 зависит от комплекса параметров:

1.Статус (положение) опрашиваемого: заполнение паспортички.

2.Оценка компетентности экспертов.

1 Ядов В.А. «Социологические исследования». С.147–156.

148

3.Событийная информация или сведения о фактах поведения в прошлом и настоящем.

4.Четко отделять событийные факты от их интерпретаций.

5.Уточнения в вопросах о давно минувших событиях.

6.Вопросы на информированность по проблеме.

7.Максимальная дробность пунктов информации.

8.Вопросы на мотивацию, оценки и мнения.

9.Уточнения в вопросах о давно минувших событиях.

10.Вопросы-ловушки (ввести несуществующие понятия и попытаться оценить их).

11.Проективные вопросы (проектная микромодель).

12.Нестереотипные формулировки вопроса.

13.Вопросы-глушители среди однотипных вопросов-подсказок («галлоэффект»); (эхо-эффект); («за», «против»).

14.Снижение симметрии позитивных и негативных полюсов оценок.

15.Меньше лобовых (прямолинейных) вопросов.

16.Невозможностьуклонитьсяотответов(«незнаю», «непомню» ит.д.).

Виды опросов в практике управления

Интервью

Достоинства:

а) моделирование ситуаций; б) возможность получения глубинной информации о мнениях, мотивах,

представлениях респондентов; в) ситуация интервьюирования по форме, близкой к обыденному разго-

вору, способствует возникновению непринужденной обстановки общения и повышению искренности ответов;

г) возможность вести наблюдение за психологическими реакциями респондента, ситуацией интервью и в случае необходимости проводить соответствующую корректировку;

д) личный контакт интервьюера с респондентом обеспечивает максимальную полноту реализации познавательных задач вопросника.

Общение интервьюера с респондентом, для которого характерен подчеркнуто личностный характер взаимодействия, обеспечивает более серьезные отношения респондента к опросу.

Вербальный характер общения устраняет проблему непоследовательного незапланированного восприятия вопросов.

Недостатки:

а) субъективизм оценок и мнений; б) значительные затраты времени и средств;

в) большая численность исследователей.

149

Анкетный опрос

Групповой опрос (аудиторный) – наиболее популярная в отечественной социологии разновидность метода опроса.

Его организационно-методическая специфика представляется на первый взгляд очевидной: это – анкетирование, проводимое в аудитории, чаще всего по месту работы респондента, и основано на производственной выборке.

Достоинства:

а) дешево; б) быстро;

в) на одной территории; г) просто расшифровывать ответы.

Недостатки:

а) формализм, без учета индивидуальных особенностей; б) ненадежная информация;

в) затягивание опроса во времени (т.к. ситуация быстро меняется).

Социометрический опрос

В узком смысле под социометрическими методами понимаются методы исследования структуры межличностных отношений в малой группе путем изучения выборов, сделанных членами группы по тому или иному критерию.

Тема 14. ЭКСПЕРИМЕНТИРОВАНИЕ В ИСУ

Функции и правила эксперимента. Классификация экспериментов.

Основные приемы выравнивания индивидуальных характеристик в группах.

Последовательность подготовки и проведения эксперимента. Основные виды эксперимента и их особенности.

Анализ данных повторных и сравнительных исследований.

Функции и правила эксперимента

Функции эксперимента:

а) проверка научных гипотез; б) получение экономических результатов;

в) достижение эффекта в управленческой деятельности. Правила эксперимента по Дж. Стюарту Миллю:

1. Правило согласия (по Миллю)

Ни один фактор не может быть признан причиной сравнительных явлений, если в одном случае он имеет место, а в другом нет.

150