2.3.2 Практическое занятие: формирование ранговой оценки, построение и использование балльной шкалы, формирование групповых оценок в различных видах шкал

На третьем этапе исследования продолжим обработку ответов на вопросы анкеты из п. 2.2.3. Ответ на последний вопрос анкеты представляет собой оценку в номинальной шкале. Каждой команде студентов предлагается обобщить эти оценки методом простого квалифицированного большинства.

Это можно сделать с помощью таблицы, строки которой соответствуют рассматриваемым методам, а столбцы – множествам, на которые они разбиваются. Для каждой клетки таблицы необходимо решить вопрос – сколько экспертов отнесло данный метод к данному множеству? Если решение является единогласным, то оно и будет обобщенной групповой оценкой, и другие клетки таблицы в этой строке рассматривать не нужно. Например, если на вопрос: «Отнесли ли Вы метод № 1 к традиционным?» все эксперты ответили «да», нет необходимости спрашивать, отнес ли его кто-нибудь к не используемым или к оригинальным. Соответственно, метод № 1 относят к множеству традиционных в групповой оценке. Если решение не единогласное, суммируется компетентность экспертов, отнесших данный метод к данному множеству. Например, если 3 эксперта с коэффициентами компетентности 0,1, 0,1 и 0,2 отнесли метод № 2 к традиционным, а 2 эксперта с коэффициентами 0,3 и 0,3 – к оригинальным, то за первое множество проголосовало 0,4 общей компетентности группы, а за второе – 0,6, т.е. квалифицированное большинство. Соответственно, метод № 2 относят к множеству оригинальных в групповой оценке.

Если выявить квалифицированное большинство не удается, допускается уточнение оценки путем дискуссии.

В результате будет получено единое мнение о разбиении предложенных способов привлечения покупателей на три множества: «методы, которые не следует использовать», «традиционные методы, конкретизацию которых в рамках выделенного бюджета можно оставить на усмотрение исполнителей – менеджеров по сбыту и рекламе», «оригинальные методы, подлежащие дальнейшей экспертизе». Эти множества предоставляют преподавателю для проверки в виде трех списков. Дальнейшей экспертизе подлежит только третье множество, как это следует из его названия. Целесообразно, чтобы преподаватель скорректировал число и формулировку этих способов. Методом дискуссии они конкретизируются.

Осуществим дальнейшую экспертизу отобранных для нее способов. Метод ее проведения зависит от того, какого рода информацию должны быть предоставлена руководителю организации для принятия решения. Пусть руководитель ожидает получить от группы экспертов 1) их мнения о предпочтительности тех или иных способов в форме ранговой оценки; 2) дополнительную информацию об эффективности различных способов в форме численных оценок.

Итак, на четвертом этапе исследования экспертам необходимо проранжировать методы по предпочтительности. Метод индивидуального ранжирования может быть произвольным. Студентам предлагается для самопроверки использовать два метода – непосредственное упорядочение и неполное двоичное сравнение (по желанию можно осуществить полное). Затем следует сверить между собой результаты, полученные разными методами. Если обнаружились существенные различия, это говорит о непоследовательности эксперта, и имеет смысл еще раз обдумать свое мнение.

Кроме того, каждому студенту рекомендуется скорректировать свою итоговую ранговую оценку таким образом, чтобы исключить стандартизированные ранги. Это делается для того, чтобы впоследствии использовать менее сложную формулу для обработки оценок (см. п. 2.3.3).

Групповое ранжирование (обобщение индивидуальных ранговых оценок) предлагается осуществить четырьмя методами:

по числу первых мест;

по сумме рангов;

по сумме рангов с уточнением по числу первых мест;

по сумме квадратов рангов.

Если результаты применения этих методов существенно различаются, это различие нужно попытаться объяснить, а также сделать выводы о тех способах, для которых групповая оценка не зависит от выбранного метода.

На пятом этапе исследования экспертная группа переходит к получению численных оценок. Студентам предлагается самостоятельно методом дискуссии разработать 5-балльные шкалы для оценки следующих показателей:

А) ожидаемый прирост объема реализации продукции/услуг за следующий период;

Б) ориентировочная величина единовременных затрат;

В) долгосрочный эффект от использования различных способов привлечения покупателей (речь идет об оценке всех показателей помимо первых двух пунктов, об эффекте с точки зрения внутренних и внешних связей рассматриваемой фирмы, как системы).

Так как последний показатель – качественный, необходимо проявить особое внимание при формулировке описания каждой градации. Специфика построения этой шкалы зависит от конкретного предприятия (организации) и предложенных способов привлечения покупателей. Предположим, например, что эти способы могут оказать наиболее сильное влияние на имидж организации и обстановку в трудовом коллективе. Тогда можно предложить следующую шкалу^* (таблица 17):

Таблица 17 – Пример построения балльной шкалы для качественного показателя

Баллы	Описание градации
5	Положительное влияние на имидж организации и обстановку в трудовом коллективе
4	Положительное влияние хотя бы на одну из указанных выше сторон деятельности организации при отстутствии отрицательного влияния на другую
3	Отсутствие существенного влияния на имидж организации и обстановку в трудовом коллективе либо положительное влияние на одну из этих сторон при отрицательном влиянии на другую
2	Отрицательное влияние хотя бы на одну из указанных выше сторон деятельности организации при отстутствии положительного влияния на другую
1	Отрицательное влияние на имидж организации и обстановку в трудовом коллективе

Шкалы необходимо построить таким образом, чтобы с их помощью можно было оценить каждый из подлежащих экспертизе способов (как те, для которых показатели А, Б, В находятся на самом низком уровне, так и те, для которых они находятся на наиболее высоком уровне). Например, если шкала для показателя Б охватывает только затраты от 10 тыс. руб, а какой-либо из предложенных вариантов предусматривает затраты в 5 тыс. руб, то шкала построена неверно, так как не дает возможность оценить этот вариант.

Построенные шкалы предоставляются для проверки преподавателю.

Затем они используются для получения индивидуальных численных оценок (каждый студент оценивает все отобранные способы по трем показателям). На шестом этапе методом взвешенного среднего формируются групповые численные оценки по трем показателям. В качестве весов используются коэффициенты компетентности. Если отсутствует возможность использовать для расчетов ПК, студентам разрешается рассчитать эти оценки не для всех способов, а хотя бы для одного (но не для такого, для которого все мнения полностью совпадают).