Оценка качества экспертиз

Метод экспертных оценок — одна из форм получения и оценки маркетинговой информации. Сущность этого подхода основывается на предположении о том, что мнение совокупности экспертов будет более правильным, чем мнение каждого эксперта по отдельности.

Использование метода экспертных оценок оправдано в том случае, когда получить необходимые данные прямо из первоисточника невозможно или сложно. Например, в ходе опроса не всегда можно получить от клиентов компетентную информацию, так как они могут не разбираться, скажем, в ряде технических или финансовых тонкостей. Также не всегда существует возможность получить какую-либо информацию от конкурентов.

В этом случае требуется помощь одного или нескольких экспертов, людей, разбирающихся в исследуемом вопросе на профессиональном уровне. Применение метода экспертных оценок рассчитано на получение от экспертов не только сознательной, но и подсознательной информации.

Практическая работа №2

Ранжирование и оценка рыночных факторов системы автосервиса

Ранжирование-Процесс выбора страниц из базы поисковой машины, соответствующих запросу пользователя, и упорядочение их по степени убывания соответствия (релевантности) запросу. Для ранжирования используется формула релевантности конкретной поисковой машины, в которой разные факторы, влияющие на релевантность, получают различные весовые коэффициенты. Формула релевантности всегда держится в секрете, или, по крайней мере, не делаются достоянием гласности веса каждого из факторов.

Для того, что бы правильно продвигать сайт необходимо знать и понимать не только терминологию поисковых систем, но и алгоритм их работы. Несмотря на тот факт, что на первый взгляд, кажется, что термина поисковых систем являются довольно сложны и трудны к восприятия, на самом деле ничего сложного нет. Перейдем к рассмотрению основных методов ранжирования страниц сайта в поисковой выдаче.  1) Поточный подход. В данном подходе, абсолютно для каждого запрос-документа выдается определенное численное значение. Это значение имеет название характеризующая релевантность страницы (документа). Иными слова, при этом подходе мы берем определенную выборку сайтов (произвольную) и смотрим, релевантен сайт или нет. В поточном подходе смотрим на: запрос страница и просматриваем какую-то часть сайта.  2) По-парный подход. В данном подходе необходимо сравнивать два сайта – какой из сайтов лучше. Иными слова, при «по-парном» подходе на вход системы попадают два документа, которые нужно сравнить и уже из этих двух документов выбирает один, который наиболее лучше и качественнее выдает ответ на поставленный запрос.  3) Списочный подход. В данном случае на вход попадают сразу все существующие документы, которые отвечают на запрос-документ. Дальше, применяется какая-либо ранжирующая модель, благодаря которой на выходе получаем отранжированный список. 

Ранжирование рабочих мест осуществляют оценщики, то есть наиболее квалифицированные и обученные технологиям ранжирования опытные работники и руководители различных звеньев. Затем специальная комиссия рассматривает результаты ранжирования и подписывает соответствующий протокол. Ранжирование просто расставляет описания работ от наивысшего до низшего на основании какого-либо критерия (объем работы, сложность работы, значимость работы, цена ошибки и др.) Ранжирование – это простой и легкий для понимания и объяснения сотрудникам метод. Очень часто он выполняется быстрее других методов ОРМ. Когда лица, осуществляющие оценку, хорошо представляют выполняемую на оцениваемых рабочих местах работу, этот метод дает достаточно точные результаты. 

Практическая работа №3

Определение согласованности мнений экспертов по результатам ранжирование автомобилей

Конкордация Кенделла - это непараметрический статистикий тест. Он обычно используется для измерения статистической связи между несколькими выборками. И если для корреляции Пирсона используется дополнительное предположение о нормальности выборок и сравниваются одновременно только две выборки, то в конкордации Кенделла нет предположения о виде распределении и используется любое количество выборок.

Коэффициент конкордации Кендала используется для определения взаимосвязи (согласованности) оценок экспертов.

Значение коэффициента конкордации может находится в диапазоне от 0 до 1. Если W=0, считается, что мнения экспертов не согласованны. Если W=1, то оценки экспертов полностью согласованны.

 

Очень часто, в литературе, описание коэффициент конкордации Кендала, ограничивается формулами, в которых не учитываются связанные ранги, а критерий ограничивается требованием стремления W к единице, что существенно затрудняет его практическое использование. Тогда как в абсолютном выражении W может оказаться очень малым, но его значение будет статистически значимым для проверки гипотезы о равномерном распределении рангов (согласии ранжировок). Вычисление коэффициента конкордации без введения поправочных коэффициентов и проверки на статистическую значимость, может привести к существенным ошибкам.

Можно выделить 2 ограничения в использовании коэффициент конкордации Кендала:

• невозможность рассчитать согласованность мнений экспертов по каждой переменной в отдельности.

• коэффициент измеряет согласованность мнений в смысле их коррелированности, но не совпадения.

К сожалению, коэффициент конкордации не позволяет ответить на вопрос, какие из отобранных компетенций оставить, а какие исключить. Для ответа на этот вопрос можно использовать значения коэффициента вариации.

Практическая работа №4

Экспертиза конкурентной среды

Конкуренция - соперничество (борьба) производителей товаров и услуг за потребителя и более широкую долю на рынке при ограниченной возможности каждого из них воздействовать на общие условия обращения товаров и услуг на соответствующем рынке.      Конкурентная среда - условия, в которых производители товаров и услуг ведут борьбу за потребителя, поставщиков, партнеров и преобладающее положение на рынке.      Виды конкуренции:

• Законная конкуренция

• Недобросовестная конкуренция - направленные на приобретение преимуществ в предпринимательской деятельности действия хозяйствующих субъектов, противоречащие законодательству, обычаям делового оборота, требованиям добропорядочности и способное причинить убытки другим хозяйствующим субъектам-конкурентам либо нанести ущерб их деловой репутации.

    Цель проведения исследования конкурентной среды - изучение позиций и возможностей фирм-конкурентов; предполагает поиск ответов на четыре основные группы вопросов, вокруг которых строится структура системы слежения и борьбы с конкуренцией.

• Каковы основные цели конкурента?

• Каковы текущие стратегии достижения этих целей?

• Какими средствами располагают конкуренты, чтобы реализовать свои стратегии?

• Каковы их вероятные будущие стратегии?

    Ответ на первые три пункта должен обеспечить исходные данные для предвидения будущих стратегий. Анализ совокупности сведений по указанным четырем областям дает достаточно полную картину действий конкурентов.      По сути дела, разговор идет о сборе и анализе информации о потенциале фирм-конкурентов и уровне его использования. Имеются в виду такие составляющие потенциала , как финансово-экономическая, производственная, научно-техническая, кадровая, организационно-лоббисткая, маркетинговая.