Выбор численности группы экспертов.
Выбирают число экспертов, исходя из следующих соображений. Если искомое число уменьшать, то оценки становятся субъективными, так что теряется смысл группы. При чрезмерном числе, достоверность меняется несущественно, но растет доля малоквалифицированных оценок. Группа превращается в толпу. Учитывается также число оцениваемых событий. Стремятся к равному числу экспертов по каждому событию.
Формирование вопросов и составление анкет:
Работа экспертов регламентируется общими правилами:
– независимость мнения каждого эксперта;
– удобство работы с анкетой;
– удовлетворительное для экспертов время для ответов и уровень сложности;
– анонимность ответов для членов группы;
– коллективное обсуждение оцениваемых событий;
– представление экспертам нужной информации.
Экспертам предлагается шкала оценок: от 0 до 1 или от 0 до 10. Необходимо учитывать, что рост числа баллов вовсе не увеличивает точность оценок для сложных объектов. Иллюстрацией этому являются оценки членов комиссии на защите дипломных проектов. Оценки всегда различаются на один или даже два балла. Фактически действует четырех бальная система, причем погрешности оценок перекрывают всю шкалу. Увеличение числа баллов в такой ситуации бессмысленно – оценки будут напоминать генератор случайных чисел.
Разместить у себя на ресурсе или в ЖЖ:
На любом форуме в своем сообщении:
Комментирование закрыто.