Психодіагностика - Галян І.М. - Сутність експертного оцінювання

Метод експертного оцінювання є одним з різновидів опитування. Відрізняє його від масового опитування те, що респондентами є найкомпетентніші у досліджуваній сфері особи, тобто експерти. Це обумовлює техніку збирання, аналізу та використання інформації.

Особливо зацікавилися дослідницьким потенціалом експертного оцінювання після успішної реалізації Дельфійського проекту, який перевершив за багатьма параметрами (короткочасність, незначна трудомісткість, собівартість процедур) традиційні методики добування інформації. Забезпечили успіх оптимальний підбір експертів, своєчасне і всебічне інформування, ефективність організації всіх етапів оцінювальної діяльності.

Сутність експертного оцінювання

У психологічному дослідженні експертне оцінювання можна вважати самостійним методом пізнання і компонентом спостереження, опитування, експерименту, аналізу продуктів діяльності.

Експертне (лат. expertus - досвідчений) оцінювання (експертиза) - метод отримання узагальненої інформації шляхом оцінювання ситуації, події чи явища групою незалежних експертів.

Таку узагальнену інформацію отримують за допомогою експертного опитування, у якому беруть участь фахівці в галузі, яка цікавить дослідника.

При масових опитуваннях чим більшою є вибіркова сукупність, тим краще, оскільки підвищується їх репрезентативність, а в експертному опитуванні збільшення кількості експертів не поліпшує якості інформації. Оптимальна їх кількість - 25-30, а іноді й 10 осіб.

Експертне опитування можна застосовувати при вивченні всіх галузей діяльності, та особливо воно ефективне при діагностуванні, прогнозуванні, оцінюванні станів соціальних об'єктів, прийнятті рішень.

Отже, основною проблемою при застосуванні методу експертних оцінок є добір експертів, оскільки від них залежить цінність отриманих результатів. Завданням експерта - компетентного фахівця, що має досвід у конкретній галузі, - є формулювання власної думки про досліджуваний об'єкт або явище за певною шкалою відповідно до передбачених правил.

Найпростішим методом добору експертів є метод "грудки снігу". При використанні його головне - знайти одного фахівця у досліджуваній царині і з'ясувати, хто ще знається на цій проблемі. Успішним результатом є інформація про кількох фахівців, які внесуть свої пропозиції. Ця процедура триватиме доти, доки прізвища не почнуть повторюватися. Після цього підраховують, скільки разів згадано те чи те прізвище. Осіб, яких згадували найчастіше, включають до складу експертів.

Можна здійснювати добір експертів документальним методом, тобто на підставі певних якостей людей, зафіксованих у документах. Це можуть бути публікації з конкретної тематики або посилання на праці певного автора, участь у роботі різних рад, науковий ступінь та звання, стаж роботи за фахом та інші значущі для конкретного дослідження критерії.

При використанні методу атестації добір експертів здійснюється голосуванням у спеціально створеній для цього комісії.

Експериментальний метод добору експертів реалізується на підставі тестування або за результатами попередньої роботи експертів.

Для добору експертів можливе використання і методу самооцінки, суть якого полягає у застосуванні спеціальної анкети, відповідаючи на запитання якої, кандидат в експерти демонструє рівень знань та аналітичні здібності.

Експертне опитування поділяють за рівнем стандартизації процедур і технікою роботи. За рівнем стандартизації процедур можливе використання вільного та формалізованого інтерв'ю або анкети з відкритими запитаннями. Залежно від техніки роботи вдаються до:

а) бальних оцінок, коли експерт оцінює ті чи ті чинники у балах або розподіляє їх згідно із заданими критеріями, а бали присвоюють при обробленні даних;

б) ранжування, за якого експерт повинен упорядкувати запропоновані об'єкти, надаючи кожному відповідний ранг;

в) парного порівняння, коли із складених дослідником пар суджень експерт у кожній з них вказує ті судження, що переважають за заданим критерієм;

г) послідовного порівняння, що полягає у визначенні експертом важливості кожного чинника порівняно з іншими.

Різновиди експертного оцінювання застосовують на будь-якому етапі дослідження: при визначенні його цілей і задач, побудові і перевірці гіпотез, виявленні проблемних ситуацій, у процесі інтерпретації понятійного апарату, вироблення рекомендацій для обґрунтування адекватності використовуваного інструментарію.

Особливостями експертного оцінювання є циклічність процедури, відсутність прямого контакту експертів, анонімність учасників, оперування кількісними оцінками і їх аргументацією.

Отже, експертне оцінювання розглядається як процедура отримання оцінки проблеми на основі групової думки експертів. Цей метод є корисним з точки зору нівелювання помилок окремих дослідників (експертів) і вироблення єдино-правильної позиції чи прийняття кваліфікованого рішення.