Науката за по-добрите решения.

От психофизиката до заседателните зали

Метод, формализиран през 1927 г. — и потвърждаван оттогава отново и отново.

Интелектуалната история на сравнението по двойки започва с практически проблем: как да измериш неща, които нямат естествена мерна единица?

Отговорът, предложен от психолога Луис Леон Търстоун от Чикагския университет, бил нещата да се сравняват пряко, по двойки. Статията му от 1927 г., A Law of Comparative Judgment, превръща тази идея в точен математически модел.

Прозрението на Търстоун се основава на емпирично наблюдение: хората отговарят много по-добре на въпроса „кое от тези две е по-силно?“, отколкото на „колко силно е това по скала от едно до десет?“

Защо двойките работят по-добре от скалите

Когнитивното натоварване при оценяване е по-голямо, отколкото изглежда.

Когато помолите някого да оцени важността на стратегически приоритет по скала от едно до десет, го молите да извърши няколко когнитивни операции едновременно. Този процес внася систематична грешка на всяка стъпка.

Най-вредната от тези грешки е ефектът на котвата. Първият оценен елемент обикновено влияе на всички следващи оценки; изследване на Тверски и Канеман (1974) показва, че ефектите на котвата са големи и забележително устойчиви на корекция.

Втори източник на грешка е свиването на скалата. На практика повечето респонденти избягват крайните стойности и групират отговорите в средата — затова анкета с дванадесет приоритета толкова често връща дванадесет неща, които са до едно „много важни“.

Как предпочитанията стават класиране

Методът на обобщаване е прост, прозрачен и математически обоснован.

При n елемента за класиране всеки елемент се сравнява с всеки друг точно веднъж. Общият брой необходими сравнения е n(n−1)/2.

Обобщаване на индивидуалните отговори

При индивидуалните сесии резултатът произтича пряко от броя победи: всеки елемент получава една точка за всяко спечелено сравнение. Крайният списък подрежда елементите от най-много към най-малко победи.

Обобщаване на груповите отговори

При груповите сесии сравненията на всеки участник се обобщават преди изчисляването на крайното класиране. Общият брой победи на групата при всяко сравнение е сборът от индивидуалните гласове на всички участници.

Решаващото е, че обобщеният резултат показва и формата на несъгласието. Елементите, които разделят групата, личат в данните — и това често е най-ценният резултат от груповата сесия.

Груповата сесия като диагностичен инструмент

Подреденият списък не е единственият резултат. Формата на несъгласието е също толкова важна.

Обичайните методи за групово вземане на решения имат общ основен недостатък: зависят от реда, в който се изказват мненията. Който говори пръв, закотвя групата.

Това не е провал на отделните хора — а предвидимо следствие от груповата динамика. Изследванията последователно показват, че груповите дискусии дават по-неточни колективни преценки от обобщаването на независими лични преценки. Този ефект понякога се нарича проблем на скрития профил.

Къде се използва

От психоакустиката до обучението на ИИ — методът се мащабира.

Стратегическо планиране и управление

Аналитичният йерархичен процес (AHP) е използван при стратегически решения с висок залог в отбраната, инфраструктурата, здравеопазването и държавното управление. Преглед от 2008 г. установява над 900 публикувани приложения в 19 различни области.

Машинно обучение и ИИ

Обучението с подкрепление от човешка обратна връзка (RLHF), техниката, с която се обучават съвременните големи езикови модели, разчита изцяло на сравнението по двойки. На оценителите се показват два отговора на модела и те избират по-добрия.

Спорт и състезателни класирания

Системата Ело, използвана в шаха, футбола и десетки други състезателни области, е пряко приложение на модела на Брадли–Тери за двойки.

Допълнителна литература

Първоизточници и основни текстове.