Vetenskapen bakom bättre beslut.

Från psykofysik till styrelserum

En metod som formaliserades 1927 — och som har replikerats sedan dess.

Den parvisa jämförelsens idéhistoria börjar med ett praktiskt problem: hur mäter man saker som saknar en naturlig enhet?

Svaret, som psykologen Louis Leon Thurstone vid University of Chicago föreslog, var att jämföra sakerna direkt, i par. Hans artikel från 1927, A Law of Comparative Judgment, formaliserade denna insikt i en exakt matematisk modell.

Thurstones insikt byggde på en empirisk iakttagelse: människor är betydligt bättre på att svara på ”vilket av de här två ljuden är starkast?” än ”hur starkt är det här ljudet, på en skala från ett till tio?”

Varför par fungerar bättre än skalor

Den kognitiva belastningen vid betygsättning är högre än den verkar.

När du ber någon betygsätta hur viktig en strategisk prioritering är på en skala från ett till tio ber du hen att utföra flera kognitiva operationer samtidigt. Den processen för in systematiska fel i varje steg.

Det mest skadliga av dessa fel är förankringseffekten. Det första objektet som betygsätts tenderar att påverka alla efterföljande betyg; forskning av Tversky och Kahneman (1974) visade att förankringseffekter är både stora och anmärkningsvärt motståndskraftiga mot korrigering.

En andra felkälla är skalkomprimering. I praktiken undviker de flesta respondenter skalans ytterlägen och samlar sina svar i mitten — vilket är anledningen till att en enkät om tolv prioriteringar så ofta ger tolv saker som alla är ”mycket viktiga”.

Hur preferenser blir en rangordning

Sammanvägningsmetoden är enkel, transparent och matematiskt förankrad.

Givet n objekt att rangordna jämförs varje objekt med varje annat objekt exakt en gång. Det totala antalet jämförelser som krävs är n(n−1)/2.

Sammanväga individuella svar

Varje objekts poäng är dess vinstandel: andelen av dess jämförelser som det vann, där oavgjort eller överhoppat räknas som en halv. Att ordna objekt efter vinster är enkelt och transparent, och forskning visar att det står sig väl mot mer komplexa statistiska modeller (Shah & Wainwright, 2018).

Sammanväga gruppens svar

I gruppsessioner sammanvägs varje deltagares jämförelser innan den slutliga rangordningen beräknas. Gruppens totala vinster för en jämförelse är summan av de individuella rösterna från alla deltagare.

Avgörande är att det sammanvägda resultatet också visar hur oenigheten ser ut. Objekt som splittrar gruppen syns i datan — och det är ofta det mest värdefulla som en gruppsession ger.

Gruppsessionen som diagnostiskt verktyg

Den rangordnade listan är inte det enda resultatet. Hur oenigheten ser ut är lika viktigt.

Konventionella metoder för beslutsfattande i grupp har en grundläggande brist gemensamt: de är känsliga för i vilken ordning åsikter uttrycks. Den som talar först förankrar gruppen.

Grupper tenderar att diskutera det alla redan vet och underutnyttja det som bara en medlem vet. Det här är problemet med dold profil (Stasser & Titus, 1985). Att samla in varje persons val privat, före all diskussion, lägger varje synpunkt på bordet.

Var den används

Från psykoakustik till AI-träning — metoden skalar.

Strategisk planering och ledning

Analytic Hierarchy Process har använts vid strategiska beslut med höga insatser inom försvar, infrastruktur, sjukvård och offentlig förvaltning. En översikt från 2008 identifierade över 900 publicerade tillämpningar inom 19 olika områden.

Maskininlärning och AI

Förstärkningsinlärning från mänsklig återkoppling (RLHF), tekniken som används för att träna moderna stora språkmodeller, bygger helt på parvis jämförelse. Mänskliga bedömare får se två modellsvar och ombeds välja det bättre.

Sport och tävlingsrankning

Elo-rankingsystemet, som används i schack, fotboll och dussintals andra tävlingsområden, är nära besläktat med Bradley–Terrys parvisa modell.

Vidare läsning

Primärkällor och centrala texter.