Дар бораи рейтинги ҷуфтӣ
Илми қарорҳои беҳтар.
Муқоисаи ҷуфтӣ ғояи нав нест. Он дар тӯли қариб як аср тадқиқот дар психология, иқтисод ва илми қабули қарор омӯхта, санҷида ва тасдиқ шудааст.
Аз психофизика то толорҳои роҳбарият
Усуле, ки соли 1927 расман муқаррар шуд — ва аз он вақт боз такрор мешавад.
Таърихи зеҳнии муқоисаи ҷуфтӣ бо як масъалаи амалӣ оғоз мешавад: чизҳоеро, ки воҳиди табиии ченак надоранд, чӣ гуна чен кардан мумкин аст?
Ҷавоберо, ки равоншинос Луис Леон Терстоун аз Донишгоҳи Чикаго пешниҳод кард, ин буд, ки чизҳоро бевосита, ҷуфт-ҷуфт муқоиса кунанд. Мақолаи ӯ аз соли 1927, A Law of Comparative Judgment, ин фикрро ба модели дақиқи математикӣ табдил дод.
Фикри Терстоун ба мушоҳидаи таҷрибавӣ асос ёфта буд: одамон ба саволи «аз ин ду кадомаш баландтар аст?» назар ба «ин дар шкалаи аз як то даҳ чӣ қадар баланд аст?» хеле беҳтар ҷавоб медиҳанд.
Чаро ҷуфтҳо аз шкалаҳо беҳтар кор мекунанд
Сарбории маърифатии баҳодиҳӣ аз он чи ба назар мерасад, зиёдтар аст.
Вақте ки Шумо аз касе хоҳиш мекунед, ки аҳамияти як афзалияти стратегиро дар шкалаи аз як то даҳ баҳо диҳад, Шумо аз ӯ талаб мекунед, ки ҳамзамон якчанд амали маърифатиро иҷро кунад. Ин раванд дар ҳар қадам хатои мунтазамро ворид мекунад.
Зараровартарини ин хатоҳо таъсири лангар аст. Унсури аввалини баҳододашуда ба ҳамаи баҳоҳои минбаъда таъсир мерасонад; тадқиқоти Тверски ва Канеман (1974) нишон дод, ки таъсири лангар ҳам калон аст ва ҳам ба ислоҳ ба таври ҳайратовар тобовар.
Манбаи дуюми хато фишурдашавии шкала аст. Дар амал аксари посухдиҳандагон аз нӯгҳои шкала канорагирӣ карда, ҷавобҳоро дар мобайн ҷамъ мекунанд — аз ҳамин сабаб пурсиш дар бораи дувоздаҳ афзалият аксаран дувоздаҳ чизеро бармегардонад, ки ҳама «хеле муҳим»-анд.
Тамоми амал, ки такрор ба такрор иҷро мешавад, то он даме ки ҳар унсур бо ҳар унсури дигар муқоиса карда шавад.
Аз ҳар кас хоҳиш кунед, ки инҳоро аз даҳ баҳо диҳад — ҳарду нӯҳ мегиранд. Аз ӯ хоҳиш кунед, ки интихоб кунад — дар як сония ҷавоб медиҳад ва ба он бовар дорад.
Чӣ гуна афзалиятҳо ба рейтинг табдил меёбанд
Усули ҷамъбаст содда, шаффоф ва аз ҷиҳати математикӣ асоснок аст.
Агар n унсур барои рейтинг дошта бошем, ҳар унсур бо ҳар унсури дигар маҳз як маротиба муқоиса карда мешавад. Шумораи умумии муқоисаҳои зарурӣ n(n−1)/2 аст.
Ҷамъбасти ҷавобҳои инфиродӣ
Холи ҳар як унсур ҳиссаи бурдҳои он аст: қисми муқоисаҳое, ки он бурдааст, ки дар он баробарӣ ё гузарондан ҳамчун ним ҳисоб мешавад. Тартиб додани унсурҳо аз рӯи бурдҳо содда ва шаффоф аст ва тадқиқотҳо нишон медиҳанд, ки он дар муқоиса бо моделҳои мураккабтари оморӣ хуб истодагарӣ мекунад (Shah & Wainwright, 2018).
Ҷамъбасти ҷавобҳои гурӯҳӣ
Дар сессияҳои гурӯҳӣ муқоисаҳои ҳар иштирокчӣ пеш аз ҳисоб кардани рейтинги ниҳоӣ ҷамъбаст карда мешаванд. Шумораи умумии ғалабаҳои гурӯҳ дар ҳар муқоиса ҷамъи овозҳои инфиродии ҳамаи иштирокчиён аст.
Муҳимтар аз ҳама, натиҷаи ҷамъбастӣ инчунин шакли ихтилофи назарро ошкор мекунад. Унсурҳое, ки гурӯҳро тақсим мекунанд, дар маълумот намоёнанд — ва ин аксаран арзишмандтарин натиҷаи сессияи гурӯҳӣ аст.
Сессияи гурӯҳӣ ҳамчун абзори ташхис
Рӯйхати рейтингӣ ягона натиҷа нест. Шакли ихтилофи назар ҳамон қадар муҳим аст.
Усулҳои анъанавии қабули қарорҳои гурӯҳӣ як камбуди бунёдӣ доранд: онҳо ба тартиби изҳори назарҳо ҳассосанд. Шахси аввалине, ки сухан мегӯяд, гурӯҳро ба худ мебандад.
Гурӯҳҳо одатан он чиро муҳокима мекунанд, ки ҳама аллакай медонанд, ва аз он чи танҳо як узв медонад, кам истифода мебаранд. Ин мушкилоти профили пинҳон аст (Stasser & Titus, 1985). Ҷамъоварии интихоби ҳар як шахс ба таври махфӣ, пеш аз ҳар гуна муҳокима, ҳар як нуқтаи назарро ба миён мегузорад.
Дар куҷо истифода мешавад
Аз психоакустика то омӯзиши ЗС — усул миқёспазир аст.
Банақшагирии стратегӣ ва идоракунӣ
Раванди таҳлили иерархӣ дар қарорҳои стратегии масъулиятнок дар соҳаҳои мудофиа, инфрасохтор, тандурустӣ ва давлатдорӣ истифода шудааст. Баррасии соли 2008 зиёда аз 900 татбиқи нашршударо дар 19 соҳаи гуногун муайян кард.
Омӯзиши мошинӣ ва ЗС
Омӯзиши тақвиятӣ бо фикру мулоҳизаи инсон (RLHF), усуле, ки барои омӯзиши моделҳои муосири бузурги забонӣ истифода мешавад, пурра ба муқоисаи ҷуфтӣ такя мекунад. Ба арзёбони инсонӣ ду натиҷаи модел нишон дода мешавад ва аз онҳо хоҳиш карда мешавад, ки беҳтаринашро интихоб кунанд.
Варзиш ва рейтинги рақобатӣ
Системаи рейтинги Эло, ки дар шоҳмот, футбол ва даҳҳо соҳаҳои дигари рақобатӣ истифода мешавад, бо модели муқоисаи ҷуфтии Брэдли–Терри робитаи наздик дорад.
Барои хондани бештар
Манбаъҳои аввалия ва матнҳои асосӣ.
A Law of Comparative Judgment. Psychological Review, 34(4), 273–286.
Rank analysis of incomplete block designs. Biometrika, 39(3/4), 324–345.
A Scaling Method for Priorities in Hierarchical Structures. Journal of Mathematical Psychology, 15(3), 234–281.
Judgment under Uncertainty: Heuristics and Biases. Science, 185(4157), 1124–1131.
Pooling of Unshared Information in Group Discussion. Journal of Personality and Social Psychology, 48(6), 1467–1478.
Deep Reinforcement Learning from Human Preferences. NeurIPS 2017.
Simple, Robust and Optimal Ranking from Pairwise Comparisons. Journal of Machine Learning Research.
Сессияи инфиродӣ ё гурӯҳиро дар камтар аз ду дақиқа танзим кунед. Барои оғоз ҳисоб лозим нест.