Čo je posúdenie vynútenej voľby? Definícia, výhody, obmedzenia a aplikácie pri výbere vedúcich pracovníkov

V náročnom svete výberu vedúcich pracovníkov, rozvoja vedenia a posúdenia organizačných rizík sú metódy, ktoré používate na hodnotenie kandidátov, veľmi dôležité. Jeden formát posúdenia, ktorý si v posledných dvoch desaťročiach získal značnú pozornosť, je posúdenie vynútenej voľby – psychometrický nástroj navrhnutý na zníženie zaujatosti odpovedí a odhalenie autentických osobnostných vlastností. Napriek rastúcej adopcii si však mnohé organizácie nie sú jasné, čo posúdenia vynútenej voľby skutočne sú, ako fungujú, kedy ich používať a či skutočne splnia svoje sľuby.

Tento komplexný článok skúma posúdenia vynútenej voľby zo všetkých uhlov: ich definícia, historický vývoj, výhody a obmedzenia, metodológie skórovania a praktické aplikácie pri výbere vedúcich pracovníkov a organizačnej psychológii. Či ste HR odborník hodnotením nástrojov posúdenia, náborár snažiaci sa zlepšiť rozhodovacia procesy pri nábore, alebo organizačný psychológ navrhujúci systémy správy talentov, táto príručka vás vybavíí vedomosťami na informované rozhodovanie o posúdeniach vynútenej voľby.

Čo je posúdenie vynútenej voľby?

Definícia a základný koncept

Posúdenie vynútenej voľby je psychometrický meraný nástroj, ktorý respondentom predkladá dve alebo viac možností a vyžaduje si, aby si vybrali jednu bez možnosti neutrálnej, nerozhodnutej alebo „bez názoru" odpovede. Na rozdiel od tradičných ratingových škál (ako sú Likertove škály), ktoré umožňujú respondentom označiť rôzne stupne súhlasu alebo nesúhlasu s výrokom, posúdenia vynútenej voľby úplne eliminujú strednú cestu. Tento dizajn núti respondentov na zámerný výber, ktorý odhaluje ich skutočné preferencie, priority alebo osobnostné charakteristiky.

Základný princíp, na ktorom je postavené posúdenie vynútenej voľby, je jednoduchý: odstránením neutrálnych možností posúdenie zabraňuje respondentom, aby sa „vyzliekali" alebo sa podľahli bezpečným, spoločensky žiaducim stredným odpovediam. V kontexte posúdenia osobnosti položky vynútenej voľby typicky predstavujú dve alebo viac výrokov a požadujú respondentov, aby identifikovali, ktorý ich najlepšie popisuje, alebo aby zoradili možnosti podľa preferencie. Napríklad, namiesto hodnotenia súhlasu s „Rád viem viesť tímy" na škále 1–5, položka vynútenej voľby by mohla spýtať: „Ktorý výrok vás lepšie popisuje: (A) Radšej viem a riaďujem rozhodnutia, alebo (B) Radšej podporujem iniciatívy iných?"

Táto zdanlivo jednoduchá zmena dizajnu má hlboké dôsledky na to, ako sa osobnostné vlastnosti merajú, ako sa spravujú zaujatosti odpovedí a nakoniec, ako sa robí porovnávanie kandidátov v kontexte náboru a rozvoja.

Historický vývoj a evolúcia

Formát posúdenia vynútenej voľby sa neobjavio cez noc. Jeho korene siahajú do 40. a 50. rokov 20. storočia, keď psychometrickí odborníci začali experimentovať s alternatívnymi formátmi odpovedí na riešenie trvalých problémov s tradičnými ratingovými škálami. Raní výskumníci, vrátane L. L. Thurstona (ktorého práca neskôr informovala Thurstonove modely teórie položkovej odpovede), si uvedomili, že ratingové škály boli náchylné na systematické zaujatosti – respondenti tended súhlasiť s výrokmi bez ohľadu na obsah, vyberali si extrémne odpovede alebo sa zoskupovali okolo strednej možnosti.

Počas polovice 20. storočia sa formáty vynútenej voľby primárne používali v posúdeniach preferencií a meraní záujmov. Americká armáda a výskumníci v oblasti priemyselnej a organizačnej psychológie prijali metódy vynútenej voľby na posúdenie osobnosti a preferencií bez kontaminácie zaujatostí odpovedí. Tieto rané posúdenia vynútenej voľby však čelili významnej technickej výzve: skóre, ktoré vytvorili, boli ipsatívne, čo znamená, že mohli iba odhaliť relatívne silné stránky osoby v porovnaní s jej vlastnými inými vlastnosťami, nie ako sa porovnávali s inými ľuďmi – kritické obmedzenie pre rozhodovacia procesy pri výbere.

Krajina sa dramaticky zmenila v 90. rokoch a 2000-tych rokoch s vývojom pokročilých štatistických metód, zvlášť Thurstonove modely teórie položkovej odpovede (T-IRT). Výskumníci ako Andrew Brown a Ángeles Maydeu-Olivares vytvorili prístupy na skórovaní položiek vynútenej voľby spôsobmi, ktoré mohli priniesť normatívne (porovnateľné medzi osobami) skóre. Tento prelom znovu vzbudil záujem o posúdenie vynútenej voľby, zvlášť v vysokorizikových kontextoch, ako je výber vedúcich pracovníkov, kde boli falšovanie a nadhodnotenie odpovedí vážnymi obavami. Za posledných 15 rokov sa posúdenia vynútenej voľby stala čoraz bežnejšou v posúdeniach talentov, organizačnom rozvoji a výskume osobnosti a správania v organizáciách.

Dnes posúdenie vynútenej voľby predstavuje zrelý – hoci stále diskutovaný – prístup v psychometrike. Hlavní poskytovatelia posúdenia osobnosti začlenili formáty vynútenej voľby do svojich súprav posúdenia vedúcich pracovníkov, zatiaľ čo akademickí výskumníci pokračujú v skúmaní sľubov a obmedzení týchto metód.

Ako funguje vynútená voľba v praxi

Pochopenie toho, ako funguje posúdenie vynútenej voľby v reálnom svete administrácie, je nevyhnutné pre ocenenie jej silných a slabých stránok. Mechanika sa líši v závislosti od konkrétneho použitého formátu, ale základný princíp zostáva konštantný: respondenti si musia robiť aktívne voľby bez bezpečnostnej siete neutrálnych odpovedí.

V formáte párovanej voľby, najčastejšom prístupe v posúdeniach osobnosti, respondenti stretávajú položky predstavujúce dva výroky vedľa seba. Každý výrok typicky predstavuje inú osobnostnú vlastnosť alebo tendenciu správania. Respondent si musí vybrať ten, ktorý ho lepšie popisuje alebo je pre neho dôležitejší. Napríklad: „Pri práci na zložitom projekte som skôr (A) vypracujem podrobný plán pred začatím, alebo (B) začnem so základným problémom a prispôsobujem si podľa toho, ako sa učím." Respondent nemôže naznačiť, že sa obidve alebo ani jedna rovnako uplatňujú – musí si vybrať.

V formáte zoradenia sú respondentom predstavené tri alebo viac výrokov a je im požadované, aby ich zoradili od najdeskriptívnejších k najmenej deskriptívnym sebe. Táto variácia zachytáva nielen binárnu voľbu, ale úplné usporiadanie preferencií alebo vlastností. Formáty zoradenia poskytujú bohatšie informácie, ale môžu byť kognitívne náročnejšie pre respondentov.

V formáte viacchoice respondenti vyberajú jeden výrok zo zoznamu troch, štyroch alebo viacerých možností. Táto variácia je v posúdeniach osobnosti menej bežná, ale často sa používa v prieskumoch a výskume trhu.

Z pohľadu respondenta vyžaduje posúdenie vynútenej voľby aktívnu angažovanosť. Namiesto pasívneho hodnotenia svojho súhlasu s výrokom si musia respondenti kriticky myslieť na to, ktorá možnosť lepšie zachytáva ich skutočné správanie, preferenciu alebo charakteristiku. Táto kognitívna angažovanosť je zároveň výhodou (podporuje skutočnú reflexiu) a potenciálnou nevýhodou (môže sa cítiť kognitívne náročne a frustrujúco, ak respondenti cítia, že ani jedna možnosť ich skutočne nepopisuje).

Ako sa posúdenie vynútenej voľby líši od normatívneho (Likertova škála) posúdenia?

Ipsatívne vs. normatívne: základný rozdiel

Aby ste plne pochopili posúdenie vynútenej voľby, musíte pochopiť rozdiel medzi ipsatívnym a normatívnym meraním – rozdiel, ktorý zásadne formuje, ako sa výsledky posúdenia dajú interpretovať a používať. Tento rozdiel je taký dôležitý, že je často nesprávne pochopený, čo vedie k nesprávnym záverom o posúdeniach vynútenej voľby a ich vhodnosti pre rozhodovacia procesy pri výbere.

Ipsatívne posúdenie meria charakteristiky v rámci jednej osoby. Ipsatívne skóre odhaluje relatívne silné stránky a preferencie osoby v porovnaní s jej vlastnými inými charakteristikami, ale nehovorí nič o tom, ako sa táto osoba porovnáva s inými. Napríklad ipsatívne posúdenie môže povedať, že orientácia Sáry na vedenie je silnejšia ako jej analytická orientácia – ale nemôže povedať, či je Sára orientovanejšia na vedenie ako ostatní kandidáti v jej skupiny uchádzačov. Pri ipsatívnom skórovaní je súčet všetkých skóre vlastností pre jednotlivca pevne daný, čo znamená, že ak sa skóre jednej vlastnosti zvýši, aspoň jedno ďalšie sa musí znížiť. Táto matematická vlastnosť znemožňuje priame porovnávanie medzi jednotlivcami.

Normatívne posúdenie meria charakteristiky proti štandardizovanej referenčnej skupine alebo populačnej norme. Normatívne skóre odhaluje, ako sa úroveň vlastnosti jednotlivca porovnáva s ostatnými. Napríklad normatívne posúdenie môže naznačiť, že Sára dosahuje 75. percentil v orientácii na vedenie – čo znamená, že sa v tejto vlastnosti umiestnila vyššie ako 75 % referenčnej populácie. Normatívne skóre umožňujú zmysluplné porovnávanie medzi kandidátmi, čo ich robí nevyhnutnými pre rozhodovacia procesy pri výbere, kde potrebujete identifikovať najsilnejších kandidátov v porovnaní s referenčným bodom alebo s ostatnými.

Vzťah medzi formátom vynútenej voľby a ipsatívnym/normatívnym skórovaním je dôležitý, ale často nesprávne pochopený: formát vynútenej voľby automaticky neprodukuje ipsatívne skóre, ani formát Likerta automaticky neprodukuje normatívne skóre. Formát odpovede (vynútená voľba vs. ratingová škála) sa líši od metódy skórovania (ipsatívne vs. normatívne). Avšak, klasické skórovaní položiek vynútenej voľby – najjednoduchší a historicky najčastejší prístup – skutočne produkuje ipsatívne skóre. Pokročilé metódy skórovania, ako je Thurstonova IRT, môžu za určitých podmienok produkovať normatívne skóre z položiek vynútenej voľby.

Skórovaní a interpretácia výsledkov

Metóda skórovania aplikovaná na odpovede posúdenia určuje, či sú výsledky ipsatívne alebo normatívne – a táto voľba má obrovské praktické dôsledky. Pochopenie rozdielov medzi klasickými a pokročilými prístupmi skórovania je nevyhnutné pre hodnotenie posúdení vynútenej voľby.

Klasické ipsatívne skórovaní položiek vynútenej voľby je jednoduchý: zakaždým, keď respondent vyberie možnosť predstavujúcu konkrétnu vlastnosť, táto vlastnosť dostane jeden bod. Po zodpovedaní všetkých položiek sa skóre vlastností sčítavajú. Výsledkom je profil ukazujúci relatívne silné stránky respondenta. Ak Sára odpovedala na 12 položiek, kde bola „vedenie" možnosťou a vybrala si ju 8-krát, zatiaľ čo „analytiku" vybrala iba 5-krát, jej skóre vedenia (8) je vyššie ako jej skóre analytiky (5). Avšak, pretože ipsatívne skórovaní obmedzuje súčet všetkých vlastností, skóre Sáry nemôžu byť priamo porovnané so skórami iného kandidáta. Ak Tom tiež odpovedal na rovnaké položky a skóroval 8 na vedení a 5 na analytike, nemôžeme usúdiť, že Sára a Tom sú rovnako orientovaní na vedenie – ich distribúcia skóre môže odrážať rôzne vzorce odpovedí.

Normatívne prístupy skórovania, zvlášť Thurstonova IRT, aplikujú sofistikované štatistické modely na údaje vynútenej voľby na odvodenie skóre predstavujúcich absolútne úrovne vlastností porovnateľné medzi jednotlivcami. Tieto metódy odhadujú základnú latentnú hodnotu vlastnosti, ktorá najlepšie vysvetľuje vzor volieb respondenta, potom vyjadrujú túto úroveň vlastnosti na štandardizovanej škále (napr. T-skóre so strednou hodnotou 50 a štandardnou odchýlkou 10, alebo percentily). Výhodou je, že normatívne skóre umožňujú priame porovnávanie kandidátov. Nevýhodou je, že tieto metódy sú matematicky zložité, vyžadujú väčšie vzorky na spoľahlivý odhad a ich účinnosť závisí od kvality konštrukcie testu – zvlášť od počtu meraných vlastností a od toho, ako sú položky kódované.

Praktické dôsledky pre rozhodovacia procesy pri výbere

Rozdiel medzi ipsatívnym a normatívnym má priame, praktické dôsledky na to, ako by sa výsledky posúdenia mali používať v rozhodovacích procesoch pri nábore a povýšení. Tu sa teória prekladá do organizačnej praxe.

Ak používate posúdenie vynútenej voľby s klasickým ipsatívnym skórovaním, nemali by ste používať výsledky na zoraďovanie kandidátov alebo na rozhodovacia procesy porovnávajúceho výberu. Ipsatívne skóre sú určené na individuálny rozvoj a sebavednosť. Hovoria kandidátovi, kde sú jeho silné stránky a oblasti rastu v porovnaní s ostatnými, čo ich robí cenné pre koučing, spätnu väzbu a plánovanie osobného rozvoja. Avšak, nehovoria vám, ako sa jeden kandidát porovnáva s iným, čo ich robí nevhodným pre rozhodovacia procesy pri nábore, kde potrebujete identifikovať najsilnejších kandidátov.

Ak používate posúdenie vynútenej voľby s normatívnym skórovaním (ako je Thurstonova IRT), môžete – v teórii – používať výsledky na porovnávanie kandidátov, za predpokladu, že posúdenie bolo správne konštruované a validované. Avšak, nedávny výskum (podrobne diskutovaný nižšie) odhalil, že mnohé posúdenia vynútenej voľby tvrdiacich, že produkujú normatívne skóre, môžu mať stále čiastočne ipsatívne vlastnosti, čo obmedzuje ich užitočnosť pre výber.

Bežná mylná predstava je, že posúdenie vynútenej voľby je inherentne lepšie ako Likertove škály pre rozhodovacia procesy pri výbere. V skutočnosti, najlepšia metóda posúdenia závisí od vášho špecifického prípadu použitia. Pre rozhodovacia procesy pri výbere vyžadujúce porovnávanie kandidátov je nevyhnutné dobre validované normatívne posúdenie (či už vynútená voľba alebo formát Likerta). Pre rozvoj a sebavednosť môžu byť ipsatívne posúdenia vynútenej voľby vynikajúce. Kritická chyba je používanie ipsatívneho posúdenia pre výber – prax, do ktorej sa niektoré organizácie nevedome zapájajú, keď prijímajú nástroje vynútenej voľby bez pochopenia ich vlastností skórovania.

Aké sú hlavné výhody posúdení vynútenej voľby?

Odolnosť voči falšovaniu a zaujatosti spoločenskej žiaducnosti

Primárna výhoda posúdenia vynútenej voľby – a dôvod, prečo si získala podporu v kontextoch vysokorizikového výberu – je jej odolnosť voči falšovaniu a zaujatosti spoločenskej žiaducnosti. Táto výhoda je teoreticky zdôvodnená a empiricky podporovaná výskumom.

Zaujatosť spoločenskej žiaducnosti nastáva, keď respondenti odpovedajú na otázky posúdenia spôsobom, v ktorom sa domnievajú, že bude vnímaný priaznivo, namiesto čestného odpovedania. V posúdeniach osobnosti pomocou Likertových škál je to jednoduché: ak otázka znie „Som organizovaný," respondenti motivovaní na pozitívnu sebaprezentáciu budú hodnoť svoj súhlas ako vysoký, bez ohľadu na ich skutočné organizačné zvyky. Podobne, ak sú spýtaní „Niekedy sa odkladám," budú hodnoť svoj súhlas ako nízky. V priebehu mnohých položiek môže tento vzor spoločensky žiaducich odpovedí značne zvýšiť skóre vlastností, čo kandidátom umožňuje vyzerať psychologicky zdravejšie, svedomitejšie, emocionálne stabilnejšie a prívetnivejšie, ako v skutočnosti sú.

Posúdenie vynútenej voľby robí takéto konzistentné falšovanie oveľa ťažšie. Keď si respondenti musia vybrať medzi „Radšej vedem" a „Radšej podporujem ostatných," nemôžu jednoducho vybrať možnosť, ktorá znie najlepšie v izolácii – musia zvážiť kontext svojich ostatných odpovedí. Ak si už viackrát vybrali „Radšej vedem," výber tejto možnosti znova sa môže zdať nekonzistentný s ich skorším vzorcom výberu „Radšej podporujem ostatných." Čo je ešte dôležitejšie, v dobre konštruovaných posúdeniach vynútenej voľby sú možnosti v rámci každej položky zhodené podľa spoločenskej žiaducnosti – obe možnosti sú prezentované ako rovnako atraktívne alebo rovnako neatraktívne. Tento dizajn eliminuje zjavnú „správnu odpoveď," na ktorú sa respondenti v Likertových škálach môžu zamerať.

Meta-analytický výskum podporuje túto výhodu. Meta-analýza od Cao a Drasgow (2019) skúmala desiatky štúdií porovnávajúcich odolnosť voči falšovaniu v rôznych formátoch posúdenia a zistila, že posúdenia vynútenej voľby, keď sú správne konštruované, vykazujú podstatne nižšie miery nadhodnotenia skóre v podmienkach falšovania v porovnaní s Likertovými škálami. V niektorých štúdiách posúdenia vynútenej voľby takmer úplne eliminovali nadhodnotenie skóre, zatiaľ čo posúdenia na báze Likerta vykazovali nadhodnotenie 0,5 až 1,0 štandardnej odchýlky alebo viac.

Pre výber vedúcich pracovníkov, kde sú kandidáti vysoko motivovaní na pozitívnu sebaprezentáciu a sú vysoké stávky, je táto výhoda významná. Zvyšuje dôveru, že výsledky posúdenia odrážajú skutočné vlastnosti namiesto vyleštené sebaprezentácie.

Eliminácia zaujatostí odpovedí

Okrem zaujatosti spoločenskej žiaducnosti riešia posúdenia vynútenej voľby niekoľko ďalších systematických zaujatostí odpovedí, ktoré kompromitujú validitu ratingových škál:

Zaujatosť akceptácie (tiež nazývaná ťa-hovoriaci) je tendencia súhlasiť s výrokmi bez ohľadu na obsah. Niektorí respondenti, zvlášť tí z určitých kultúrnych prostredí alebo typov osobnosti, majú prirodzenú sklonosť súhlasiť. V Likertovej škále sa to prejavuje ako konzistentne vysoké hodnotenia. Vynútená voľba túto zaujatosť eliminuje podľa dizajnu – respondenti nemôžu jednoducho súhlasiť so všetkým; musia robiť voľby, ktoré vyžadujú vzorce súhlasu aj nesúhlasu.

Zaujatosť extrémnosti je tendencia vyberať si extrémne možnosti odpovede (silne súhlasím/silne nesúhlasím) namiesto umiernenejších. Táto zaujatosť nadhodnocuje vzhľad silného prejavu vlastnosti. Vynútená voľba eliminuje možnosť vybrať si umierenú odpoveď, čím núti respondentov zaviazať sa k pozícii.

Zaujatosť stredného bodu je opačná tendencia: respondenti sa gravitujú k strednej možnosti (ani súhlasím, ani nesúhlasím), aby sa vyhli záväzku k pozícii. Táto zaujatosť skrýva skutočné úrovne vlastností a znižuje diskrimináciu medzi respondentmi. Vynútená voľba eliminuje strednú možnosť úplne, čím núti skutočnú diskrimináciu.

Riešením týchto zaujatostí štrukturálne – prostredníctvom dizajnu formátu odpovede – posúdenie vynútenej voľby produkuje údaje menej kontaminované systematickými vzorami odpovedí. To vedie k čistejším, ľahšie interpretovateľným údajom, ktoré presnejšie odrážajú skutočné osobnostné vlastnosti.

Zlepšená diskriminácia medzi kandidátmi

V kontextoch výberu je schopnosť diskriminovať medzi kandidátmi – identifikovať zmysluplné rozdiely medzi uchádzačmi – nevyhnutná. Posúdenie vynútenej voľby v tomto vyniká. Vynútením respondentov na explicitné voľby medzi možnosťami odhalujú formáty vynútenej voľby skutočné preferencie a priority jasnejšie ako ratingové škály.

Zvážte dvoch kandidátov reagujúcich na otázku o ich prístupe k riziku. Na Likertovej škále s otázkou „Som ochotný robiť rizika" by sa obaja mohli ohodnotiť ako 4 na škále 1–5, pričom by sa zdali rovnako skloní k riziku. Ale vo formáte vynútenej voľby s otázkou, aby si vybrali medzi „Starostlivo analyzujem riziká pred pôsobením" a „Som pohodlný pôsobiť s neúplnými informáciami," ich skutočné preferencie sa javia jasnejšie. Jeden by mohol vyberať prvú možnosť viac často, čím odhaluje preferenciu pre analýzu rizika; druhý by mohol vyberať druhú, odhalujúc pohodlnosť s neistotou. Táto diskriminácia pomáha manažérom náboru robiť viac nuancované, informované rozhodnutia o zhode kandidátov.

Aké sú obmedzenia a výzvy posúdení vynútenej voľby?

Problém ipsativity

Napriek svojím výhodám čelí posúdenie vynútenej voľby základnej technickej výzve: ipsativity. Toto obmedzenie je také významné, že generovalo desaťročia výskumu a debát v psychometrike.

Ako bolo diskutované skôr, ipsatívne skóre sú vzájomne závislé – skóre na jednej vlastnosti je matematicky prepojené so skórami na ostatných vlastnostiach. Ak je skóre vedenia respondenta vysoké, ich skóre analytiky musí byť relatívne nižšie (nie v absolútnych termínoch, ale v porovnaní s ich ostatnými skórami). Táto matematická vlastnosť vytvára niekoľko praktických problémov:

Neschopnosť zoradiť kandidátov: Ak nemôžete priamo porovnávať kandidátov na jednotlivých vlastnostiach, nemôžete zoradiť skupinu uchádzačov od najvyššieho po najnižší, povedzme, svedomitosť. Toto je kritické obmedzenie pre výber, kde zoraďovanie kandidátov je často celý účel posúdenia.

Problematické korelácie: Keď sú skóre ipsatívne, korelácie medzi vlastnosťami v rámci jednotlivcov sú umelé obmedzené. Výskumník by mohol zistiť, že dve vlastnosti sú negatívne korelované v ipsatívnych údajoch (pretože vysoké skóre na jednej núti nižšie skóre na druhej), aj keď sú v skutočnosti nezávislé alebo pozitívne korelované v populácii. To môže viesť k nesprávnym záverom o vzťahoch vlastností.

Neplatné štatistické analýzy: Mnohé bežné štatistické techniky (regresia, faktorová analýza, modelovanie štrukturálnych rovníc) predpokladajú nezávislosť skóre. Aplikácia týchto techník na ipsatívne údaje môže produkovať zavádzajúce výsledky.

Vývojári testov dlho uznávali ipsativity ako problém, čo je dôvod, prečo boli vyvinuté pokročilé metódy skórovania ako Thurstonova IRT. Avšak, ako nedávny výskum odhalil, riešenie problému ipsativity je ťažšie, ako sa spočiatku predpokladalo.

Zložitosť skórovania a problémy so spoľahlivosťou

Hoci Thurstonove IRT modely sľubujú prekonanie ipsativity a produkciu normatívnych skóre, zavádzajú nové výzvy: zložitosť a obavy o spoľahlivosť, ktoré boli dôkladne skúmané až nedávno.

Klasické ipsatívne skórovaní je jednoduché: spočítajte výbery položiek a sčítajte ich podľa vlastnosti. Thurstonova IRT skórovaní je oveľa zložitejšia, vyžadujúca sofistikovaný štatistický softvér, veľké vzorky na odhad modelu a starostlivú pozornosť na konštrukciu položiek. Táto zložitosť vytvára bariéry na implementáciu a zvyšuje riziko chýb pri vývoji a skórovaní testov.

Čo je kritickejšie, nedávne simulačné štúdie od Bürkner et al. (2019) a Schulte et al. (2021) odhalili, že Thurstonove IRT modely nespoľahlivo produkujú presné, ne-ipsatívne skóre v mnohých praktických podmienkach. Konkrétne:

Posúdenia s nízkym počtom vlastností sa trápia: Keď posúdenia vynútenej voľby merajú iba malý počet vlastností (5–15 vlastností, čo je typické pre posúdenia osobnosti), Thurstonove IRT modely často zlyhávajú v produkcii dostatočne spoľahlivých skóre, aj s veľkými vzorkami. Skóre vlastností ostávajú čiastočne ipsatívne, čím sa obmedzuje ich užitočnosť pre porovnávanie kandidátov.

Kódovanie položiek je kritické: Položky vynútenej voľby môžu byť „rovnako kódované" (obe možnosti predstavujú pozitívne alebo obe predstavujú negatívne aspekty vlastnosti) alebo „zmiešane kódované" (jedna pozitívna, jedna negatívna). Rovnako kódované položky sú potrebné na udržanie odolnosti voči falšovaniu, ale sú zvlášť problematické pre Thurstonovu IRT skórovaní. Keď sú položky rovnako kódované, Thurstonove modely sa snažia produkovať spoľahlivé, ne-ipsatívne skóre, pokiaľ posúdenie nemeria veľmi veľký počet vlastností (30 alebo viac).

Požiadavka na vysokú dimenzionalitu: Výskum naznačuje, že posúdenia vynútenej voľby musia merať 25–30 alebo viac vlastností na produkciu spoľahlivých, úplne ne-ipsatívnych Thurstonových IRT skóre s rovnako kódovanými položkami. To je nepraktické pre väčšinu posúdení osobnosti, ktoré typicky merajú 5–15 dimenzií (napr. Big Five osobnosť, dimenzie vedenia, zhoda s organizačnou kultúrou). Najvýraznejšie posúdenie vynútenej voľby pri výbere vedúcich pracovníkov, Occupational Personality Questionnaire (OPQ), meria 30 vlastností, čo vysvetľuje, prečo funguje lepšie – ale toto je skôr výnimka ako pravidlo.

Tieto zistenia majú dôležité implikácie: mnohé posúdenia vynútenej voľby propagované ako produkujúce normatívne, porovnateľné skóre môžu v skutočnosti produkovať čiastočne ipsatívne skóre, ktoré nemôžu byť spoľahlivo používané na zoraďovanie kandidátov. Organizácie by mali starostlivo skúmať technickú dokumentáciu dodávateľov testov a nezávislé validačné štúdie pred predpokladom, že posúdenie vynútenej voľby produkuje skutočne normatívne skóre.

Frustrácia kandidátov a skúsenosť používateľa

Z praktického hľadiska môžu posúdenia vynútenej voľby vytvoriť slabú skúsenosť kandidátov, čo má okamžité aj dlhodobé dôsledky na účinnosť náboru a imidž zamestnávateľa.

Respondenti často stretávajú položky vynútenej voľby, kde sa ani jedna možnosť nepočíta za presne. Keď sa spýtajú, aby si vybrali medzi dvoma výrokmi, z ktorých obidva ich čiastočne popisujú alebo ani jeden ich dobre nepopisuje, respondenti zažívajú kognitívne trenie. Môžu sa cítiť nútení vybrať možnosť, ktorá ich nesprávne predstavuje, čo vedie k frustrácii a odpojeniu. Toto je zvlášť problematické pri nábore, kde skúsenosť kandidáta priamo ovplyvňuje, či top talentu akceptujú ponuky na pracovnú pozíciu a ako vnímaú organizáciu.

Výskum posúdení vynútenej voľby v kontextoch zamestnania dokumentoval, že respondenti niekedy vyjadrujú frustráciu s formátom, zvlášť keď sú možnosti prezentované ako rovnako žiadúce (čo je potrebné na odolnosť voči falšovaniu, ale môže sa zdať umelé). Táto frustrácia môže viesť k nižším mieram dokončenia, rýchlejšiemu (a potenciálne menej premyslenému) reagovaniu a negatívnym vnímaniu organizácie.

Navyše, ak respondenti cítia, že sú nútení vybrať možnosti, ktoré sa na nich nevzťahujú, výsledné údaje môžu byť menej presné ako údaje z Likertových škál, kde by mohli naznačiť nižší súhlas. Kompromis medzi odolnosťou voči falšovaniu a kvalitou údajov je skutočný a musí sa starostlivo zvážiť.

Užší spektrum informácií

Vynútením binárnych alebo obmedzenej voľby obetuje posúdenie vynútenej voľby granularitu informácií. Likertova škála s otázkou „Som organizovaný" na škále 1–5 zachytáva päť úrovní podpory. Formát vynútenej voľby s otázkou „Uprednostňujete štruktúru alebo flexibilitu?" zachytáva binárnu voľbu. Toto zjednodušenie môže skryť dôležité nuansy v osobnosti.

Napríklad, niekto by mohol byť umiernenej organizovaný v niektorých kontextoch a vysoko organizovaný v iných. Likertova škála by to mohla zachytiť ako skóre 3 alebo 4. Formát vynútenej voľby by ich mohol nútať do binárnej voľby, ktorá úplne nepredstavuje ich skutočnú zložitosť. Hoci redukovaná granularita vynútenej voľby je zámerná – je navrhnutá na zníženie premýšľania a zlepšenie diskriminácie – prichádza za cenu nuansy.

Ako sa skórujú posúdenia vynútenej voľby?

Metóda klasického ipsatívneho skórovania

Najjednoduchší a historicky najčastejší prístup na skórovaní položiek vynútenej voľby je klasická metóda. Tento prístup je dostatočne jednoduchý na to, aby sa dal vykonať s ceruzkou a papierom alebo základným softvérom na tabuľky.

Pri klasickom skórovaní je každá možnosť položky pridelená dimenzii vlastnosti. Keď respondent vyberie možnosť, táto vlastnosť dostane jeden bod. Po dokončení všetkých položiek sa body sčítavajú pre každú vlastnosť, čím sa vytvárajú skóre vlastností. Napríklad, ak posúdenie meria päť vlastností (Vedenie, Analytické myslenie, Svedomitosť, Interpersonálna citlivosť a Otvorenosť voči zmenám) a obsahuje 30 položiek (6 položiek na vlastnosť), každá vlastnosť môže dostať skóre v rozsahu od 0 do 6 na základe toho, koľkokrát respondent vybral možnosť spojenú s touto vlastnosťou.

Výsledkom je ipsatívny profil: poradia vlastností v rámci jednotlivca. Respondent môže vidieť, že skóroval najvyšší na Vedení (6), nasledovaný Otvorenosťou voči zmenám (5), Interpersonálnou citlivosťou (4), Svedomitosťou (3) a najnižšie na Analytickom myslení (2). Tento profil je užitočný pre sebavednosť a rozvoj – ukazuje osobe, kde sú jej relatívne silné stránky. Avšak, neudáva, či je skóre 6 na Vedení vysoké, primerané alebo nízke v porovnaní s inými ľuďmi. Udáva iba, že Vedenie je najsilnejšou vlastnosťou tejto osoby v porovnaní s jej ostatnými vlastnosťami.

Klasické skórovaní je transparentné, ľahké na implementáciu a produkuje výsledky, ktoré sú jednoduché na interpretáciu pre individuálny rozvoj. Avšak, jeho ipsatívna povaha ho robí nevhodným pre rozhodovacia procesy pri výbere, kde je porovnávanie kandidátov potrebné.

Thurstonova teória položkovej odpovede (IRT) skórovaní

Thurstonova IRT predstavuje pokus prekonúť ipsativity obmedzenie klasického skórovania. Tento pokročilý prístup používa sofistikované štatistické modely na odhad základných latentných úrovní vlastností, ktoré najlepšie vysvetľujú vzor volieb respondenta, potom vyjadruje tieto úrovne na normatívnej škále.

Thurstonov model je založený na predpokladu, že keď respondent vyberie jednu možnosť pred druhou, implicitne naznačuje, že ich latentná úroveň na vlastnosti spojenej s vybranou možnosťou je vyššia ako ich úroveň na vlastnosti spojenej s nevybranou možnosťou. Analýzou vzoru všetkých volieb naprieč všetkými položkami Thurstonove modely odhadujú absolútne latentné úrovne vlastností, ktoré by s najväčšou pravdepodobnosťou vytvorili pozorovaný vzor volieb. Tieto odhady sa potom môžu štandardizovať a porovnávať medzi jednotlivcami.

Matematické detaily sú zložité, ale praktická výhoda je jasná: Thurstonova IRT môže v princípe produkovať normatívne skóre z údajov vynútenej voľby, čo umožňuje porovnávanie kandidátov. Nevýhoda je rovnako jasná: implementácia je technicky náročná, vyžaduje špecializovaný softvér (ako Mplus, lavaan alebo Stan) a závisí kriticky na kvalite konštrukcie testu.

Dôležité je, že Thurstonova IRT nie je zaručené riešenie ipsativity. Ako nedávny výskum ukázal, jej účinnosť závisí od faktorov, ako je počet meraných vlastností, počet položiek, kvalita konštrukcie položiek a veľkosť vzorky. Pre posúdenia merajúce málo vlastností s rovnako kódovanými položkami môže Thurstonova IRT stále produkovať čiastočne ipsatívne skóre.

Praktické úvahy pre vývojárov testov

Pre organizácie zvažujúce prijatie alebo vývoj posúdení vynútenej voľby sa vynára niekoľko praktických úvah z výskumu skórovania a psychometrických vlastností:

Kódovanie položiek: Položky môžu byť „rovnako kódované" (obe možnosti predstavujú pozitívne alebo obe predstavujú negatívne aspekty vlastnosti) alebo „zmiešane kódované" (jedna pozitívna, jedna negatívna). Rovnako kódované položky sú nevyhnutné na odolnosť voči falšovaniu, ale problematické pre Thurstonovu IRT skórovaní. Vývojári testov musia vyvážiť konkurujúce si požiadavky odolnosti voči falšovaniu a presnosti merania.

Počet vlastností: Ak je vašim cieľom produkovať normatívne, ne-ipsatívne skóre pomocou Thurstonovy IRT s rovnako kódovanými položkami, musíte merať aspoň 25–30 vlastností. Ak meriate menej vlastností, očakávajte, že skóre budú čiastočne ipsatívne a plánujte ich používať primárne na rozvoj namiesto výberu.

Veľkosť vzorky a validácia: Thurstonove IRT modely vyžadujú adekvátne veľkosti vzoriek na stabilný odhad parametrov. Navyše, akékoľvek posúdenie vynútenej voľby by malo byť dôkladne validované vo vašom špecifickom organizačnom kontexte pred použitím na vysokorizikové rozhodovacia procesy pri výbere. Tvrdenia dodávateľov testov o odolnosti voči falšovaniu a normatívnom skórovaní by mali byť overené prostredníctvom nezávislého výskumu.

Dĺžka testu: Viac položiek na vlastnosť všeobecne zlepšuje spoľahlivosť. Avšak, dlhšie posúdenia zvyšujú záťaž respondentov a únavu. Vývojári testov musia vyvážiť tieto konkurujúce si požiadavky.

Kedy by ste mali používať posúdenie vynútenej voľby pri výbere vedúcich pracovníkov?

Ideálne prípady použitia

Posúdenie vynútenej voľby je najvhodnejšie v špecifických kontextoch, kde jeho výhody prevážia jeho obmedzenia:

Vysokorizikový výber, kde je falšovanie obavou: Pri výbere vedúcich pracovníkov, vedúcich pracovníkov alebo iných vysokocenných pozícií sú kandidáti vysoko motivovaní na pozitívnu sebaprezentáciu. Odolnosť voči falšovaniu posúdenia vynútenej voľby je v týchto kontextoch cenná. Ak máte podozrenie, že kandidáti nadhodnocujú svoju svedomitosť, emočnú stabilitu alebo iné cenené vlastnosti, posúdenie vynútenej voľby môže poskytnúť presnejší obraz.

Posúdenia vedúcich pracovníkov a vedenia: Mnohé organizácie používajú posúdenia vynútenej voľby špecificky na hodnotenie vedúcich pracovníkov, pretože odolnosť voči falšovaniu je zvlášť dôležitá na senior úrovniach. Formáty vynútenej voľby sú čoraz bežnejšie v nástrojoch na rozvoj vedenia, spätnej väzby 360 stupňov a koučingu vedúcich pracovníkov.

Posúdenie organizačného rizika: Pri posúdení vlastností súvisiacich s organizačným rizikom – ako je etické rozhodovanie, tolerancia rizika alebo integritu – je znížená náchylnosť voči zaujatosti spoločenskej žiaducnosti posúdenia vynútenej voľby cenná. Organizácie chcú pochopiť skutočné profily rizika kandidátov, nie ich idealizovanú sebaprezentáciu.

Plánovanie nástupnictva: V internom plánovaní nástupnictva a identifikácii vysokého potenciálu môžu posúdenia vynútenej voľby poskytnúť autentickejšie údaje o osobnosti ako tradičné metódy, čím podporujú lepšie rozhodnutia o rozvoji vedúceho potenciálu.

Situácie, kde posúdenie vynútenej voľby nemusí byť ideálne

Naopak, posúdenie vynútenej voľby nemusí byť najlepšou voľbou v týchto scenároch:

Keď sú potrebné podrobné profily vlastností: Ak vaše rozhodnutie pri výbere vyžaduje nuancované porozumenie úrovniam vlastností kandidátov naprieč mnohými dimenziami, normatívne posúdenie (či už vynútená voľba s Thurstonovou IRT alebo tradičná Likertova) môže byť vhodnejšie ako klasické ipsatívne skórovaní.

Keď je priame porovnávanie kandidátov nevyhnutné: Ak je vaším primárnym cieľom zoradiť kandidátov od najvyššieho po najnižší v špecifických vlastnostiach, potrebujete normatívne skóre. Pokiaľ vaše posúdenie vynútenej voľby nepoužíva Thurstonovu IRT a nemeria dostatočný počet vlastností, nedostanete skutočne porovnateľné skóre.

Keď je skúsenosť kandidáta kritická: V konkurenčnom nábore, kde skúsenosť kandidáta priamo ovplyvňuje miery akceptácie ponúk a vnímaní imidža zamestnávateľa, potenciálna frustrácia spôsobená formátmi vynútenej voľby môže prevážiť výhody odolnosti voči falšovaniu.

Keď sa meria málo vlastností: Ak potrebujete posúdiť iba malý počet vlastností (napr. Big Five osobnosť), vynútená voľba s klasickým skórovaním bude produkovať ipsatívne výsledky nevhodné na výber. Thurstonova IRT skórovaní by mohla pomôcť, ale vyžaduje starostlivú validáciu.

Integrácia s inými metódami posúdenia

Najlepšia prax v posúdeniach vedúcich pracovníkov zahŕňa používanie viacerých metód v kombinácii. Posúdenie vynútenej voľby by sa nemalo považovať za samostatné riešenie, ale ako jedna zložka komplexného procesu hodnotenia.

Kombináciou posúdenia vynútenej voľby so štruktúrovanými pohovormi, vzorkami práce, overením referencií a inými metódami posúdenia sa získa úplnejší obraz kandidátov. Každá metóda má silné a slabé stránky; spolu si navzájom kompenzujú slabé stránky. Napríklad odolnosť voči falšovaniu posúdenia vynútenej voľby môže byť doplnená pohovormi, ktoré hlboko preskúmavajú špecifické príklady správania, a vzorkami práce, ktoré posúdnu skutočnú schopnosť.

Navyše, organizácie môžu kombinovať ipsatívne posúdenia vynútenej voľby (používané na individuálny rozvoj a sebavednosť) s normatívnymi posúdeniami (používané na porovnávanie kandidátov a výber). Tento duálny prístup umožňuje bohatú individuálnu spätnú väzbu a validný porovnávací výber.

Čo hovoria najnovšie zistenia výskumu o posúdeniach vynútenej voľby?

Nedávne meta-analýzy a validačné štúdie

Posledných päť rokov prinieslo podstatný nový výskum o posúdeniach vynútenej voľby, z ktorého veľa odhaľuje nuansy, ktoré komplikujú jednoduchý príbeh, že „vynútená voľba je lepšia."

Meta-analytický výskum potvrdzuje, že posúdenia vynútenej voľby redukujú falšovanie v porovnaní s Likertovými škálami, čím podporujú primárnu vymenovanu výhodu. Avšak, veľkosť tejto výhody sa líši v závislosti od konštrukcie testu, metódy skórovania a kontextu. Niektoré dobre navrhnuté posúdenia vynútenej voľby takmer úplne eliminujú falšovanie; iné vykazujú iba skromné redukcie.

Pokiaľ ide o psychometrické vlastnosti, nedávne validačné štúdie zistili, že posúdenia vynútenej voľby môžu byť spoľahlivá a validná, keď sú správne konštruované. Avšak, spoľahlivosť často závisí od toho, či existuje dostatočný počet položiek na vlastnosť a adekvátne veľkosti vzoriek na skórovaní. Navyše, predpoklad, že vynútená voľba automaticky produkuje validnejšie meranie osobnosti, nebol všeobecne podporovaný; v niektorých štúdiách vynútená voľba a formáty Likerta produkujú ekvivalentnú validitu na predpovedanie pracovného výkonu.

Zvlášť dôležitý nález sa týka vzťahu medzi formátom vynútenej voľby a skutočným predpovedaním pracovného výkonu. Hoci vynútená voľba redukuje zaujatosť odpovedí, toto sa vždy neprekláda do zlepšeného predpovedania pracovných výsledkov. Niektoré štúdie zistili, že redukovaní falšovanie (prostredníctvom vynútenej voľby) v skutočnosti znižuje koreláciu medzi skórami osobnosti a pracovným výkonom, pretože niektoré kandidáti „falšované" Likertove odpovede boli v skutočnosti prediktívne ich správania na pracovisku. Tento kontraintuitívny nález naznačuje, že vzťah medzi zaujatosťou odpovedí a prediktívnou validitou je zložitejší, ako sa spočiatku predpokladalo.

Debata o ipsativity: Na čom sa výskumníci nezhodujú

Jednou z najaktívnejších oblastí debát vo výskume posúdenia vynútenej voľby je otázka, či sa ipsativity môže skutočne vyriešiť a ak áno, za akých podmienok.

Zástancovia Thurstonovy IRT tvrdia, že s dostatočným počtom vlastností a správnou konštrukciou položiek je možné odvodiť normatívne skóre z údajov vynútenej voľby. Kritici, vrátane Bürkner et al. a Schulte et al., tvrdia, že za realistických podmienok (menej ako 30 vlastností, rovnako kódované položky) ostávajú Thurstonove IRT skóre čiastočne ipsatívne a nemôžu byť spoľahlivo používané na porovnávanie medzi osobami.

Táto debata má praktické dôsledky: ak uvažujete o posúdení vynútenej voľby propagovanom ako produkujúcom normatívne skóre, mali by ste skúmať, či meria dostatočný počet vlastností a používa primeranú konštrukciu položiek. Mnohé komerčné posúdenia nemusí spĺňať podmienky potrebné na skutočne ne-ipsatívne Thurstonove IRT skórovaní.

Navyše, výskumníci diskutujú o tom, či sú ipsatívne skóre skutočne nevhodné na výber. Hoci tradičná psychometrická múdrosť hovorí, že ipsatívne skóre nemôžu byť používané na porovnávanie medzi osobami, niektorí výskumníci tvrdia, že so starostlivou interpretáciou a vhodnými štatistickými metódami môžu ipsatívne údaje poskytnúť užitočné informácie na rozhodovacia procesy pri výbere. Avšak, toto zostáva menšinovým názorom a väčšina organizačných psychológov odporúča proti používaniu ipsatívnych skóre na výber.

Najlepšie praktiky pre implementáciu

Na základe súčasného výskumu zahŕňajú najlepšie praktiky na implementáciu posúdení vynútenej voľby v organizačných kontextoch:

Pochopte svoju metódu skórovania: Vedzte, či vaše posúdenie produkuje ipsatívne alebo normatívne skóre a plánujte ich použitie podľa toho. Ak je ipsatívne, používajte primárne na rozvoj. Ak tvrdí normatívne skóre, overujte to prostredníctvom nezávislej validácie.

Validujte vo vašom kontexte: Nespoliehajte sa iba na tvrdenia dodávateľov alebo publikovaný výskum. Vykonajte vlastné validačné štúdie vo vašom organizačnom kontexte, aby ste sa uistili, že posúdenie predpovedá relevantné výsledky (pracovný výkon, retenciu, efektívnosť vedenia atď.).

Zabezpečte správnu konštrukciu testu: Ak vyvíjate posúdenie vynútenej voľby interného, venujte starostlivú pozornosť konštrukcii položiek, kódovaniu a počtu meraných vlastností. Konzultujte s psychometrami skúsenými v metódach vynútenej voľby.

Používajte v kombinácii s inými metódami: Vyhnite sa spoliehaniu sa iba na posúdenie vynútenej voľby. Kombinujte ho s pohovormi, vzorkami práce a inými metódami na komplexné hodnotenie.

Zvážte skúsenosť kandidáta: Buďte si vedomí, že formáty vynútenej voľby môžu frustrať niektorých respondentov. Jasne komunikujte, prečo sa formát používa a ako sa budú výsledky interpretovať. Monitorujte spätnú väzbu kandidátov a prispôsobujte sa, ak je potrebné.

Udržujte etické štandardy: Zabezpečte, aby použitie posúdenia bolo v súlade s právnymi a etickými štandardmi vo vašej jurisdikcii. Dokumentujte dôkazy o validite, udržujte dôvernosť skóre a používajte výsledky iba na účely, na ktoré boli validované.

Bežné mylné predstavy o posúdeniach vynútenej voľby

Mýtus č. 1: „Vynútená voľba je vždy lepšia ako Likertove škály"

Toto je možno najrozšírenejšia mylná predstava. Realita je nuancovanejšia: vynútená voľba a Likertove škály majú rôzne silné stránky a sú vhodné na rôzne účely. Vynútená voľba je lepšia na redukciu zaujatosti odpovedí a falšovania; Likertove škály sú lepšie na zachytenie nuansy a poskytovanie užívateľsky prívetivého zážitku. Na niektoré účely výberu sú Likertove škály rovnako efektívne alebo lepšie. Najlepšia metóda závisí od vášho špecifického kontextu, cieľov a obmedzení.

Mýtus č. 2: „Vynútená voľba úplne zabraňuje falšovaniu"

Posúdenie vynútenej voľby redukuje falšovanie, ale ho neuniká. Vysoko motivovaní respondenti stále môžu skaziť svoje odpovede, zvlášť ak rozumejú účelu posúdenia a môžu odvodiť, ktoré odpovede sú žiaducejšie. Navyše, účinnosť vynútenej voľby na redukciu falšovania závisí od správnej konštrukcie položiek (zvlášť od zhody žiaducnosti položiek). Slabo konštruované posúdenia vynútenej voľby nemusí poskytnúť zmysluplnú odolnosť voči falšovaniu.

Mýtus č. 3: „Všetky skóre vynútenej voľby sa dajú porovnávať medzi ľuďmi"

Toto je nepravdivé. Klasické ipsatívne skórovaní položiek vynútenej voľby produkuje skóre, ktoré sa nemôžu priamo porovnávať medzi ľuďmi. Iba posúdenia vynútenej voľby používajúce Thurstonovu IRT skórovaní a merajúce dostatočný počet vlastností (typicky 25–30 alebo viac) produkujú skutočne normatívne, porovnateľné skóre. Mnohé komerčné posúdenia stále používajú klasické skórovaní alebo tvrdí normatívne skórovaní bez dostatočnej validácie. Vždy overujte metódu skórovania a dôkazy validácie pred predpokladom, že skóre sú porovnateľné.

Mýtus č. 4: „Posúdenia vynútenej voľby sú vždy frustrujúce pre respondentov"

Vynútená voľba môže byť frustrujúca, ale dobre navrhnuté posúdenia s starostlivo zhodnotými možnosťami položiek a jasnými pokynmi môžu byť pre respondentov prijateľné. Frustrácia závisí od kvality položiek, relevantnosti možností pre respondentov a od toho, ako sa posúdenie prezentuje. Niektorí respondenti si cenia jasnosti a rozhodnosti vyžadovanej formátmi vynútenej voľby. Kľúčom je premyslený dizajn a komunikácia.

Často kladené otázky

Aký je rozdiel medzi posúdením vynútenej voľby a ipsatívnym posúdením?

Posúdenie vynútenej voľby je formát odpovede – spôsob, ako sú otázky prezentované a zodpovedané. Ipsatívne posúdenie je metóda skórovania – spôsob, ako sa výsledky počítajú a interpretujú. Formát vynútenej voľby môže byť skórovaný ipsatívne (klasické skórovaní) alebo normatívne (Thurstonova IRT). Naopak, posúdenia formátu Likerta sú typicky skórovaná normatívne, ale môžu byť teoreticky skórovaná ipsatívne. Tieto dva pojmy sa vzťahujú na rôzne aspekty dizajnu posúdenia.

Dajú sa posúdenia vynútenej voľby používať na rozhodovacia procesy pri nábore?

Áno, ale s dôležitými výhradami. Posúdenia vynútenej voľby produkujúce normatívne, ne-ipsatívne skóre (pomocou Thurstonovy IRT a merajúce dostatočný počet vlastností) sa môžu používať na rozhodovacia procesy pri nábore. Avšak, posúdenia vynútenej voľby používajúce klasické ipsatívne skórovaní by sa nemali používať na výber, pretože ipsatívne skóre nemôžu byť porovnané medzi kandidátmi. Vždy overujte metódu skórovania a dôkazy validácie pred použitím akéhokoľvek posúdenia na nábor.

Prečo niektoré spoločnosti uprednostňujú Likertove škály pred vynútenou voľbou?

Bežné dôvody zahŕňajú: (1) Likertove škály poskytujú bohatšie, nuancovanejšie údaje; (2) Posúdenia Likerta sú často jednoduchšie na vývoj a implementáciu; (3) Formáty Likerta sú respondentom známejšie a všeobecne produkujú lepšiu skúsenosť používateľa; (4) Mnohé dobre validované posúdenia osobnosti používajú formáty Likerta; (5) Likertove škály prirodzene produkujú normatívne skóre bez zložitého štatistického modelovania. Vynútená voľba nie je univerzálne „lepšia" – voľba závisí od špecifických organizačných potrieb.

Ako vynútená voľba zabraňuje kandidátom v falšovaní?

Vynútená voľba redukuje falšovanie tým, že: (1) Eliminuje neutrálne odpovede, čím núti skutočnú diskrimináciu; (2) Sťažuje konzistentný výber spoločensky žiaducich odpovedí, keď sú možnosti zhodené podľa žiaducnosti; (3) Vyžaduje od respondentov relatívne voľby, ktoré odhaľujú skutočné preferencie; (4) Znižuje účinnosť jednoduchých vzorov odpovedí (ako je vždy súhlas), ktoré fungujú v Likertových škálach. Avšak, vysoko motivovaní kandidáti stále môžu skaziť odpovede, takže vynútená voľba redukuje, ale neuniká falšovaniu.

Čo je Thurstonov IRT model?

Thurstonova teória položkovej odpovede je štatistický model, ktorý analyzuje údaje vynútenej voľby na odhad základných latentných úrovní vlastností. Predpokladá, že keď respondenti vyberú jednu možnosť pred druhou, naznačujú, že ich úroveň vlastnosti pre vybranú možnosť presahuje ich úroveň pre nevybranú možnosť. Analýzou vzorů naprieč všetkými voľbami Thurstonove modely odhadujú absolútne úrovne vlastností, ktoré sa dajú porovnávať medzi jednotlivcami. Táto pokročilá metóda môže produkovať normatívne skóre z údajov vynútenej voľby, ale jej účinnosť závisí od kvality konštrukcie testu a počtu meraných vlastností.

Sú posúdenia vynútenej voľby validná a spoľahlivá?

Keď sú správne konštruované, validované a skórované, posúdenia vynútenej voľby môžu byť validná aj spoľahlivá. Avšak, validita a spoľahlivosť závisia od kvality vývoja testov, veľkosti vzorky a metódy skórovania. Nie všetky posúdenia vynútenej voľby spĺňajú tieto štandardy. Navyše, „validita" znamená, že posúdenie predpovedá relevantné výsledky vo vašom špecifickom kontexte – tvrdenia dodávateľov by mali byť overené prostredníctvom nezávislého výskumu. Vždy skúmajte technickú dokumentáciu a dôkazy validácie pred prijatím.

Ako dlho trvá posúdenie vynútenej voľby?

Posúdenia vynútenej voľby sa veľmi líšia v dĺžke. Niektoré je možné dokončiť za 10–15 minút, zatiaľ čo komplexné posúdenia osobnosti môžu trvať 30–45 minút alebo dlhšie. Dĺžka závisí od počtu meraných vlastností a zahrnutých položiek. Všeobecne trvajú posúdenia vynútenej voľby o niečo dlhšie ako posúdenia na báze Likerta, pretože respondenti musia aktívne zvažovať každú voľbu namiesto rýchleho hodnotenia súhlasu na škále.

Dajú sa kandidáti priamo porovnávať pomocou skóre vynútenej voľby?

Iba ak posúdenie vynútenej voľby používa Thurstonovu IRT skórovaní a bolo validované na produkciu normatívnych skóre. Klasické ipsatívne skórovaní položiek vynútenej voľby neumožňuje priame porovnávanie kandidátov. Ak potrebujete zoradiť kandidátov, zabezpečte, aby vaše posúdenie produkuje normatívne skóre a overujte to prostredníctvom technickej dokumentácie a nezávislej validácie.

Čo je zaujatosť spoločenskej žiaducnosti a prečo na tom záleží?

Zaujatosť spoločenskej žiaducnosti je tendencia odpovedať na otázky spôsobom, ktorý je vnímaný ako spoločensky prijateľný, namiesto čestného odpovedania. V posúdeniach osobnosti to znamená, že kandidáti sa predstavujú priaznivejšie, ako v skutočnosti sú. Na tom záleží, pretože nadhodnotené sebasprávy môžu viesť k náboru kandidátov, ktorí v skutočnosti nemajú posúdené vlastnosti, čo vedie k zlej zhode pracovnej pozície a výkonu. Odolnosť voči tejto zaujatosti posúdenia vynútenej voľby je kľúčová výhoda pri vysokorizikových výberoch.

Ako by mali organizácie vybrať medzi vynútenou voľbou a inými metódami posúdenia?

Zvážte: (1) Váš primárny účel (výber vs. rozvoj); (2) Či potrebujete priamo porovnávať kandidátov; (3) Počet vlastností, ktoré potrebujete posúdiť; (4) Obavy zo skúsenosti kandidáta a imidža zamestnávateľa; (5) Vaše zdroje na vývoj a validáciu testov; (6) Právne a etické požiadavky vo vašej jurisdikcii; (7) Dôkazy o validite pre váš špecifický prípad použitia. Vynútená voľba je jeden nástroj medzi mnohými; najlepšia voľba závisí od vášho špecifického kontextu a cieľov. Prístupy s viacerými metódami, ktoré kombinujú vynútenú voľbu s pohovormi, vzorkami práce a inými posúdeniami, sú často optimálne.