Võrdlev hindamine ja sõltumatu hindamine esindavad kahte erinevat lähenemisviisi kriitilise mõtlemise kontekstides kvaliteedi hindamiseks. Kui võrdlev hindamine tugineb teoste paaride suhtelisele võrdlemisele, siis sõltumatu hindamine kasutab absoluutseid kriteeriume, mida rakendatakse igale üksusele eraldi. Mõlemal meetodil on haridus- ja teaduskeskkonnas tõestatud kogemused.
Suhtelise hindamise meetod, kus hindajad võrdlevad paarikaupa ja valivad neist parema.
Absoluutne hindamismeetod, kus iga üksust hinnatakse selle omaduste põhjal kindlate kriteeriumide alusel.
| Funktsioon | Võrdlev kohtuotsus | Sõltumatu hindamine |
|---|---|---|
| Hindamise tüüp | Suhteline (paaripõhine võrdlus) | Absoluutne (kriteeriumipõhine) |
| Hindamismeetod | Kohtunikud valivad kahest asjast parema | Iga üksust hinnati fikseeritud rubriigi alusel |
| Statistiline mudel | Bradley-Terry või Thurstoni mudelid | Klassikaline testiteooria või üksuste vastusteooria |
| Kohtuniku töökoormus | Kõrge (vaja on palju võrdlusi) | Keskpärane (üks hinnang üksuse kohta) |
| Eelarvamuskindlus | Tugev individuaalsete kohtunike eelarvamuste vastu | Haavatav individuaalse hindaja triivi suhtes |
| Parim kasutusjuhtum | Terviklik kvaliteedihindamine | Standardipõhine sertifitseerimine |
| Tagasiside kiirus | Aeglasem võrdlusmahu tõttu | Kiirem koos kehtestatud rubriikidega |
| Usaldusväärsuse allikas | Palju võrdlusi kohtunike vahel | Kalibreeritud rubriigid ja koolitatud hindajad |
Põhiline erinevus seisneb selles, kuidas iga meetod kvaliteeti hindab. Võrdlev hindamine palub hindajatel vaadata kahte punkti kõrvuti ja otsustada, kumb neist on parem, vältides absoluutsete punktisummade määramise raskust. Sõltumatu hindamine seevastu palub hindajatel hinnata iga punkti etteantud rubriigi või standardi alusel, käsitledes iga esitatud punkti eraldi juhtumina.
Võrdlev hindamine suurendab usaldusväärsust paarikaupa võrdluste mahu kaudu, kusjuures statistilised mudelid siluvad üksikute hindajate iseärasusi. Sõltumatu hindamine sõltub suuresti rubriikide selgusest ja hindajate koolitusest, mis tähendab, et järjepidevus võib hindajate vahel oluliselt erineda, kui protsessi pole sisse ehitatud kalibreerimisseansse.
Hariduskeskkonnas on võrdlev hindamine populaarsust kogunud kirjutamisportfooliote hindamisel, kus terviklik kvaliteet on olulisem kui kontrollnimekirja järgimine. Sõltumatu hindamine on endiselt domineeriv standardiseeritud testimisel, kutsetunnistustel ja igas kontekstis, kus läbimise/läbikuulmise otsused peavad olema kooskõlas fikseeritud pädevusstandarditega.
Võrdlev hindamine on suurepärane nüansirikaste kvaliteedierinevuste tabamisel, mida rubriigid ei pruugi märgata, kuid statistilise olulisuse saavutamiseks on vaja rohkem aega ja suuremat hindajate ringi. Sõltumatu hindamine pakub kiirust ja selgeid võrdlusaluseid, kuid see võib taandada keerulise töö kontrollnimekirja punktisummaks, mis ei anna edasi üldist kvaliteeti.
Ühendkuningriigis läbi viidud uuringud on näidanud, et võrdlev hindamine annab hindajatevahelise usaldusväärsuse, mis on võrreldav traditsioonilise hindamisega, olles üldiselt kiirem. Sõltumatu hindamise paikapidavust toetavad aastakümnete pikkused psühhomeetrilised uuringud, eriti selliste raamistike kaudu nagu Bloomi taksonoomia ja kaasaegsed pädevuspõhised hindamismudelid.
Võrdlev hindamine on lihtsalt kohtunike seas populaarsusvõistlus.
Meetod kasutab keerukaid statistilisi mudeleid paljude sõltumatute võrdluste koondamiseks, filtreerides välja individuaalsed eelarvamused. Piisava arvu kohtunike ja võrdluste korral peegeldavad saadud edetabelid tegelikke kvaliteedierinevusi, mitte ühegi kohtuniku eelistusi.
Sõltumatu hindamine on täiesti objektiivne, kuna see kasutab rubriike.
Isegi detailsete rubriikide puhul toob inimlik otsustusvõime iga hindamisotsuse puhul kaasa subjektiivsuse. Rubriigid vähendavad, kuid ei välista kunagi tõlgendavaid valikuid, mida hindajad teevad kriteeriumide rakendamisel reaalsele tööle.
Võrdlev hindamine ei saa õppijatele tagasisidet anda.
Kaasaegsed rakendused suudavad genereerida detailset tagasisidet, analüüsides, millised elemendid järjepidevalt kõrgemal kohal on, ja tuvastades omadused, mis eristavad kõrgeima asetusega töid madalama asetusega esildistest.
Sõltumatu hindamine on uuemate meetoditega võrreldes aegunud.
Sõltumatu hindamine jääb kuldstandardiks kõrge panusega olukordades, nagu meditsiinilitsentsid, juriidiline sertifitseerimine ja standardiseeritud testimine, just seetõttu, et absoluutsed standardid on olulised siis, kui elud või volitused on kaalul.
Valige võrdlev hindamine, kui hindate paljude esitatud tööde terviklikku kvaliteeti, ja teil on juurdepääs mitmele koolitatud kohtunikule, kes on valmis tegema arvukalt võrdlusi. Sõltumatu hindamine toimib paremini siis, kui vajate kiireid otsuseid kehtestatud standardite alusel, näiteks sertifitseerimiseksamite või pädevuskontrollide puhul, millel on selged õiged vastused.
Abstraktne probleemide lahendamine rõhutab paindlikku ja loomingulist arutluskäiku harjumatutes olukordades, samas kui reeglipõhine programmeerimine tugineb tulemuste saavutamiseks eelnevalt määratletud loogilistele juhistele. Mõlemad lähenemisviisid kujundavad seda, kuidas masinad ja inimesed väljakutsetega toime tulevad, kuid erinevad teravalt kohanemisvõime, läbipaistvuse ja probleemide tüüpide poolest, millega nad kõige paremini toime tulevad.
Analüütiline mõtlemine jagab probleemid süstemaatiliseks hindamiseks loogilisteks komponentideks, samas kui otsese kogemuse teadvustamine tugineb mõistmisele vahetul, kehastunud tajul. Mõlemad lähenemisviisid kujundavad seda, kuidas me reaalsust töötleme, kuid need toimivad põhimõtteliselt erinevate kognitiivsete radade kaudu ja täidavad otsuste tegemisel erinevaid eesmärke.
Andmete tõesus ja visuaalne esitus on kaks teineteist täiendavat lähenemisviisi teabe mõistmiseks. Andmete tõesus rõhutab toorest numbrilist täpsust ja statistilist rangust, samas kui visuaalne esitus tõlgib keerulised andmekogumid intuitiivseks graafikaks. Koos kujundavad need seda, kuidas me tõendeid tõlgendame ja teadlikke otsuseid langetame.
Asümmeetriaanalüüs ja sümmeetriaeeldus esindavad kahte vastandlikku lähenemisviisi tõendite ja argumentide hindamisel. Asümmeetriaanalüüs kaalub väiteid nende konkreetse konteksti ja tõendamiskohustuse alusel, samas kui sümmeetriaeeldus käsitleb konkureerivaid väiteid võrdselt usutavatena, kuni pole tõestatud vastupidist. Mõlema mõistmine aitab teravdada kriitilist mõtlemist.
Avalik konsensus ja ekspertide kontroll esindavad kahte konkureerivat lähenemisviisi ühiskondlike otsuste kujundamisele. Kui avalik konsensus tugineb kollektiivsele arvamusele ja demokraatlikule osalusele, siis ekspertide kontroll tugineb erialastele teadmistele ja autoriteedile. Nende erinevuste mõistmine aitab selgitada arutelusid usalduse, valitsemise ja kriitiliste valikute suunaja üle.
