Näytetään tekstit, joissa on tunniste reliabiliteetti. Näytä kaikki tekstit
Näytetään tekstit, joissa on tunniste reliabiliteetti. Näytä kaikki tekstit

tiistai 3. lokakuuta 2017

Fantasia ja lokerointi

Ihmiset tykkäävät samastua mitä ihmeellisimpiin asioihin. Itse esimerkiksi olen viime päivinä pelannut uutta Senran Kaguraa ja olen prosessissa huomannut että on aavistuksen merkityksellistä lokeroida itseä ja muita suhteessa nakuilevien ninjatyttöjen kouluihin. (Hurraa Homura Gurentai!)

Tämä on tietenkin hoopoa koska koko sarja (animeineen ja peleineen) on läpikotaisen absurdi ja hölmö. Ja uusimmassa pelissä suurin osa aseista ja ominaisuuksista on vain heitettävissä hahmolta toiselle ja tätä kautta hahmoissa ainut uniikki ominaisuus on ääni ja ulkonäkö. Joka sekin on täysin modifioitavissa pelin sisällä. Toisin sanoen hahmot ovat menettäneet vahvasti uniikkiuttaan peliteknisien ratkaisujen kautta. Ja silti hahmot ja koulut tuntuvat merkityksellisiltä. Tämän voisi selittää tarinalla jota tässä pelissä hädin tuskin on. Tämä alleviivaa sitä miten samastumiskokemuksia saa omituisistakin paikoista. Jos minä saan jotain fiiliksiä tästä, suurin osa kokee varmasti syvemmin.

Tässä on tietenkin oleellinen suhde itsereflektioon. Ja tässäkin asiat ovat jännittäviä. Sillä monesti ajatellaan että itsereflektiolla olisi jotain arvoa sellaisenaan. Että ihmiset samastumisen ja kasvamisen kautta tunnistavat ja tehostavat erilaisia piirteitä itsessään.

Asioiden varmistaminen itsereflektiolla on tietenkin vaikeaa koska jo horoskooppienkin kautta tiedetään että horoskooppeihin uskovat Forer efektin voimalla ajattelevat että menetelmien lopputulokset puhuvat puolestaan. Jopa arvotut ominaisuuslistat tuntuvat osuvilta jos niiden tuotantotapaa jotenkin personalisoidaan. Vaikka personalisointi ei tosiasiassa vaikuttaisi lopputulokseen oikeasti. Mielikuva tästä riittää.

Tämä on syytä muistaa kun mietitään miten pitkään älykkäitä ja fiksuja ihmisiä viehätti esimerkiksi humoraalioppi. Tai miten modernina aikana MBTI -mittari herää suurta luottamusta myös sellaisten ihmisten parissa joilla ei ole koulutusta, osaamista tai kiinnostusta psykologisten testien luotettavuuden arviointimenetelmien sisällöstä saati soveltamisesta käytäntöön. Näitä taitoja ei tarvita luottamuksen syntymiseen.

Usein ajatellaan että kysymisen tavalla ja itsereflektion sisällöllä on vähäinen merkitys. Eli joko ajattelee että itsereflektio toimii tai sitten se ei toimi. Todellisuus on usein jossain tässä välissä. Ja tämä ero on tärkeä kun mietitään miten jokin persoonallisuustesti toimii ja toinen ei. Vaikka ne muuten olisivatkin arkijärjen ja kielen tasolla kovin toisiaan muistuttavia, toinen testi voi olla hyvä ja toinen huono. Niiden reliabiliteetti ja validiteetti voivat olla hyvin erilaisia.

Tähän liittyen onkin hauskana välipalana ottaa oikeaa psykologista tutkimusta jota on tehty niinkin omituisesta aiheesta kuin fiktionaalisen maailman Harry Potterin kouluista. Harry Potterilla on tietenkin paljon faneja ja heille on käynyt sama kuin minulle Senran Kagurassa. Joten tutkimukseen löytyy riittävää otoskokoa ja muuta miellyttävää. "Harry Potter and the measures of personality: Extraverted Gryffindors, agreeable Hufflepuffs, clever Ravenclaws, and manipulative Slytherins" Tutkimuksen kohteena olivat Harry Potter fanien aktiivit. Eli ihmiset joille tämä kirjasarja oli erityisen merkityksellinen.

Tutkimuksessa yhdistettiin itsereflektiota, kouluihin samastumista ja Big Five -persoonallisuustestiä sekä "Dark Triad" -testiä. Näitä verrattiin toisiinsa. Tätä kautta saatiin esiin erilaisia yhteyksiä. Ja kuten arvata saattaa yhteydet eivät toimi samalla tavalla. Vaikka Harry Potterin tuvat ovat kaikki aivan yhtä fiktionaalisia lokerointimenetelmiä, osa niistä korreloi ja toiset eivät. Ja joskus korrelaatit olivat omituisia.
1: Luihusiin liitetään arkijärjessäkin se, että tarkoitys pyhittää keinot. Tässä koulussa on sisällä pahoja ihmisiä vaikka tämä ei teknisesti ottaen ole mikään pahuuden luokkakunta. Henkilöt joilla oli vahvoja Dark Triadin piirteitä (psykopaattisuutta, narsismia ja machiavellististä opportunismia) samastuivat luihusiin. Tätä kautta itsereflektio todella korreloi näiden piirteiden kanssa. Tämä on mielenkiintoinen ajatus koska usein meille kerrotaan että narsistien tunnuspiirteenä olisi jokin jalo tietämättömyys jossa he eivät voi tietää tilaansa. Toki aika yleisesti on ajateltu että narsismi myös korreloisi oman narsistisuuden tietämisen ja sen avoimen tunnustamisen kanssakin. Tässä mielessä tämä tutkimus tukee selvästi tätä jälkimmäistä yleistä ajatusta.
2: Tutkijat olivat odottaneet löytävänsä ulospäinsuuntautuneisuudesta korrelaation Rohkelikkojen tuvan kanssa. Mutta tutkimus ei näyttänyt tätä. Toisin sanoen oma pelkuruus ei vähennä rohkeuden tai sosiaalisen avoimuuden arvostamista tai sellaiseksi samastumista. Kenties tämä johtuu siitä että rohkeus ja sosiaaliset taidot ovat positiivisia luonteenpiirteitä ja ihmiset tuppaavat kehumaan itseään itselleen. Lake Wobegon -efektin vuoksi suurin osa ihmisistä tuntee olevansa keskivertoista parempia käytännössä millä tahansa mittarilla.
3: Toisaalta älykkyys on positiivinen piirre ja se korreloi Korpinkynnen älykkäiden ihmisten koulun kanssa. Yhteyttä oli tosin myös arvostuksen haluamisen kanssa. Tämä herättää mietteitä siitä miksi niin moni netissä haluaa esittää olevansa MBTI -mittarilla INTJ. Osa on oikeasti fiksuja ja netti on heille ehkä ainut viestintäkanava. Osa heistä voi sitten olla ihan älyllisesti normaaleja tyyppejä joilla on halu päteä ja he kehuvat itseään itselleen.

Tämä muistuttaa siitä että itsereflektio toimii vain joskus. Itsereflektio voi heijastaa haluja ja kuvitelmia. Itsetietoisuuselementti taas on jotain joka on siitä vaikeasti mitattava asia että me kaikki kai luulemme että meillä on hyvä sellainen.

torstai 10. maaliskuuta 2016

Validiteetista

Psykometriassa on usein kysymys kyselyistä tai testiaineistosta. Tällöin yritetään joko tuottaa ilmiöitä selittävää tietoa kyselyiden avulla tai kartoittaa yksilöiden ominaisuutta teoriasta. Ideana on se, että

Havaittu testitulos = oikea ilmiö + mittaamiseen liittyvä virhe.

Validiteetilla tarkoitetaan sitä että ilmiö mittaa mitä halutaan mitata. Ja reliabiliteetti sitä että mittauksen hajonta ja muuntuminen ovat mahdollisimman pieniä. Tilanne on helposti siitä ikävä että kokonaisuus menee "heikoimman lenkin mukaan". Siksi pelkkä reliabiliteetin tarkasteleminen on oleellista. Mutta se ei vielä riitä.

Validiteetti on toisaalta hieman hankalampi asia. Monesti on oltava hyvin tarkka siitä että mitä testataan. ; Esimerkiksi huonosta validiteetista on annettu se, että joku kartoittaa ihmisissä olevaa masennusta mutta testi mittaakin sitten enemmän ahdistusta. Testi voi olla hyvä ahdistuken mittari. Ja ahdistuksen ja masennuksen välillä voi olla korrelaatiota mutta koska testi ei mittaa sitä mitä sen halutaan mittaavan, tulokset eivät kuitenkaan ole kovin laadukkaita.

Toisaalta se miten vastauksia käsitellään voi muutenkin olla kontekstisidonnaista. Jos esimerkiksi lomakkeessa kysytään sitä miten monta lasta perheessä on, voi "vaimon lapset entisestä avioliitosta" olla haasteellinen. Jos testaamisen aiheena on vaikka sosioekonominen pärjääminen voi lapsipuolen asemassa oleva lapsi oleellinen mukaanlaskettava. Mutta jos testataankin miesten hedelmällisyyttä, mukaanlaskeminen voi olla tuloksia ankarasti vääristävä. Validiteetti vaatiikin helposti koetilanteen ymmärtämistä. On helpompaa nähdä jos tulokset eivät ole konsistentteja. Tulosten heilahtelu on jotain jota voidaan laskea. (Itse olen joskus heittänyt jotain sen tapaista että "reliabiliteetista voi kikkailla läpi ihan vaan älykkyydellä mutta validiteetin tajuaminen vaatii viisautta".)

Toki validiteetissa on usein kysymys sellaisista asioista jotka on kohtuullisen helppo huomata. Tässä mielessä yksinkertaisin validiteetin luokka onkin sitä että kyselyä näytetään maallikoille ja kysytään pitävätkö he sitä mitenkään järkevänä (face validity). Toki tämän tyylinen tarkistaminen on parempi kuin ei mitään. Mutta toki tämä ei ole vielä hirvittävän vakuuttava saavutus. Siksi usein vaaditaankin että testin tarkistaja on joko asiantuntija tai kokemusasiantuntija. Esimerkiksi jonkin lääketieteellisen apuvälineen kanssa voidaan kysyä apua lääkäreiltä, potilaita tai tälläisten potilaiden omaishoitajilta (content validity). Tämä on huomattavasti vakuuttavampaa. Vaikka matematiikka ja tieteelliselle päättelylle tutut menetelmät ovatkin melko kaukana. Näkemys ja ymmärtäminen voivat kuitenkin tuottaa jotain oleellista. Vähintään tässä prosessissa "ammutaan kaikista huonoimmat ideat pois".

Toki validitettia voidaan lähestyä myös teoreettisemminkin. Tällöin kyseessä on se, että katsotaan miten yhteensopiva testin antama tulos on muiden samaa aihetta lähestyvien testien kanssa (criterion validity). Jos testi antaa toistuvasti samanlaisia tuloksia kuin muut aihetta koskevat eri metodiikalla tehdyt tutkimukset, se vihjaa että ollaan "totuuden jäljillä. Jossain tapauksessa vertailukohtana voi olla myös jokin vakiintunut "suosittu standardi", jolloin testin pitää sopia yhteen nimenomaan alaan vakiintuneimman ja arvostetuimman mittarin kanssa (concurrent validity). Itse tosin hieman karsastan tätä viimeisintä koska vaikka se asettaakin vaatimustason korkeaksi, niin tässä on kuitenkin sellainen tilanne että aiheeseen on jo hyvä testi, joten täytyy kysyä miksi tätä uutta kyselytapaa sitten edes tarvitaan. Jos standardi halutaan ylittää, joudutaan kuitenkin käyttämään muuta menettelytapaa. ; Validiteetin tarkistaminen voi tässä teemoin itse asiassa lähestyä reliabiliteetinmittauksista tuttuja keinoja. (Samalla testaamistavoilla saadaan tukea molempiin suuntiin.) Sillä validitettia voidaan testata sitä kautta miten hyvin se sopii muiden aihetta lähestyneiden testien kanssa ja miten hyvin koejärjestelmä sopii näiden kanssa yhteen kun testiä uudistetaan (convergent validity).

Toki validitettia voidaan lähestyä hyvinkin tieteellisellä otteella. Ja tällöin voidaan vaatia esimerkiksi sitä että "ennustetaan tulevaisuutta" (predictive validity). Testin avulla siis ennustetaan yhteyksiä. Teoriaa vahvistetaan tai kumotaan hypoteettis-deduktiivisesti. Tämä on vakuuttavaa mutta vaatii paljon aikaa. (Laatua harvoin saa "oikoteitä pitkin".)

Kun tätä kaikkea tehdään paljon ja apuna käytetään useiden tutkijoiden näkemystä, testitulosten runsasta tekemistä ja niiden sovelluskyvyn ja muihin testeihin sopimisen kanssa ja voidaan kalliisti, aikaa vieden saavuttaa aika hyvä näkemys siitä miten validi testi todella kaikista ankarimmillaan on (construct validity).

tiistai 8. maaliskuuta 2016

Reliabiliteetista

Psykometriassa keskitytään siihen minkälainen on hyvä tutkimus. Tämä on tarpeen esimerkiksi mielipidetutkimuksissa jossa yksittäisdata-aineistosta etsitään suuria ilmiöitä. Että vaikka erilaisten testien - kuten persoonallisuusluokitelmien ja älykkyystestien - tapaista jossa yleisestä teoriasta yritetään hakea yhteyttä yksittäistapaukseen eli tiettyyn ihmiseen.

Käytännössä alan perustoiminta voidaan tiivistää varsin karkeasti ideaan. Ideaan joka on ymmärrettävä.

Havaittu testitulos = oikea ilmiö + mittaamiseen liittyvä virhe.

Tätä kautta psykometriassa keskitytään validiteettiin eli siihen että testi mittaa mitä se sanoo mittaavansa. Ja reliabiliteettiin joka koskee enemmän sitä että tulokset ovat toistettavia ja konsistentteja. Nyrkkisääntönä onkin että hyvä psykometrinen testi tunnistetaan siitä että sillä on sekä sekä hyvä validiteetti että reliabiliteetti. Ja tavallaan tämän ulkopuolella on "hyvin vähän mitään".

Keskityn tässä blogauksessa reliabiliteettiin. Siihen miten sitä lähestytään
.

Ensimmäiseksi on oleellista tiedostaa, että se ei ole sama kuin validiteetti. Esimerkiksi voidaan kuvitella että joku mittaa kangasta kuminauhamitalla. Sen kautta syntyy hajontaa koska eri mittaajat eri mittauskerroilla venyttävät nauhaa hieman eri määriä. Ja näin syntyy gaussin käyrä jossa reliabiliteetti on heikko mutta validiteetti on keskimäärin kuitenkin hyvä. Tämän vastineeksi voitaisiin laittaa mitta joka on tehty hyvin standardisoidusta kivisestä mitasta. Se mittaa aina samanmittaisen pätkän. Mutta valitettavasti tämä mitta on tehty siten että se on mitattu väärin. Lopputuloksessa validiteetti on heikko mutta sen reliabiliteetti vahva.

Tieteenfilosofiassa reliabiliteetin kaltainen konsepti tulee vastaan ennen kaikkea konsistenssin ja toistettavuuden kohdalla. Ideana on se, että hyvä koejärjestely voidaan toistaa ja se antaa samoja tuloksia.

Näin ollen yksinkertainen ja usein toistettu tapa testata reliabiliteettia on toistaa sama koejärjestely lyhyen ajan jälkeen (test-retest reliability). Esimerkiksi samaa kyselyä kysytään samoilta henkilöiltä uudestaan ja katsotaan miten samanlaiset tulokset tästä saadaan. Tämä on hyvin näpsäkkä tapa mitata asioita. Paitsi silloin kun mitattavat asiat muuttuvat. Tällöin voidaan joutua tilanteisiin joissa testin reliabiliteetti on itse asiassa hyvä mutta se näyttää huonolta koska itse testattava muuttuja on muuttunut. Tämä on toki erityisen tärkeää esimerkiksi niille ... tiettyihin psykologisiin testeihin ... hurahtaneille joiden testimenettely tuottaa huonon toistettavuuden. He voivat sanoa että se johtuu siitä että ihmiset muuttuvat. Tämä selitys tosin kertoo lähinnä sen että test-retest -mallinen lähestyminen ei ole oikea. Se ei ole argumentti sen puolesta että testin reliabiliteetti olisi hyvä. Se on vain syy miksi juuri tämä yksi reliabiliteetti on väärä tapa mitata sen luotettavuutta.

Toinen tapa lähestyä ongelmaa onkin testata kysymyksiä hieman uusin sanoin (alternate form reliability/paraller form reliability). Tässä nojataan vahvasti synonyymien käyttöön ja järjestykseen. Esimerkiksi kyselystä voidaan käyttää kahta versiota ; Vaikka sellaista jossa kysymykseen on vastaukset niin että vaihtoehdoista ensin on usein ja viimeisenä harvoin. Ja toisessa lomakeversiossa nämä vastauslistat on vain käännetty niin että vaihtoehdoissa harvoin tapahtuvat ovat ensin ja usein tapahtuvat viimeisenä (reliability of response sets). Lisäksi voidaan muotoilla kysymyksiä muutenkin. Esimerkiksi "kerran viikossa" voidaan muuttaa "4 kerraksi kuukaudessa" (reliability of urinary function). Heilahtelut vastauksissa kertovat että testiin vaikuttaa virhelähde. Toisaalta myös itse kysymyksiä voidaan muuttaa synonyymejä käyttäen (reliability of equivalent rewording)
1: Toki tässä on syytä tiedostaa että sanavalintojen on oltava nimenomaan synonyymejä. Asenne-eroja ja sanavarastovaatimuksia yritetään välttää. Koska joskus sanat voidaan ladata asenteellisilla konnotaatioilla ja saada aikaan isoja muutoksia siinä miten ihmiset vastaavat. Mutta tämä ei ole reliabiliteettiongelma. Nämä ladatut käsitteet itse asiassa usein parantavat alternate form reliabilityä. Ladatut sanat tälläisessä tilanteessa heikentävät validiteettia. Tästä on mielestäni hyvä malliesimerkki siinä miten homojen avioliittoa vastustaneet tahot tekivät puhelinkyselyn jonka vastausmallit oli valikoitu asenteellisesti ja näin testi antoi vääristeleviä tuloksia. Tämä ei ollut reliabiliteettiongelma vaan ongelma sen kanssa mitä tämä testi mittasi. Eli onglema oli validiteetissa. Se on kuitenkin hyvin lähellä alternate form reliabilityä, ja jos alternate form reliabilityn toteuttaa huonosti niin se itse asiassa voi johtaa siihen että reliabiliteetti ja validiteetti menevät sekaisin...

Toki asiaa voidaan lähestyä sitenkin että otetaan monenlaisia lähestymistapoja samaan asiaan. Katsotaan miten hyvin samaa asiaa eri näkökulmista lähestyvät testit antavat toisiaan tukevia tuloksia (reliability of internal consistency). Datan luotettavuutta lisätään lisäämällä hieman toisistaan poikkeavilla testitavoilla. Tämä on hieman eri asia kuin katsoa pelkästään synonyymejä. Sitä lähestytään tilastotieteellisesti. Kyseessä on faktorianalyysi jolla haetaan tilastotieteellisesti Cronbachin alfa (Cronbach's α). Se katsoo yksinkertaisesti miten eri mittarit tukevat toisiaan. Miten hyvin ne sopivat yhteiseksi vaa-aksi. Nyrkkisääntönä on että tämän pitäisi olla yli 0.7 jotta mittari olisi reliabiliteetiltaan kelpo testi. Tämä voi olla vierasta niille ... tiettyihin psykologisiin testeihin intoutuneille ... jotka ihmettelevät miksi tälläisiä testejä tehdään vaikka "meidän testimme ei olekaan sellainen".
1: Toki tätä yksinkertaisemminkin asiaa voi lähestyä. Etenkin kyselytestiä tulkitessa tai persoonallisuustestiä luodessa hyviä nyrkkisääntöjä saa ihan sillä että hajottaa kyselyaineiston jakamalla sen tuurilla kahtia. Ja katsomalla miten nämä eri puolet antavat keskenään yhteneviä tuloksia (split-half reliability). Toki tämä tarkoittaa sitä että puolikkaassa luotettavuus saa heilahtelua koska sen otoskoko on pienempi. Mutta ideana onkin katsoa että sopivatko pienet otoskoot yhteen. Matematiikka auttaa asiassa. (Spearman–Brown prediction formula.) Näitä puolikkaita koskee toki sekin että etenkin nykyinen taulukkolaskenta antaa mahdollisuuden pilkkoa aineisto kahtia monellakin eri tavalla ja katsoa miten hyvin nämä kaikki antavat yhteneviä tuloksia. Mutta kun tämä tehdään maksimaalisesti niin itse asiassa se mitä tehdään on se, että lasketaan Cronbachin alfa. Siitä sen kanssa on yksinkertaisesti kyse.

Joskus asiat eivät tietenkään ole sellaisia että ne voitaisiin kvantifioida erityisen hyvin. Tämän vuoksi usein joudutaan hankkimaan tietoa muuta kautta. Tällöin avuksi nousee asiantuntijoiden käyttö. Kun samaa aineistoa kerää ja/tai tulkitsee kaksi aivan eri asiantuntijaa voidaan saada tuloksia aineistosta josta tietoa on vielä vähän tai jonka analysointi vaatii vankkaa näkemystä (interobserver reliability).
1: On toki mielenkiintoista huomata että joskus on tilanteita jossa testijärjestelmän reliabiliteetti vaihtelee hirveästi jos tehdään test-retest -reliabilityä yksittäisillä asiantuntijoilla. Osa saa siis keskenään konsistentimpia tuloksia kuin joku toinen. On selvää että konsistentit tutkijat voivat saada hyvän tai huonon interobserver reliabilityn. ; Heillä voi olla oma lukkiutuma tai erilainen lähestymistapa. Toki voi olla myös niin, että molemmat ovat hyviä. Asiat on siis testatttava erikseen. Selvää tosin on että jos test-retest -reliabilityn taso vaihtuu hirveästi asiantuntijan mukaan niin jotkut interobserver reliabilityt ovat heikkoja ihan sen vuoksi että jos tarkan mittaajan tuloksia vertaiskokeileekin joku tumpula niin ei se ainakaan tuloksia paranna. Onkin hyvä katsoa mitataanko "kaikkia testaajia", "parhaita testaajia" vai mitä.

tiistai 29. joulukuuta 2015

Miksi se analoginen pärjää ison viitosen verran paremmin?

MBTI -testin kannattajien parissa on huomattavissa kahta piirrettä;
1: Ensimmäinen on ongelmien vähättely. Kun sen kohdalla puhutaan vaikka reliabiliteetista ja validiteetista, siitä ei välitetä. Selitetään vaikka dikotomian kohdalla vastaan mitä tahansa (yleensä ei mitään joka vakuuttaisi ketään jolla on alan koulutusta, joskus sentään jotain kiinnostavampaakin) jotta saadaan sanoa että sillä ei ole väliä.
2: Sille haetaan arvovaltaa selittämällä että se on samanlainen kuin Big Five (aka FFM) josta puuttuu 1 akseli. Joka on itse asiassa hitusen totta. Niissä on hieman samaa ajatustapaa. Tosin kaikki ero on siinä miten näitä käsitteitä käytetään ja lähestytään. Ja metodi on tieteessä yleensä keskeisempi kuin se, minkälaisella asenteella sitä lähestyy.

Jos MBTI olisi analoginen Big Fiven kanssa niin sitten Big Fivellä täytyisi olla samoja ongelmia? Tässä kohden voidaan viitata vaikka kulttuurienvälisiin tutkimuksiin, joissa sanotaan sellaisia asioita kuin "In cross-cultural studies, reliability of the FFM has been highest". Samanlaisia asioita sanotaan muissakin jossa niitä on vertailtu. Täydellinen sekään ei ole. Mutta testi pärjää kuitenkin varsin hyvin tuolla vertailulla. "Initial pilot test results showed an excellent internal reliability for each of the subscales. However, validity test extracted only four factors of the Big Five Inventory with factor loadings ranging from 0.573 to 0.803. The four factors were extraversion, conscientiousness, neuroticism and openness to experience."

Jos MBTI on todellakin tieteelliseltä kannalta sama kuin Big Five miinus yksi attribuuttiakseli niin miksi Big Five ei kärsi samoista tunnuslukuongelmista kuin MBTI?

keskiviikko 23. joulukuuta 2015

MBTItä helvettiä tuo edes tarkoittaa?

"Takkirauta" -blogissa kirjoitetaan usein MBTI -tyyppimittarista. Kommenttien puolella hän esittää oikein helmen. Kun kommentoija nostaa esiin sen, että persoonallisuuden tutkijat eivät yleensä ota MBTI -mittaria vakavasti tai tieteellisenä, ei blogisti kiistä tätä tosiasiaa vaan vastaa "No jos MB on huuhaata psyyken arvioinnin ammattilasten mielestä, se on huuhaata. Argumentum ad auctoritatem yhdistyneenä blankosanoihin. Kiistätkö Sinä, että akseleita introvertti-ekstrovertti, intuitiivinen-asiapohjainen, ajatteleva-fiilistelevä ja järjestelmällinen-spontaani olisi olemassa? Jos kiistät, kiistät samalla tosiasiat. Jos et kiistä, myönnät että MBTI:n perusteet ovat kunnossa."

On toki mielenkiintoista ottaa huomioon se, että "Puskistahuutelija" on asenteen ja tyylinsä perusteella todennäköisesti "Ruukinmatruuna" ja hän kävi blogissani kommentoimassa kun kirjoitin MBTI -aiheesta. Silloin lähestyin asiaa tieteellisen tutkimuksen kautta ja epämieluisia tuloksia tuottaneeseen tieteeseen  ei tartuttu. Sen sijaan ihmeteltiin millä motiivein tuo tutkimus oli tehty. Muutenkin näyttää siltä että "Ruukinmatruunan" muutkin aihetta koskevat lausunnot nojaavat vahvasti siihen että hän käyttää blankosanoja. Asia on perusteltua kun voi sanoa sivistyssanan biometria. Ja sen sijaan että todistaisi että MBTI on toimiva teoria hän selittää että "se ei ole sellainen teoria" kuin kriitikot sanovat. Ja se on väkevästi tosi koska "MBTI:llä on vakavastiotettava psykologinen pohja (nuo neljä attribuuttiakselia, joita ei käy kiistäminen). Tämä pohja tekee MBTI:stä luotettavan, mutta vain tilastollisesti, siis puhuttaessa isoista ihmismääristä." Attribuuttiakseli on tässä yhteydessä kuitenkin nimenomaan blankosana. Se ei välttämättä olisi sellainen. Mutta tapa jolla sitä käytetään selvästi on sitä.

Ja tuo alkuun nappaamani, Ruukinmatruunan omasta mielestään varmasti vakuuttava, lainaus demonstroi lähinnä sitä että jos on olemassa validi MBTI -luokitelma ja siinä on olemassa kategoria INTJ, jota kuvaa "INTJ:s only appear to be good at everything, but only because they won't allow themselves to be observed doing anything until they have become highly skilled at it." niin sitten Ruukinmatruuna ei ole INTJ koska ei hän näyttäytyisi tuollaisella osaamistasolla muuten julkisuuteen. Tuo alkuun ottamani kommentti on sellaisenaan demonstraatio korkeintaan Dunning-Kruger -efektistä. (Mitä oloa vahvistaa se, että kun puhun korrelaateista niin saan huomautuksen siitä että korrelaatiossani ovat käsitteet väärin päin ja puhutaan implikaationuolista. Korrelaatio ei sellaisenaan tarkoita edes kausaatiota, joten järjestyksellä ei ole väliä. Implikaationuoli taas on sitten tämän päälle jotain vähän muuta.)

Tämänlaiseksi jätettynä tämä blogaus olisi tässä muodossaan Ruukinmatruunan "asiablogaamista". Mutta koska minä olen minä pyrin enemmänkin siihen että kirjoitan metallurgiasta laadukkaammin kuin Ruukinmatruuna filosofiasta. (En tiedä mitä se tarkoittaa tässä aiheessa. No, jotain vittumaista, minut tuntien). Voisin jättää asian vain toteamiseen. Toteamiseen siitä, että "mitä tuo alkuun laittamani heitto muka edes tarkoittaa". Se voisi olla totta tai ei. Ja minulla voisi olla argumentteja asian puolesta tai ei. Mutta tällä ei olisi väliä koska uskottavuus ja asiapitoisuus tuotaisiin esiin statementmuodossa.

Viittaan tässä että olen aiemmin käsitellyt MBTI:tä. Ja en toista niissä olevia asioita. Tämä blogaus pitää siis takanaan kohtuu laajan faktapohjan johon tartun viitteenomaisesti. Sillä tämä asia on alkeista. Tämä asia on niin alkeista että olen kokenut tarpeettomaksi edes puhua asiasta noin 1+1 -tasolta. Mutta luultavasti tämä on se joka tuottaa suurimpia hankaluuksia. Se, että ei ole oikeasti tullut mietityksi sitä mitä persoonallisuuden tai vaikka älykkyyden mittaaminen oikeasti tarkoittaa.

Määritelmät.

Kun katsotaan sitä että onko ihmisillä olemassa ekstroversio ja introversio, MBTI on siinä suhteessa hyvin "kulttuurirelativistinen" malli. Suoraan sanoen. Jos olet mieleltäsi postmoderni niin siinä on sinulle tuskin suurta ongelmaa. Psykologiassa yritetään toki olla astetta vakavampia. Ja tämä onkin se syy miksi MBTI ei ole psykologien hyväksymä. Tässä on hyvä tiedostaa että kun Ruukinmatruuna puhuu auktoriteettiin vetoamisesta, niin taustalla on kuitenkin ilmiö. Se, että MBTI ei ole saanut ammattipsykologeja yhtä innokkaiksi kuin maahanmuuttokriittistä konservatiivista poliittisesti sävyttynyttä blogia pitävät sinänsä ihan fiksut, joskin pakkomielteiset ja ärhäkkäät ihmiset.

Kysymys siitä, että MBTI:llä on "neljä attribuuttiakselia" on siitä kiinnostava, että on aivan oikeasti katsottava mitä se ylipäätään tarkoittaa. Arkipsykologian kannalta tämä on suuri haaste. Myös sellaisissa aivan valideissa testeissä kuin älykkyysosamäärän tutkiminen. Moni näkee että heillä on näkemys siitä mitä älykkyys on. Ja sitten tätä mitataan. Kuitenkin tosiasiassa tesissä täytyy olla älykkyys joka on määritelty. MBTI -mittarissa mielenkiintoista onkin se, että valtaosa ajasta ja voimavaroista on käytetty lopputulosten kuvaamiseen. Se, mitä lopputulos ikään kuin tarkoittaa on saanut paljon enemmän ja vahvempaa analyysiä kuin se, miten tätä aineistoa on saatu. Ja tämä on ongelmallista, koska ominaisuuksia mitatessa lopputulos on helposti yhtä laadukas kuin sen heikoin lenkki.

Ja vielä ongelmallisempaa tässä on se, että MBTI -mittarissa vastauksia kerätään sellaisella tavalla että se, että määritelmät olisi tehty niin sillä ei ole väliä. Koska kysymyksiin vastaajan pitäisi ensin tuntea nämä määritelmät hyvinkin seikkaperäisesti. Ja näin ei ole. Testissä vastataan kysymyksiin. Ja kun viitataan vaikka sosiaalisuuteen ja yhdessäoloon, niin se mitä tämä sana tarkoittaa voi olla hyvinkin määrätynlainen sille vastaajalle. Mutta toinen vastaaja voi määritellä asiaa hyvinkin eri tavoilla.

MBTI:n kohdalla perusongelma on se, että käsitteet ovat yksilöille helposti yksiselitteisiä. Mutta tavalla jonka voi rikkoa analyyttisellä filosofialla. (Eli analyyttisyydellä.) Tosiasiassa MBTI ei mittaa mitään attribuuttia. Se pikemminkin tuottaa neljä tunnuslukua joiden takana on hyvinkin erilaisia elementtejä. Ja mikä pahinta ; Yksilöt eivät tulkitse niitä samalla tavalla.

Tämä tuli itselleni melko selväksi kun mietin miksi itse saan hyvinkin erilaisia tuloksia MBTI -testistä. Syynä on se, että minun on monesti oikeasti vaikeaa vastata kysymyksiin. Syynä on se, että sanat ovat itse asiassa hyvin yleisluonteisia ja kielifilosofiaan tottunut saattaa jopa tiedostaa että käytetyillä sanoilla on useita vakiintuneita denotaatioiltaan ja konnotaatioiltaan toisistaan poikkeavia sisältöjä. Kun kysytään mitä niistä, ei testi auta. Kysymykset ovat hämäriä. Ja valinnat ja painotukset tulevat fiiliksellä tilanteessa. Kognitiotieteeseen tutustuneena tiedän että ihmiset eivät tavallisesti mieti tämänlaisia. Joten heille tämä tulkinnallisuus menee helposti täysin ohi. (Aspergerin syndroomaiset itse asiassa ovat suurelta osin vaikeuksissa juuri siksi että heille tämä tulkinta ei ole niin ilmiselvää. Ja ongelmia tulee kun se ei ole yhdenmukaista muiden kanssa. Yhdenmukaisuuserojen takana on tila erilaisille tulkinnoille.)

Ajatukseni on kuitenkin helpompi ottaa esiin toista kautta. Sellaisessa "akselissa" jossa en koe että minulla olisi hirveästi muutoksia. Introversiota ja ekstroversiota katsoessa tulos voisi riippua syvästi päivästä ja henkilöstä. ; Kun mietitään vaikka akselia introvertit ja ekstrovertit, on selvää että joka päivä voin kokea olevani jossain jossain muuttujassa jossa on kaksi ääripäätä. Ja niin voi jokainen muukin. Mutta jopa kaltaiseni antisosiaalikko voi jonain päivänä voin korostaa sitä että en pelkää ihmisiä ja olen estoton ja jossain mielessä "rohkea". Ja tätä kautta saan ekstroversioon päin menevämpiä tuloksia. Toisaalta joinain päivinä voi korostua enemmän se, että en luota ihmisiin joka voi tehdä minusta hyvin "ujonoloisen" tai varautuneen. Joskus taas korostuu se, että viihdyn hyvin seurassa, etenkin tutussa kohtuu pienessä seurassa. Ja olen tällöin jopa kohtuu spontaani ja vauhdikas seuramies. Mutta toisinaan taas se, että joskus introversiota ja ekstroversiota katsotaan sosiaalisuuden sijasta siitä kerääkö voimia yksin vai seurassa. Kaikki nämä akselit ovat määrittelyn jälkeen objektiivisia. Ne ovat kuitenkin myös joskus keskenään ristiriidassa. Tosiasiassa ei siis ole mitään "introversio-ekstroversiota" jota mitattaisiin. Sen sijaan mitataan sanajoukkoja jotka liittyvät "sosiaalisuus", "seurassa viihtyminen" "ulospäisnuuntautuneisuus" jonka takana on hyvinkin ihmisestä toiseen vaihtuvia käsityksiä. Voidaan sanoa että tosiasiassa tämä ei ole ollenkaan mikään attribuutti. Se on enemmänkin kattotermi jonka alla on useita eri ominaisuuksia (rohkeus, spontaanius, luottamus, jopa maailmankuvallinen ihmisten rakastaminen). Ja mikä pahinta. Kaikille ihmisille tämä attribuuttirykelmä tämän akselin takana ei edes ole sama.

Tässä mielessä on aika omituista sanoa että MBTI -mittari olisi toimiva heti jos olisi olemassa jotain jolla tämä voitaisiin määritellä. Tämä ei pidä paikkaansa. Älykkyydenkin kohdalla kognitiotieteen aluksi tungettiin opeteltavaksi valtava määrä erilaisia älykkyyden määritelmiä. Se, että näitä määritelmiä on olemassa ei vielä tee älykkyydestä puhumisesta järkevää. Sen sijaan on katsottava miten tämä älykkyys määritellään ja miten sitä käytetään. Ilman tätä tasoa älykkyys onkin täsmälleen samanlaista kyökkipsykologiaa jolla älykkyydestä puhutaan maallikoiden parissa. Se on yleisesti ottaen potaskaa koska selkeästi heillä älykkyyttä ei ole määritelty kovin selkeästi, ja itse asiassa keskustelussa älykkyysnäkökulmat vaihtuvat toiseen pitkin matkaa. (Koska käsitteitä ei ole määritelty niitä käytetään hyvin "joustavasti" ja epämääräisesti.) Se, että esimerkiksi älykkyysosamäärätesti selkeästi mittaa jotain objektiivista ei tarkoita että kaikki älykkyystestien nimellä kulkevat olisivat vakaalla pohjalla. Itse asiassa älykkyystestien alkupuolella on jopa ollut paljon testejä jotka ovat olleet selvästi virheellisiä. Ja näin siitä huolimatta että älykkyys itsessään voidaan ottaa käsittelyyn.
1: Onkin hyvä huomata että älykkyyden reaktionopeusmalli ja älykkyyden prosessointitehomalli johtavat siihen että molemmat ovat objektiivisia ja älykkyyteen liittyviä. Reaktiokykymme kuitenkin heikkenee ja prosessointitehoa kuvaa Flynnin efekti. Jos vaihtaa määritelmiä lennosta voi generoida valheellisia väitteitä. Flynnin efekti ei esimerkiksi nosta reaktionopeuksia tai reaktionopeuksien hidastuminen ei falsifioi Flynnin efektiä. Mokia ei tehdä jos tajutaan määritellä asiat huolellisesti ja tiedostaa että ei ole mitään sellaista "attribuuttia" kuin älykkyys. On sen sijaan ihmisiä joita kuvaavia piirteitä voidaan lähestyä ominaisuus-ilmiöryppäin ja korrelaatein. Ja näitä ryppäitä on sitten erilaisia ja niitä varten on varattu nimilappu "älykkyys". Ei ole siis vain niin että "onko älykkyys olemassa vai ei". Vaan siitä että määritellään tarkasteltavat kohteet yksiselitteisesti ja mitataan niitä tavoilla jotka mittaavat juuri näitä.

Tämä on toki jotain jota voidaan käsitellä ja jota varmasti onkin käsitelty. Olen kirjoittanut tähän viitteitä jo kun aiemmin kirjoitin siitä mihin MBTI kelpaa. (Se kuvaa itsen ihanneminää, sitä miksi haluaa tulla.) Näen että on turhaa luoda mitään objektiivista luokitelmaa joka tarkoittaa jotain tiettyä asiaa. Sen sijaan on syytä tiedostaa että testin tekijä itse vastaa niihin kysymyksiin. Ja hänelle luetaan tulokset jotka käyttävät näitä samoja käsitteitä. Näin ollen hän itse kyllä tietää mitä se tulos tarkoittaa. Ulkopuolinen ei välttämättä käytä samoja sanoja ihan identtisellä tavalla. Mutta tällä ei ole väliä jos tuloksenluvun tulkitsee samalla käsitteistöllä. Näin ollen testi voi kertoa jotain kun ihminen sitoutuu testin tekemisessä ja luennassa identtiseen käsitteistöön. Tämä näyttää valitettavan usein puuttuvan ja MBTI:tä lähestytään kuin se olisi jokin joka antaa lukeman josta voitaisiin puhua ikään kuin se luokitelma olisi kaikille sama. Tosiasiassa yhden viitekehyksen INTJ voi olla toisen viitekehyksen jotain hyvinkin muuta. Yhden introvertti voi olla toisen ekstrovertti jos toinen tarkastelee luottamus-ujousteemalla ja toinen lähestyy asiaa rohkeusteemalla.

Toki ongelma ei tarkoita täyttä huonoutta. Tämä yllä sanomani voitaisiin tulita helposti väärin. (Koska jostain syystä jos "jotain ei ole huomioitu" niin monelle se tarkoittaa samaa kuin "täysin arvoton". En vetele tämänlaisia.) Monimääritteisyydestään huolimatta MBTI selvästi mittaa jotain. Käsitteet eivät ole täysin satunnaisia. Ja hyvä testin tekijä vaikuttaakin havaitusti testitulosten toistettavuuteen. Joten selkeästi tämä asia on jotain joka vaihtelee jopa ammattilaistasoisissa testeissä. Toisaalta tämä muutos vihjaa siihen että testissä on jotain hyvääkin. Nähdäkseni varmin vakuutus siitä että takana on "jotain" on kuitenkin varsin erikoista kautta. Sain Ruukinmatruunalta pyytämällä nipun erilaisia viitteitä, joissa on lähestytty älykkyyttä ja MBTI -testiä. Niissä on selvästi havaittavissa että älykkyys korreloi eri luokkien kanssa eri tavalla. Koska älykkyystestit on tehty asianmukaisesti, ja eri luokkien välille syntyy keskenään erilaisia tuloksia, se viittaa siihen että tulokset eivät ole satunnaisesti valikoituneet. Tämä vaatii sitä että MBTI ei ole täysin tyhjä. Monimerkityksellisyys ei tarkoita täyttä satunnaisuutta. (End of discussion.) Monimerkityksellisyys tuo epätarkkuutta mutta lopputulos ei tarkoita samaa kuin "täysin mielivaltainen". (Taustalla on monia eri ominaisuuksia, mutta ei kuitenkaan mitä tahansa ominaisuuksia. Ja kenties jotkut valinnat ja painotuksetkin ovat paljon yleisempiä kuin toiset.) Tämä on syytä tiedostaa.

Lukutavan vääristymät.

Kenties seuraavaksi onkin syytä huomata että se, että ominaisuus on olemassa ja se olisi yksiselitteinenkin, ei vielä riitä. Kun asiaa mitataan on syytä mitata sitä mitä mitataan. Vaikka ominaisuudet olisivat absoluuttisia, ihmisestä toiseen samoja ja vastaavia niin se ei riitä. Jos mittari jolla sitä mitataan on väärä, lopputulos ei toimi. Siksi siitä että "attribuuttiakselit ovat olemassa" ei mitenkään takaa että testin perusta olisi kunnossa. Ehei.

Näistä ehkä helpoin on se, että MBTI:ssä ei ole minkäänlaista "valheenpaljastusta". Sekä aineiston keruussa että tulkinnassa on harjoitettu käytäntöjä jotka nimenomaan psykologit tietävät harhauttaviksi. Toisin sanoen vaikka testi toimisi teoriassa täydellisesti niin mukaan tulee vääristymälähteitä ja tuloksia tulkitaan tavoilla jotka tekevät siitä merkityksettömän. (Jo tämä yksinään tekee testistä scheissenbergiä. Siitä huolimatta että attribuutit ja testi muuten olisi hyvä. Jos tutkittavasta tulee vääristymiä ja tulkintakenttä harjaanjohtaa sitä mitä tulokset tarkoittavat, testin "perusta" on kaikkea muuta kuin kunnossa.)

Se ei myöskään mittaa itse asiaa vaan ihmisen mielikuvaa. Tämä on aivan oikeasti relevantti kysymys. Esimerkiksi älykkyystestiä ei tehdä siten että kysytään useita kertoja minkälainen ihminen kokee olevansa. Sen sijaan hänet laitetaan ratkaisemaan ongelmia joita ratkotaan älykkyydellä. Ja niistä joko selvitään tai ei selvitä. Tämä on erityisen merkittävä MBTI -testin kannalta siinä mielessä että
1: Lähes kaikilla ihmisillä on ns. Lake Wobegon efekti. Siinä ihmisillä on itsestä todellista ruusuisemmat kuvat. Ihmiset jotka yrittävät olla rehellisiä ja kuvaavat ovatko he keskimääräistä tyhmempiä tai älykkäämpiä, kuvaisivat itsensä noin 80% keskimääräistä älykkäämmiksi. Tämä on tavallista heikompaa lähinnä masennuspotilailla. Joten kenties MBTI toimii hieman paremmin masentuneille ihmisille. Tosin tämä tulos on siitä miellyttävä, että se tekee MBTI:stä hyvän siinä missä sitä pidän hyvänä. Eli ihanneminänsä kuvaamisessa. Jos ihminen arvostaa sosiaalisuutta, hän todennäköisemmin vastaa sosiaalisuutta korostavammin vastauksiaan. Usko tuloksiin taas voi olla placeboaskeleen lähempänä tämän ihanteen saavuttamista. Ja tässä mielessä testi ei ole läpeensä pahuutta. (Mutta "vankka psykologinen pohja" in your ass. Tai onhan tuossa tieteysti psykologinen pohja. Ei vaan sellainen jota Ruukinmatruuna siihen yrittää sovitella.) Tätä ongelmaa ei MBTI -asteikossa ole oikein mitenkään tarkasteltu. Kun sanoo että "carbage in-carbage out" eikä testin onnistuvuutta testata, yritetä testata tai edes ole keksitty tapaa jolla testin osuvuutta ja siihen vastanneen valelteluasteita voitaisiin tunnistaa niin vastaus on "Puskistahuutelijan" "no shit sherlock". No, valitettavasti tätä ongelmaa ei selvästi ole ratkaisu. (Siihen ei ole laadukkaampaa vastausta muualtakaan tarjolla.) Tosiasiassa MBTI -testistä saisi ihan oikeasti paremman sillä että niillä mitattaisiin toimintaa. Eli sen sijaan että kysyttäisiin oletko sosiaalinen, pistettäsiin sosiaalisia kykyjä ja rohkeutta mittaaviin tehtäviin.
2: Toinen ikävä asia on Dunning-Kruger -efekti. Sen mukaan ihmiset jotka ovat erityisen huonoja jossain aiheessa yliarvioivat kykyjään. Ja pahasti. Itse asiassa he eivät edes tiedä mitä eivät tiedä ja tässä mielessä he ovat hyvin pihalla. Tämä on hyvin tärkeää siinä mielessä, että Hannu Lauerma esimerkiksi on kertonut kirjoissaan miten väkivaltarikolliset jotka harrastavat hyvin räjähtävää spontaania ja harkitsematonta väkivaltaa voivat pitää suurimpana ongelmanaan sitä että he ovat liian kilttejä. Syynä on itsetuntemuksen puute ja itsehillinnän ja kiltteyden ymmärtämisen puute hyvin laajalla tasolla. "Tunnetajuttomuus" johtaa vääriin tuloksiin. Tämä ongelma on käsittääkseni jotain jota MBTI -testeissä joskus ja parhaimmillaan osataan kuitenkin ottaa huomioon. (Testiä ei tällöin suositella esimerkiksi tarkkailuluokkalaisille.) Eli MBTI -testi ihmisille joilla on jo hyvä itsetunto voi olla aivan toimiva. (Joskin voi olla syytä miettiä mikä tarve testaamiselle tällöin on. Testi joka toimii vasta kun ihminen jo tietää vastaukset valmiiksi on hieman omituinen testi tehtäväksi. No, jos haluaa varmistaa sen minkä jo ennalta tietää ja nauttii prosessista niin miksipä ei. Yleensä psykometriassa tosin yritetään saada jotain uutta tietoakin sillä testaamisella.)

Tähän liittyvä kolmas ongelma liittyy sitten jo siihen keskusteluympäristöön ja tulkitsemispiireihin joita MBTI -ilmiön ympärillä pyörii. Jos on tutustunut psykologiaan joka toimii kategoriointi-ihmistuntemusteeman ympärillä (Esimerkiksi ihan sitä alkeistason tietämisen kautta että mitä Wiseman on popularisoinut) niin tulkinnasta innostuneiden nettikirjoittelua ja vastaavaa leimaa vahva forer -efektin maku. Toki tätä näkyy jo siinä kun joku ulkopuolinen tulkitsee mitä tämä ylipäätään tarkoittaa.

Forer -efekti näyttää myös olevan hyvin vahva syy miksi testiin luotetaan. Esimerkiksi eräs miekkailukaverini pitää MBTI -testiä hyvänä. Ja moni muu näyttää olevan samoilla teemoilla. Ja näissä selvääkin selvintä on, että testiin ei luoteta siksi että olisi tutustuttu psykometrian tieteeseen ja katsottu onko MBTI:llä validiteettia ja reliabiliteettia. Vaan että he ovat tehneet testin ja saaneet tulokset. Ja ne vaikuttavat hyvin päteviltä. Valitettavasti kaikissa huuhaaluokituksissa horoskoopeista lähtien Forer efekti tekee niin että tulokset tulkitaan itselle sopiviksi. Arvotutkin attribuuttilistat koetaan osuvina jos ne on vain personalisoitu jotenkin. Eli vaikka väitetty että syntymäpäivä tai henkilön asentokieli tai jättämä jälki "johonkin aurakameraan" niin jo tämä tekee lopputuloksesta luotettavamman oloisen. (Horoskooppeihinkin luotetaan helposti juuri siksi että "en uskonut, luon huvikseni kuvauksia ja ne tuntuivat osuvan.")

MBTI: testi itse sisältää vääristymälähteitä ja sen tulkinta vielä vahvistaa niitä. Näin ollen vaikka testi mittaisi oikeasti olemassaolevaa ominaisuutta joka olisi objektiivisesti määritelty, niin se ei merkitsisi silti juuri mitään. Tämä puoli yksinään olisi aivan hyvä syy sille, että ammattilaiset eivät MBTI -testiä ota vakavasti.

Itse "mittauskin" on mitä on.

MBTI on pohjalta lähinnä kategorioiva teoria. Se ei tässä mielessä ole altis falsifioinnille. Tässä mielessä on hyvin mielenkiintoista kysyä onko koko käsitteille tavallaan mitään objektiivista pohjaa. Toisaalta voidaan nähdä että sillä voi olla deskriptiivistä arvoa tästä huolimatta. Tässä mielessä on syytä tiedostaa että asiallinen psykologinen testi onnistuu reliabiliteetissa ja validiteetissa. Nämä ovat se litmuksen testi joka on annettava testille kuin testille. Ja MBTI -testi ei tässä kehuttavasti menesty. Oikeastaan kaikki keskutelu asian "vakaasta psykologisesta pohjasta" pitääkin lopettaa tähän.

Tässä aiheessa huomio toki siirtyy siihen miten kyökkipsykologiassa ongelmat voidaan lakaista. Tämä taas tehdään tavoilla jotka alleviivaavat sitä miten huonosti psykometriaa on osattava jotta nämä selitykset menisivät läpi. (Itse toivon että MBTI -testin puolustajilla on parempia argumentteja. Olisi ehkä attribuutiovirhe yleistää että argumenteissa toistuvat virheet kuvaisivat itse testiä. Testin kannatuksen syistä ne tosin kertovat sitäkin enemmän. Maallikoiden suosiot saadaan sitä kautta että ihmiset ovat tunneolentoja, ei sillä että testi olisi tiedettä. Siksi horoskoopit ovat suositumpia kuin monet aivan pätevät psykologiset testit.)

Toki on syytä huomata että MBTI -testissä on oleellisia virheitä jotka olisi helppo korjata. Ne eivät tavallaan liity mitenkään edes siihen mitä ominaisuuksia kuvataan ja miten niitä tentataan. Itse asiassa näistä näkyvin on juuri se, että kuvaukset tyypitetään dikotomisesti. Testin kannattajat selittävät että kyseessä on jatkumo. Mutta miksi sitä sitten kuvataan heikolla tavalla? Testin reliabiliteetti on heikko koska tulokset kuvataan kahtena ja vain kahtena kategoriana. Ja nämä kategoriat vieläpä "katkaistaan" keskikohdasta tavalla jossa katkaisukohta on lähellä sitä missä suurin osa ihmisistä on. Tämä kuvaustapa on huono. Siinä hukkuu valtavasti informaatiota. Tätä ei kuitenkaan oikein haluta muuttaa. Ja onkin hämmentävää että tulosten kuvaamiseen on jämähtänyt noin omituinen ratkaisu. Testistä saisi oikeasti laadukkaamman sillä että heitettäisiin nuo kirjainyhdistelmät pois.

Myynninlisää;


Tosin on selvää että kun testiä katsoo, ihmisiä näyttää viehättävän juuri se että se kategorioi ihmisiä arkkityyppeihin juuri tuolla tavalla. Toisin sanoen kuvaustapa jossa lopputulos on dikotominen kirjainyhdistelmä on myyntiargumentti joka tehdään siitä huolimatta että se on suunnilleen huonoin tapa kuvata ilmiötä jos se todellakin on jatkumo. ; MBTI -testi luokin kategorioita lähinnä siksi että ilmeisesti oli kiva laittaa kategorioita johonkin kategorioiden vuoksi. Joten miksipä ei laittaa sitä paikkaan ja kuvata sitä tavalla joka vääristää ja hukuttaa informaatiota pahimmalla mahdollisella tavalla?

Toisaalta validiteetin kohdalla on huomattavissa että ihmiset eivät näytä tyypittyvän kategorioihin. Tämä on erityisen tärkeä aiemmissa blogauksissani mainitsemassani Nowackin tutkimuksessa. (Jonka motiivit ovat kunnossa, ja jonka tieteentekotapakin on kunnossa, kiitos vaan "Puskistahuutelijalle.) Kun katsotaan miten kysymyksiin vastaaminen liittyi toisiinsa, huomattiin että vaikka testissä tietyt kysymykset mittaavat aina yhtä akselia, jolloin tarkasteltavana on aina yksi attribuutti kerrallaan, niihin vastaamisen kohdalla ei ole yhteyttä. Eli kun vastaat yhteen tietyllä tavalla, ei ole erityisen paljon todennäköisempää että vastaisit saman kategorian muihin kysymyksiin samalla tavalla.

Tätäkin vastaan on puolustauduttu samalla tavalla millä MBTI -testin puolustaja puolustaa aivan kaikkea. Eli selittämällä että MBTI ei ole arkkityyppinen testi jossa oletettaisiin että ihminen on vaikka introvertti tai ekstrovertti. Vaan että kyseessä on nimenomaan harmaasävyinen jatkumo. Tämä olisi siinä mielessä hyvä, että se selittää miksi yksi kysymys ei liity toiseen. Valitettavasti tämä kuitenkin vihjaa että kenties koko akselia ei ole tosiasiassa olemassa ainakaan millään tavalla jota tämä kyseinen testi mittaisi. Sillä jos mietitään mitä introversio ja ekstroversio tarkoittaa, niin siinä on oletus siitä että se on jonkinlainen tilastollinen taipumus toimia tietynlaisissa tilanteissa. Voidaankin nähdä että jokainen testin kysymys on ikään kuin jotain jolla mitataan tämän taipumuksen voimakkuutta. Jos validiteettia ei ole, se tarkoittaa sitä että kysymyksiin vastataan toisistaan riippumattomasti. Valitettavasti tämä vihjaa siitä että testiä ei voi yleistää mihinkään. Sillä ulkomaailmankin tilanteet ovat - parhaimmillaan, silloin kun henkilön omat vääristymät eivät vaikuta, hän tuntee itsensä ja kuvaa sitä parhaalla mahdollisella tavalla johon hän kykenee ja nämä kyvyt ovat suuret - tavallaan yksi kysymys. (Siis jos testi oikeasti toimii ja sitä voidaan soveltaa noin niinkuin mihinkään.) Jos testin sisällä ei ole yhteyksiä vastausten välillä, niin miksi ne korreloisivat näidenkään kanssa?

Kysymyspatteria toisin sanoen luetaan siten että kysymykset olisivat tilastollinen testi joka mittaa taipumusta. Ja tällä taipumuksella ei olisi mitään sisäistä yhteyttä. Siitä saataisiin prosenttiluku joka sitten kuitenkin jotenkin pitäisi sisällään jonkin sisäisen yhteyden joka toimisi testin ulkopuoliseen maailmaan. ; Onkin selvää että kun MBTI -testin kannattaja puhuu validiteettiongelmista, hän käyttää testiä ikään kuin jonain jota käsitellään aivan eri ehdoin kuin ulkomaailmaa. Kysymyksien ei tarvitse liittyä toisiinsa koska ne mittaavat taipumusta joka on tilastollinen. Mutta taipumukset kuitenkin kuvaavat jotain joka sitten on yleistettävissä. Validiteetti nimenomaan mittaa näitä teemaisia yhteyksiä. Ja tässä mielessä ongelma on hyvin paljon syvempi kuin voisi luulla. Se, että validiteetti testin sisällä ei paina koska harmaasävyinen jatkumo pakottaisi tulkintaan jossa jokainen ympäristössä tehty aktiokin olisi osa harmaasävyistä jatkumoa ja validiteettia näihinkään ei olisi. Jolloin testin puolustaja väittää että hänen testiään ei voi soveltaa taipumusten mittaamiseen elämässä. Jos siis olisi koherentti.

Lopputulos ; MBTI -kultti sössii vielä senkin mitä hyvää on jäljellä;


MBTI on hyvin omituinen testi. Sitä voi käyttää johonkin. Se ei siis ole aivan yhtä huono kuin arvottu ja nimeen liitetty horoskooppi. (Vaikka tätä rinnastusta usein tehdäänkin.) Mutta ei juurikaan. (Jota "ei ole horoskooppia" -puolustukseen menijä taas ei oikein huomioi yleensä.) Se on vain hämmentävän huono. Ja nimenomaan siten että siinä on elementtejä jotka ovat ilmiselvästi sitä huonontavia, ne olisi helppo korjata ja tätä korjausta ei tehdä. (Ja testin puolustajat suuttuvat jos niihin viittaa. MBTI:n ympärillä onkin "kulttiluonteista toimintaa" jonka ironisuutta kuvaa se, että testiä käytetään juuri sellaisilla tavoilla joita testin ei väitetä opettavan. Kuten esimerkiksi millä alalla töissä menestyisi.)

Itse asiassa mitä enemmän tämän testin psykologisesti varmaa pohjaa lähestyy, sitä vahvemmin on selvää miten erilaisilla ja monenlaisilla tavoilla se on huono juuri sellaisella tavalla joka ei miellytä psykometrian ammattilaisia. (Joka on se syy miksi he eivät siitä pidäkään.) Toki tässä on osittain syynä sekin että laatukriteerit ovat laatukriteereitä. Ja osalla ne ovat matalampia. Ja ammattilaiset voivat vaatia mersua kun taas mopo voi riittää joillakin siihen erektioon ja suditteluun mitä he kaipaavat.

Toisaalta MBTI:ssä on joitain hämmentävän huonoja piirteitä jotka voitaisiin korjata. Minäkin osaisin niitä parantaa, joskaan en ehkä ihan mersuksi asti parannella. Ja tässä kohden käsittämättömintä onkin se, että testi näyttää ikään kuin "syntyneen valmiina". Sitä editoidaan ja muokataan hämmentävän vähän. Sen mittaamistapaa ja tulosten esittämistä ei hiota paremmaksi ja paremmaksi. Se ei täsmennä ja paranna itseään ja se ei tavallaan opi virheistään. Tässä syynä lienee se, että MBTI on ennen kaikkea bisnestä. Ja bisneksen kannalta esimerkiksi huonoon paikkaan tehty kategoriointi toimii. Wiseman tietää miksi horoskoopit vetoavat juuri sillä rakenteella kuin ne vetoavat. Ja kategoriointi tässäkin kohdassa varmasti lisää käyttäjämiellyttävyyttä. Niin että maksaja ja testin tekijä on tyytyväinen. Ja kokee saaneensa ymmärrystä. Tätä puolta ei välttämättä arvioida tai mitata sillä että ovatko tulokset annettu tieteellisesti parhaalla mahdollisella tavalla.

Mutta kaiken kaikkiaan ; MBTI ei ole kunnossa. Se ei ole täysin mielivaltainen. Sen etuina on lähinnä käyttäjäystävällisyys ja se että se on halpa ja edullinen tehdä ja toistaa. Se on tässä mielessä käytettävyydeltään erinomainen testi. (Siinä mielessä, että sen voi tehdä ilman avustajaa tai erityistaitoja tai harjoittelua.) Jossa testin tehnyt saa sellaista hyvää fiilistä jota saa kun joku ulkopuolinen varmistaa sinulle sen jonka olet jo valmiiksi tiennyt.

Eikä se ennen kaikkea ole kunnossa vain siksi että olisi neljä attribuuttia jotka olisivat olemassa. Ei. Se lähestyy kattokäsitettä täsmentämättä niitä. (Big Five tekee tätä esimerkiksi paremmin. Sen kysymykset luovat määritelmiä ja eksaktoivat niitä aivan eri tasolla. Pinnallisesti niissä on paljon samaa.) Mutta ottamatta tätä epämääräisyyttä huomioon tuloksien tulkinnassa. Ja se ei edes mittaa näitä ominaisuuksia vaan lähestyy asiaa "asian vierestä" ja nojaa sen varaan että ihmiset todella tuntevat itsensä ja ovat rehellisiä. Siitä huolimatta että nimenomaan psykologia on näyttänyt että ihmisten käytös ja näkemys ja ennusteet omasta käytöksestä ovat paitsi virheellisiä, niin myös virheellisiä tavoilla joihin liittyy ns. systemaattinen virhe. (Eli määrittelemällä luottamusrajoja hallitsemalla tulos olisi tieteenmukainen, vaan tulokset nimenomaan vääristyvät.) Lopputuloksia käsitellään ja luokitellaan tavalla joissa hukataan informaatiota. Lopuksi se sitten myy tämän kuin horoskoopin.

MBTI -testiä katsoessa olo onkin usein hyvin hämmentynyt. Sitä oppii että teoriassa testiä ei saa tehdä siten että se kertoisi missä työssä tai ammatissa menestyy. Kuitenkin sitä hyvin usein käytetään juuri tähän ja tämänlaisiin. (Jopa samat henkilöt jotka ensin yhtäällä korostavat että testiä ei voi soveltaa mihin sitä ei voi soveltaa. Mutta toisaalta sitten keskustellaan muualla kuin sitä voisikin soveltaa.) Ja tämän huomioimisen jälkeen käteen jää hyvin vahva kuva siitä että MBTI on testi joka ei selvästi sovellu helvetin moneen asiaan. Testi ei tee ja sano ties mitä. Ja testi ei myöskään ole juuri minkäänlainen sellainen testi kuin kriitikot sanovat. Tässä prosessissa auki jää vain yksi kysymys. Miksi MBTI on vahva ja mihin sitä oikeasti voi soveltaa. Mikä on sen sovelluskenttä. Mikä hyöty siitä on? Mikä arvo on esimerkiksi testillä joka antaa itsetuntemusta mutta joka vaatii toimiakseen harvinaisen lujaa itsetuntemusta? Kun teen testin niin miksi se mittaa relevantteja ominaisuuksia relevantilla tavalla ja antaa käteen jotain josta on eksaktisti hyötyä johonkin.

Aivan kuin MBTI olisi kehitelmä joka on lähtenyt amatööripsykologiapohjalta siten että mielessä ovat ensin olleet kategoriat. Ja tämän ympärille on sitten rakennettu testikysymystö joka tukisi tätä kategoriointia. Sitten kriitikot ovat tajunneet että mitään kategorioita ei olekaan ja tähän on reagoitu siten että on puhuttu jatkumoista. Muutenkin näyttää että MBTI on vahvimmillaan siinä että se rationalisoi tätä pysyvää ydintään siten että se reagoi kritiikkiin. Mistä tietenkin seuraa se, että testistä jää hyvin tietynlainen vaikutelma. (Jonka kuvasin aiemmin tässä samassa blogauksessa.)

MBTI onkin siitä jännittävä testi, että MBTI on hieman kuten uskonto. Siinäkin usein "teologisesti korrekti" taso joka eroaa vahvasti siitä sosiaalisesta hurinasta jota sen ympärillä menee. Onkin kenties tarpeen erottaa MBTI -testi testinä. Ja MBTI -sosiologisena konseptina (kulttina) jota kiinnostaa luoda hyvin laajoja teorioita siitä miten joku luokitus itsellä kuvaa itseä ja ennustaa tiettyjä asioita yksilötasolla hyvinkin tarkasti. Ja jonka toimintatavat ovat usein suoraan ristiriidassa siihen mitä virallinen MBTI sanoo siitä mitä testillä voidaan ja ei voida tehdä. ; Ja samanaikaisesti MBTI on kuin uskonto siinäkin mielessä että sillä filosofisemmalla puolella ei olisi relevanssia ilman sitä sosiaaliselta puolelta tulevaa suosiota ja vallanantoa. Maallikot eivät käytä MBTI -testiä oikein mutta he puolustavat teoreettista konseptia innokkaasti ja verevästi. Ja toisaalta sitten kovan painan tullen MBTI -teoreetikko irtauttaa itsensä täysin tästä rahvaasta ja selittää miten heidän juttunsa on hienompi ja ihan eri juttu kuin se millä tätä kokonaisuutta myydään. (Tässä testi on kyllä nerokas. Se on rakenteeltaan sellainen että se menisi kaupaksi ilman substanssiakin. Siinä on hieman substanssia mutta myynnin kannalta tällä ei ole väliä.)

keskiviikko 4. helmikuuta 2015

Tämä blogaus johtuu vain siitä että me INTP:t emme usko MBTI -luokituksiin...


Hikipediaan tuotettiin vihdoin artikkeli MBTI -testistä. Se syntyi yhteistyönä "Humppakuution" aka "Takkirauta" -blogin "Ruukinmatruunan" että "NPOV"in aka "Aleksanterin Ratkaisu" -blogin "Squirrelin" voimin. (Joista ensimmäinen puhuu itsestään kolmannessa persoonassa ja jälkimmäinen on niin keisaria että häntä teititellään monikkomuodossa.)

Merkittävää projektissa on lähinnä se, että kantamme MBTI -testiin ei voisi olla erilaisempi. "Ruukinmatruuna" pitää testiä hyvänä. Minua se ei miellytä. Teksti on rakenteellisesti tuotettu kenties parhaalla mahdollisella tavalla ; Testiä kannattava "Humppakuutio" on kirjoittanut sen vähän kuin minä olisin tehnyt sen sarkastisesti. Ja minä olen kuvittanut ja väritellyt artikkelia sillä asenteella kuin olisin tehnyt sen ironisesti. Minusta kokonaisuus toimii sortumatta liialliseen asennevammaan suuntaan tai toiseen.

Kannattaa kenties tehdä oma mielipide lukemalla itse artikkeli. Tosin hikipedia ei ole ollut toimintavarma viime päivinä joten artikkeli on olemassa hyvin abstraktilla tavalla, sellaisella jossa se ei kenties ole havaittavissa olevassa virtuaalitodellisuudessa. Mutta kyllä se siellä jossain on. (Sillä lailla metafyysisesti, ontologisesti. Piilossa kuin deistien Jumala.)

Olen kuitenkin tietoinen niistä asenteista jotka artikkelin innoittamisessa ovat vaikuttaneet. "Ruukinmatruunan" blogissa on tuore artikkeli joka puolustaa MBTI:tä. Se taas on selvästi vastareaktio niihin suuntauskiin joita olen itse edustanut. Ja siinä mielessä siihen on tärkeää myös vastata. Toki tässä Ruukinmatruunan artikkelissa on hämmentävän vähän lähteistystä ja hirveän paljon väitteitä. Tämä tekee siitä melko heikon puolustuksen. Yritän kuitenkin ohittaa tämän puolen. Vaikka rehellisesti sanoen tuntuu kuin kritiikiltä puolustautunut olisi lukenut huolimattomasti esim. vakavastiotettavamman aikaisemman kirjoitukseni ja reagoi tähän ei-tieteellä. Tässä blogauksessa ei ole paljoa viitteitä eikä yksikään niistä ole vaikea. Syynä on oikeastaan se, että kaikki tarvittava data on jo aikaisemmissa MBTI -blogauksissani ja tämä on vain niiden aukikirjoittamista. Tekstit saa näkyviin painamalla auki MBTI:n blogin alla olevasta hakusanavalikosta. Kaikki saa yhdellä kertaa auki, mikä on kätevää kuin poni. (Valitettavasti ilman niitä tämä blogaus ei varmasti tunnu kovin järkevältä, ja valitan jos tästä syntyy tarpeetonta vaivaa.)
1: En itse asiassa tiedä onko suomenkielisissä blogeissa oikein intouduttu MBTI -kritiikistä. Ja minulla on vähän sen tyylinen olo että vähän humoristisempaan vetooni MBTI -stä tekemääni juttuun reagoinut nimimerkki "Puskistahuutelija" on todennäköisesti Ruukinmatruunan alter ego. Tai jokin joka pseudonyymillä on kakkosalanimenä. Eli sukkanukke. Tämä on toki vain teoria, mutta luonteen samanlaisuus ja vastaavat korostavat että yhteys tuntuu varsin vahvalta. Ehkä tästä ei pitäisi nostaa mitään meteliä mutta en malta olla pikkuisen mainitsemasta asiasta.

On hyvä ottaa diplomaattisesti.


Monessa kohden näkee että olemme itse asiassa hyvinkin samaa mieltä yksityiskohdista. Vaatimustasomme ovat vain erilaisia. Tässä kohden on todellakin asiallista minulta täsmentää muutamia detaljeja. Ensimmäinen asia on yhteys Jungilaisuuteen ; Ruukinmatruuna esittää että "Carl Jung ei perustanut MBTI:tä, vaan sen perustivat Katherine Briggs ja Isabel Myers, ja se on ensisijaisesti MB-tyyppi-indikaattori, ei J-indikaattori. Jungin osuus rajoittuu lähinnä siihen, että hän loi arkkityypin käsitteen (vrt. roolipelien "hahmoluokka") ja siihen, että hän löysi nuo sekundaariset ja tertiääriset funktiont." ja "Jungilaista psykologiaa mukana on lähinnä siteeksi, ja MBTI perustuu lähinnä Myersin ja Briggsin havainnoille ihmisistä ja asioista."

Tämä on hyvin kiinnostava huomio, sillä jungilaisuudella on hyvin määrätynlainen tapa luokitella ihmisiä. Jungilaisuuteen liittyy arkkityypin käsite. Ja tässä jo pikainen kepeään sivustoon tutustuminen muistuttaa että arkkityypit ovat tavallaan vain puolet jungilaisuudesta. Jungilla oli 12 arkkityyppiä ja ne voitiin karkeasti jakaa siten että oli ikään kuin neljä asennoitumistapaa jotka voitiin nähdä kahtena jatkumona. Oli kaaos-järjestys ja ego-sosiaalisuus -akseli. Joista sitten oli "karkeasti ilmaisten" kolme arkkityyppiä kaaoottiselle, järjestykselle, egolle ja sosiaaliselle. (Asia ei toki ole niin simppeli mutta se on riittävän tarkka tämän blogauksen tarpeisiin.) Tämän lisäksi Jung toki puhui muista täydentävistä seikoista. Ja voidaankin suoraan nähdä mikä tämä on. Yhteyden tuntee vaikkapa "human metrics" -sivuston kuvaus Jungilaisesta luokittelusta;

"According to Carl Jung's typology, all people can be characterized using the following three criteria:
Extraversion - Introversion
Sensing - Intuition
Thinking - Feeling
Isabel Briggs Myers added a fourth criterion:
Judging - Perceiving
These four criteria are called "dichotomies" since each of them represent a continuum between two opposite poles."

Joku voisi sanoa että tämä tekee yhteydestä käytännössä validin. Ruukinmatruunahan korostaa että ns. "Big Five" on seuraavanlaatuinen "Nuo akselit ovat täsmälleen samat kuin Big Fiven akselit miinus neuroottisuus." Yhteys onkin aivan taatusti olemassa. Onko Big Five siis argumentti MBTI:n puolesta vai ei? Nähdäkseni on mieltymyskysymys näkeekö analogian suurena vai pienenä. MInä en pidä MBTI:hin tehtyä uudistusta kovin merkittävänä mutta Hans Eysenck on esittänyt "The Natural History of Creativity":ssä että ero olisi oleellinen "This (the MBTI) creates 16 personality types which are said to be similar to Jung's theoretical concepts. I have always found difficulties with this identification, which omits one half of Jung's theory (he had 32 types, by asserting that for every conscious combination of traits there was an opposite unconscious one). Obviously the latter half of his theory does not admit of questionnaire measurement, but to leave it out and pretend that the scales measure Jungian concepts is hardly fair to Jung." Toisaalta minä pidän "Big Fiveä" oleellisesti parempana kuin MBTI:tä, ja tämä on minulle suoranainen argumentti jonka mukaan MBTI:tä ei oikeastaan kannattaisi tehdä. Moni ei varmasti koe hirveää jännitettä tai ristiriitaa Big Fiven tulosten ja MBTI -testauksen tulosten välillä. Mutta jos on perfektionistin luonne niin on. Mutta syy sille miksi Big Five eroaa enemmän MBTI:stä kuin MBTI Jungilaisesta luokittelusta on minulle tärkeä ja laajempi kysymys. (Tästä myöhemmin tässä samassa blogauksessa.)

Toisaalta "Ruukinmatruuna" on kanssani täysin ja täsmälleen samaa mieltä siinä että mihin testiä ei voi käyttää. "MBTI kertoo sen, mille alalle ihminen todennäköisesti tulee hakeutumaan tai ajautumaan. Se ei kerro sitä, miten hän siinä pärjää Myers ja Brigs itse totesivat, että testin käyttäminen rekrytoinnissa on erittäin epäeettistä. Samalla tavoin jos ihminen alkaa käyttää MBTI-tuloksia ihmissuhteissaan, tulokset yleensä ovat erittäin huonot." Tosin meillä onkin tässä suunnaton erimielisyys siinä että mikä on MBTI -kritiikkin asiallinen kohdistus ja mikä ei. Karkeasti ottaen hän varmasti kokee että moittiessani rekrytointijärjestelmiä olkiukotan testiä koska se ei ole sellainen testi. Joka on taas minusta lähinnä triviaalilla tavalla tosi, ja että tosiasiassa kaikki nämä henkilötestaukset ovat "sosiologisen MBTI -ilmiön" kannalta relevantteja. (Josta on myös myöhemmin tässä blogauksessa. Kyllä. Avaan sitä miksi käytän nimitystä "MBTI -kultti"...)

Vastustavampaa otetta.

Sitten on jotain joiden kohdalla en voi olla kovin samanmielinen. Otan alkuun tavan jolla Ruukinmatruuna tuottaa vastauksia kritiikkiin. Hän huomaa reliabiliteetin. "50% ihmisistä saa eri tuloksen eri kerralla, koska heidän attribuuttinsa sijoittuvat hyvin lähelle akselin puoltaväliä, ja tällöin yksi tai kaksi kysymystä eri tavoin vastattuna riittää kääntämään neulan sinne puolenvälin toisella puolen olevaan lokeroon riippuen päivän fiiliksistä. Se ei kuitenkaan tarkoita sitä, etteikö akseleita ja varsinkaan niiden ääripäitä olisi olemassa."

Vastaus on siitä kiinnostava että olen itsekin aikaisemmissa blogauksissani korostanut että tämä on varmasti syynä siihen että testin reliabiliteetti on huono. Mutta tässä näyttää hieman siltä että Ruukinmatruuna on minulle hieman kuten Jehovan Todistaja teologille. Jehovan Todistaja on hyvin uppoutunut omaan järjestelmäänsä. Teologilla on kuitenkin erilainen ns. kokonaiskuva. ; Usein tästä seuraa se että teologia on epätarkka Jehovan Todistajan näkemyksistä, ja Jehovan Todistaja kokee tämän olkiukottamisena. Mutta kokonaiskuvaa on syytä katsoa tarkemmin.

On nimittäin taatusti niin että en ole hirvittävän paljoa keskittynyt MBTI -mittarin yksityiskohtiin. En nimittäin ole nähnyt mitään kannustinta tutustua siihen sen paremmin. Sillä se, että onko jokin asia syvemmän tarkastelun arvoinen on pikemminkin jotain jota lähestytään psykometrialla. Minulla on takanani jonkin verran kognitiotieteen opintoja yliopistolla, ja tätä kautta minulle on tullut jokseenkin tutuksi se miten päätetään että onko jokin jotain vaiko ei.

Karkeasti ottaen psykometriaakin voidaan lähestyä jatkumolla. Eli ajattelutavalla jota MBTI -mittarikin käyttää. Eli jossa on tavallaan neljä ominaisuutta joita sitten kuvataan käyttämällä ääripäitä. Jatkumossa on sitten ääripäitä joita kuvaa tietyt piirteet ja näin niistä syntyy eräänlaisia "arkkityyppejä". Psykometriassa on totuttu tekemään arvioita katsomalla reliabiliteettia ja validiteettia. Reliabiliteetti on sitä että eri testaukset antavat peräkkäin samat tai lähes samat tulokset. Ja validiteetti on sitten sitä että testi todella kuvaa maailmassa todella olevia piirteitä. Psykologiassa validiteetti todistetaan tietynlaisilla testeillä. Ja näin voidaan luoda testejä joiden:
1: Reliabiliteetti on korkea ja validiteetti korkea. Nämä ovat hyviä testejä. Ja toimivat usein itsereflektiossakin, paitsi jos ovat rakenteiltaan mutkikkaita.
2: Reliabiliteetti on matala mutta validiteetti hyvä. Tämänlaiset kertovat tilastollisia totuuksia maailmasta. Mutta niitä on vaikeaa käyttää vaikkapa itsereflektiossa koska itsereflektio vaatii sitä että "yleisestä voidaan vetää hyvin yksityiseen". Nämä toimivat yhteiskunnallisissa ja muissa vastaavissa joissa otoskoot ovat suuria ja katsotaan yksilöiden sijasta vaikkapa trendejä.
3: Reliabiliteetti on korkea mutta validiteetti huono. Tämänlainen testi "mittaa jotain" mutta sitä ei oikein voi soveltaa mihinkään. Soveltuu itsereflektioon aika heikosti koska on vaikeaa sanoa mitä tämä testi sitten oikeastaan tarkoittaa. Tosin voivat käydä itsereflektioon jos ovat rakenteeltaan yksinkertaisia ja muistettavia. ; Se, mitä "jokin" on on hankala koska monissa ennustusperinteissä on konventioita. Esimerkiksi käden tietyt viivat tarkoittavat tiettyä asiaa ja tietty syntymäaika ja syntymäpäivä tietää tiettyjä merkkejä. Näin erilaisissa kulttuurisissa ennusjärjestelmissä voi olla korkea reliabiliteetti mutta olematon validiteetti. "Jokin" on silloin jonkin asian tulkinta jossain ideologiassa tai kulttuurissa.
4: Reliabiliteetti on matala mutta validiteetti matala. Tämä on horoskooppiosastoa. On kenties epäreilua laittaa MBTI tähän luokkaan. Mutta osuu se tähän huomattavasti paremmin kuin siihen jossa on tarjolla laatua ja gloriaa.

On pinnallista käsitellä vain yksi kerrallaan. Kokonaisuus syntyy siitä että on reliabiliteetti ja validiteetti. Ja puolutuksessa nämä molemmat on huomioitava. Ja lopputuloksesta syntyy kokonaisuus. Tämä ylläoleva toikin esiin sen mistä olen tohottanut. Ruukinmatruuna korostaa että MBTI on hyvä itsereflektiossa. Tähän ei kuitenkaan näytä olevan kovin hyviä syitä. Itse asiassa ainut syy näyttää olevan se, että muu soveltaminen työ-ja-parisuhde -tyylisissä asioissa on hänestäkin heikoilla kantimilla. En voi ymmärtää miten voi olla että samanaikaisesti "...kun puhutaan suurista ihmisjoukoista - 10 000+ - niin sitä vähemmän yksilöllisyys ja yksilölliset tulokset merkitsevät ja sitä enemmän ollaan tilastomatematiikan kanssa tekemisissä. Jos joku ihminen saa tuloksen vaikkama ISFP, niin on erittäin todennäköistä, ettei hän vastaa 1:1 tuota arkkityyppiä "taiteilija". Mutta mitä isommasta joukosta on kyse, sitä enemmän tuon joukon keskiarvo muistuttaa tuota arkkityyppiä. On todennäköistä, että kun otetaan otos 10 000 ISFP:stä ja tutkitaan heitä joukkona, niin tällöin tuon joukon keskiarvo vastaa aika hyvin tuota lokeron arkkityyppiä." että "...kertoo kaikkein parhaimmin, millainen jokainen ihminen itse on ja miten hän toimii joutuessaan pois tolaltaan ja käyttäytymistä esimerkiksi huumaavien aineiden vaikutuksessa, paniikissa, voimakkaassa stressitilanteessa, merkittävässä ympäristön muutoksessa jne. Tällöin ihmisen käyttäytyminen muuttuu persoonallisuustyypin mukaan riippuen tyypin preferenssijärjestyksestä." Tätä jännitettä ei pelasta edes jännittävä anekdootti merihädästä. Jos jokin toimii tilastollisesti sillä voi olla yhteiskunnallisia sovelluksia. Voidaan vaikkapa selvittää jonkun suuren ihmisryhmän käyttäytymismalleja. Ja nähdä että mitä suurempia joukot sitä paremmin ne yleisesti ottaen seuraavat tiettyä mallia. Mutta jos tästä yleisestä pitää vetää yksityiseen niin tilanne on sitten jo paljon mutkikkaampi.

Se, miten näen Ruukinmatruunan tekemän puolustuksen on se, että olen huvittunut siitä miten hänen tarjoamansa selitys miksi reliabliliteetti on huono ei ole samaa kuin testin pelastus. Se on päin vastoin jotain jossa ikään kuin on kuopassa ja luulee että ongelma ratkeaa kaivautumalla vielä syvemmälle. ; Jos Ruukinmatruunan puolustuksesta haluaa löytää sen oivalluksen kultajyväsen, se on siinä että hän antaa sellaisen selityksen sille miksi reliabiliteetti on huono että testin validiteetti ei mene samalla pilalle. Eli hän pelastaa validiteetin selittämällä miksi reliabiliteetti on huono. Tätä kulmaa tietysti korostaa sekin että Ruukinmatruuna kertoo esimerkiksi että "MBTI:llä on vakavastiotettava psykologinen pohja (nuo neljä attribuuttiakselia, joita ei käy kiistäminen). Tämä pohja tekee MBTI:stä luotettavan, mutta vain tilastollisesti, siis puhuttaessa isoista ihmismääristä."
1: Koska olen aiemmin maininnutkin siitä että jakauman keskikohta heikentää reliabiliteettia, kuten se tekeekin, se johtaa siihen että testiä voisi parantaa. Useinhan jos testiin lisätään luokitelmia sen reliabiliteetti heikentyy koska on "pienempi maali" johon osua. Mutta jos ajatellaan gaussin käyrää on hyvä tehdä jaotelmia samalla tavalla kuin älykkyysosamäärätestien kohdalla on tehty. Siinähän ei jaeta gaussin käyrän paksuun kohtaan luokitusta jossa alle 100 on tyhmä ja yli 100 on fiksu. Vaan sen sijaan on enemmänkin jaoteltu siten että 80-120 on normaalin rajoissa ja yli 120 on lahjakas ja alle 80 "jotain ihan muuta". Reliabiliteetti saataisiin tältä osin kuntoon varsin helpolla tempulla. Ja kiinnostava kysymys onkin että miksi tätä ei ole tehty.

Kuten olen aiemmin kirjoittanutkin, MBTI -testin reliabiliteettia ja validiteettia on testattu melko paljonkin. Ja se ei ole mitenkään mainittavan hyvä kummassakaan. Ruukinmatruuna korostaa että "Myers-Briggs -tyypitys perustuu neljälle akselille, jotka varmasti ovat meissä jokaisessa olemassa ja joiden kiistäminen on typerää." Valitettavasti jos on ihminen jonka bullshittoleranssi on nolla, ei todisteeksi riitä väite. Dogmaattisuus ja varmuus tämänlaisissa asioissa ei ole sama kuin se että asia on todellakin vankasti tosi.

Se, että sanoo jonkun kiistämisen olevan typerää on horse laugh -argumenttivirhe jos tätä ei tue psykometrisellä todisteilla.

Itse asiassa näkisin että MBTI -testin validiteettiin iskee se, että vaikka testattavilla yksilöillä onkin intuitiivinen ajatus siitä mitä käsitteet tarkoittavat, niin tosiasiassa käsitteet ovat laajemmassa mielessä moniselitteisiä. Jos otetaan vaikkapa ajatus introversiosta ja ekstroversiosta, voidaan vaikka lainata Michael Moffan ajatusta "Note how vague, ambiguous, unclear and confusing the ISFJ “friendly”, like “quiet”, is: Suppose you operate out of a clique—friendly to insiders, hostile to outsiders, which is in fact an all too common occurrence in daily life, including in the workplace. Are you “friendly” or not? How could you possibly not agree you are friendly, even though you are unfriendly to the vast majority of human beings? Therefore, anyone who has any kind of in-group—which is most people, can be called “friendly”. There’s nothing special about that." Moniselitteisyys syö aina validiteettia. On yhä epäselvempää mihin testi tähtää. Vaikka sama testattava vastaakin aina oman mieltymyksensä mukaan, tämä ei syö välttämättä reliabiliteettia. Mutta reliabiliteetin puolustus ei syö sitä asiaa että tämä on vain tekosyy sille miksi validiteetti on heikko. ; Ongelma on toki siitä mielenkiintoinen että MBTI -näkemyksessä validiteetti on hyvin jännittävä. Osa siitä nimittäin toimii kohtuu hyvin. Introversio-Ekstraversio -näkemys on niistä itse asiassa validiteetiltaan parhain. Ja se on juuri sitä suuntausta joka koskee tuota ylläolevaa moniselitteisyyttä. Muiden kohdalla asiat ovat siis vieläkin vaikeampia.

Ja syy miksi Big Five on minusta parempi johtuukin juuri siitä että se ei ole täysin identtinen MBTI -mittarin kanssa. Siinä on nimittäin pohdittu asioiden välisiä yhteyksiä ja eroja. Jos kyseessä on todella ominaisuus, niiden välillä on tiettyjä yhteyksiä ja jos ne ovat erillisiä ne klusteroituvat erikseen. Kun "Big Five" on minusta oleellisesti erilainen ja parempi, nipotan tietyssä mielessä. Mutta korostan kuitenkin että kyse on laadun kannalta relevantista nipottamista. Mutta en malta olla lainaamatta "correlational analyses showed that the four MBTI indices did measure aspects of four of the five major dimensions of normal personality. The five-factor model provides an alternative basis for interpreting MBTI findings within a broader, more commonly shared conceptual framework" ... "there was no support for the view that the MBTI measures truly dichotomous preferences or qualitatively distinct types, instead, the instrument measures four relatively independent dimensions." Eli toisin sanoen MBTI ei mittaa aivan sitä mitä voisi ajatella jos asiaa lähestyisi pelkästään intuitiivisin ennakkokäsityksin. Tosiasiassa validiteetin kohdalla jännittävin piirre onkin se, että MBTI:n puolustajat osaavat kyllä kertoa miksi validiteettiin ja reliabliliteettiin perustuvat kritiikit ovat virheellisiä, koska "kyseessä ei ole sellainen testi". Mutta heiltä toisaalta puuttuu sen tyyppinen ajatus kuin selittäminen. MBTI -testille ei tässä "ei sellainen testi" -muodossa ole esitetty falsifiointikriteeriä. Eli ei ole sellaista aineistoa joka voisi kumota teorian. Tämänlainen on yleisesti ottaen oireellista. Mutta tämä tietenkin syntyy sivutuotteena jos reliabiliteetti ja validiteetti ovat vähän mitä ovat.

Se, miten moniselitteisyys sitten tarkoittaa voi vaatia esimerkin kautta selittämistä. Voitaisiin kuvitella että minä loisin nelikenttäisen psykologisen testin joka perustuisi Fiore dei Liberin miekkailun hyveisiin. Voisin ottaa niistä yhden (celeritas), jota kuvaa susi(ilves). Se tarkoittaa sekä älykkyyttä että nopeutta.
* Nämä toki sopivat yhteen siinä mielessä että älykkyysosamäärätesteissä on aikarajoja ja kysymyksessä onkin prosessointinopeuden arviointi.
* Mutta tässä on kuitenkin paradoksi. Joka liittyy siihen miten taannoin kohistiin reaktioajasta, siitä miten se korreloi älykkyysosamäärän kanssa. Ja miten reaktioaika on hidastunut. Mutta silti tällä hetkellä vaikuttaa Flynnin efekti. Eli nopea reaktioaika korreloi älykkyyden kanssa, mutta älykkyysosamäärä on trendinä kasvussa vaikka reaktioaika on hidastumassa. Ihmismieli hämmentyy mutta tosiasiassa nämä johtuvat lähinnä siitä että yhteenniputus on virhe. Jos ajatellaankin asiaa analogisesti voidaan huomata että ihmisen massa korreloi voimakkuuden kanssa positiivisesti. Mutta kun katsotaan läskejä niin monet heistä eivät ole vahvoja vaikka heillä onkin suuri elopaino. Kun tämän tiedostaa, ajattelee monisärmäisemmin ja paradoksit avautuvat.
* Lisäksi Kahnemanin havainnot ihmisen ajatteluprosessien toiminnasta tietää kertoa että ihmisessä on nopea intuitiivinen järjestelmä ja tälle vaihtoehtoinen laadukas ajattelujärjestelmä joka on hidas. Näin ollen nopeus ja ongelmien ratkaisu eivät olekaan toisiinsa nivoutuneita vaan jopa toisilleen vastakkaisia.
* Ja sitten voidaan huomata että toinen mittarin hyve (audatia), rohkeus, voikin lisätä myös nopeutta ja toimintavalmiutta joten näiden kahden välillä onkin korrelaatio. Ja muitakin yhteyksiä voidaan kuvitella
* Joka kaiken kaikkiaan tarkoittaa sitä että vaikka voinkin ottaa kellon ja mitata reaktioaikoja ja laittaa pikatestejä siihen miten osataan toimia ripeästi hädän hetkellä. Ja tehdä kyselyjä siitä miten nopeaksi itsensä tuntee ja miten älykkääksi. Ja mitata sitten miten hyvin osaa matematiikkaa ja pisteyttää tämän. Tämä voidaan tehdä objektiivisesti kellojen ja pisteiden kanssa. Mutta silti tämä ei tee celeritaksesta jotain sellaista ominaisuutta jonka kritisoiminen olisi automaattisesti typerää. Se, että testit voidaan tehdä ja niistä saadaan tulos ja keskiarvo tjsp. ei tee siitä samaa kuin laadukas mittari.

Ylläoleva on kuitenkin minusta kätevä tapa luokitella ihmistä. Celeritas -hyve on kompromissi. Mutta ei siksi että se olisi jokin ihmisen ominaisuus jossain gaussinkäyrällä. Vaan siksi että se on näkökulma ja se voidaan tehdä. Celeritas -reliabiliteetin testi voitaisiin saada suureksi. Mutta se mitä tämä tulos sitten tarkoittaisi on todellakin haasteellisempi asia. Toki näihin on hyveellistä sitoa identiteettinsä. (Niin minäkin olen tehnyt. Oikeasti. Ja varmasti tieteellisesti heikommin kuin MBTI -mittauksissa!) Kysymys on siis siitä että mikä on ihmisen ominaisuus ja mikä on vain näkökulma joka voidaan ottaa. Kaikki MBTI -skaalat eivät ole mitenkään ilmiselviä ominaisuuksia, mutta ne ovat varmasti monille käteviä näkökulmia.

Näkökulmia mihin?

No ei ainakaan itsereflektioon. Kun blogauksen alussa viittasin "Puskistahuutelija" -nimimerkkiin, nostan esiin sen että hän sanoi vain "no shit Sherlock" kun korostin että MBTI -testissä voi valehdella. Ja että se on oikeasti vain kasautuva testi jossa kysytään kysymyksiä ja vastaaja vastaa niihin itsetuntemuksensa pohjalta. Tämä on jotain jota voi saada vain ihmiseltä joka on vähintään kohtuullisen huono psykometriassa. Sillä virhelähteiden huomiointi, eikä pelkästään se että niiden kautta selittää miksi testissä on puutteita vaan niiden huomiointi, on juurikin tärkeää kun asioita testataan. Se on ilmiselvää jokaiselle joka ei ole dogmaattinen vaan joka päinvastoin tietää että on parasta että on nollatoleranssi hevonpaskalle. Se tarkoittaa juuri asioiden varmistelua eikä sitä että asia käy "arkijärkeen ja intuitioon kuin nyrkki oravan silmään ja kenkä tämän kulkusille".
1: Moni toki uskoo että hänellä on nollatoleranssi typerehtimiselle, esimerkiksi moni uskovainen dissaa tiettyjä asioita humpuukina hyvinkin vahvasti. Mutta joskus tämä nenä harhaopeille johtuu siitä että on hyvin leimalliset dogmaattiset näkemykset joiden vastainen tuomitaan suoralta kädeltä automaattisesti idioottimaisesti yhtä nopeasti kuin hevonen nauraa. Tällöin on helppoa väittää asioita vankalla kokemuksella ja kutsua tätä realiteettientajuksi. Syvä ajautuminen hyvin spesifiin huuhaaseen ja kaiken tämän vastaisen dogmaattinen torjunta jossa sitten menee paljon huuhaatakin roskiin ei ole ihan sama asia kuin huuhaaimmuniteetti tai nollatoleranssi paskapuheille.

Tämä kahdesta syystä.
1: Nimittäin jos mietimme testejä, osa niistä on sellaisia että niissä saa varsin helposti haluamansa tuloksen. Osa taas on sellaisia että tuloksissa manipulointia on vaikeutettu huomattavasti.
   1.1: Kognitiotieteessä käytetään usein esimerkiksi aukontäyttötehtäviä joissa on useita eri tapoja vastata oikein. Ja se vastaustavan valinta on jotain josta ollaan ensi sijassa kiinnostuneita. Ihminen helposti kiinnittää onnistumiseen ja älykkyyteensä huomiota ja yrittää ratkaista nämä tehtävät. Tämänlaisessa on melko vaikeaa valehdella koska vastaaja joutuu miettimään useita ratkaisuja kaikkiin kysymyksiin ja valitsemaan niistä. Ja tämän kanssa menee sitten enemmän aikaa. (Näihin tosin yleensä voi vaikuttaa jopa tavalla joka muistuttaa manipulointia. Eli aukkotehtävät ratkeavat kontekstin mukaan hyvin odotettavissa olevilla tavoilla.) Tämä vaikeus on symmetristä. Eli jos poikkeaa siitä "omimmasta ratkaisusta" niin joutuu näkemään enemmän vaivaa. (Valehtelu ja manipulointi on vaikeutta jossa on harmaasävyisyys. Mahdottomuus ei ole kysymys. Helppous ja vaikeuskysymys on sitten asia erikseen.)
   1.2: Älykkyystestit ovat sellaisia että niissä on epäsymmetria. On hyvin helppoa valehdella itselleen huono älykkyysosamäärätestitulos. Mutta jos yrität valehdella testissä että älykkyysosamääräsi on superhyvä, sen valehtelu onnistuu vain kaikkia todennäköisyyksiä ja odotusarvoja vaivaavalla tuurilla. (Sillä älykkyystestit mittaavat sitä älykkyyttä jota älykkyystestien suorittaminen vaatii.) Et voi vain manipuloida mitä tahansa tulosta.
2: Toinen, jo aiemmin korostamani asia onkin sitten se, että itsetuntemuksen apuvälineeksi MBTI toimii heikosti koska saat tietää sen mitä jo tiedät. Se ei huomioi lake wobegon efektiä (testin tekemisvaiheessa). Se ei huomioi forer -efektiä (tulosten saamisen ja sen vaikutukset identiteettiin). Ja siksi testi on heikko tältä osin. Tosin tässä paradoksina on se, että näen että MBTI todella mittaa ja on hyödyllinen yhdessä asiassa. Juuri se, että se ei huomioi näitä ihmisen itsepetoksen muotoja se kertoo siitä minkälaisena ihminen kokee itsensä. Lopputulos on enemmän ideologinen kuin itsetuntemuksellinen. (Paitsi jos itsetuntemus on hyvä. Mutta kaikilla meillä on tietenkin myös ideologia eikä tässä ole mitään pahaa.)

Mikä helvetin MBTI -kultti?


Ylläolevasta kritiikistä voinee huomata että moitteeni on "moitetta ehdoilla". Se ei ehkä ollut aiemmissa teksteissäni yhtä vahvasti esillä. (Osittain siksi että osa niistä oli humoristis-sarkastisessa kulmassa. Ja se perustelluin oli kirjoitettu itsetarkoituksellisen häijysti.)

Jos lähdetään aivan siitä että mihin "Ruukinmatruuna" on blogauksessaan tarttunut. Hän tarttuu "horoskooppi" -sanan käyttöön. Se on kenties epäreilu, mutta tosiasiassa se on kuitenkin enemmänkin retorista koristelua kuin argumentti. Argumentti on muualla. Ja on kiinnostavaa huomata mihin ihmiset kiinnittävät huomiota. "Ruukinmatruuna" puolustautuu psykoanalyysikytkökseltä ja horoskooppirinnastukselta. Ne ovat ideologisia yhteyksiä. Tosiasiassa psykoanalyysiyhteys on ikävä jos ja vain jos ei pidä psykoanalyysistä. Ja siihen reagointi on lähinnä sitä että ihmistä kiinnostaa aatehistoria enemmän kuin vaikka psykometrian kannalta relevantit validiteetti ja reliabiliteetti.

Tämä on vihje. Vihje siitä mikä on oleellista. Kun katsotaan MBTI -mittauksia, niissä on taso jota kognitiivisessa uskontotieteessä kutsuttaisiin "teologisesti korrektiksi tasoksi". Eli se on se taso missä MBTI -mittausta pitää tehdä ja mitä siitä saa tulkita. Tämän lisäksi on se sosiologinen taso jossa MBTI -mittauksiin vedotaan ja niitä käytetään. Tässä kohden kiinnostavaa on, että MBTI -testin suosion syyt ja keksimisen ideat on pidettävä erikseen. MBTI:n suosion takana on se, että se on iso bisnes jossa on sovelluksia työnhakuun ja parisuhdemarkkinoihin. Samalla testin kehittäjä ja testin teoriaosuus korostaa että jokaisen pitäisi tehdä testi vapaaehtoisesti ja että sitä ei voi käyttää tuollaisiin. (Jos työpaikkojen testit ja nettitestit jätetään pois, ei moni törmää koko ilmiöön. Ja näiden heikkous tunnustetaan käsittämättä mitä tämä tarkoittaa kokonaisuuden kannalta.) Ihanteiden ja käytänteiden välinen kuilu on suuri. Ja tämä kertoo että MBTI -testin yliarvostuksen (eli sitä että testiä tehdään ja sen tuloksiin viitataan mielellään, usein ja useammin kuin tätä laadukkaampien testien tuloksia).

"Ruukinmatruuna" myöntääkin että "Myers-Briggs -tyyppi-indikaattori (MBTI) on asia, jota tässä blogissa on käyty aika lailla läpi ja käytettykin - INTJ:stä on tullut ruukinmatruunalle osa identiteettiä. Se onkin psykologiassa aika paljon käytetty tyypitys." (Tosin testin kehittäjillä ei ollut psykologista koulutusta. Eikä tyypitystä oikeasti käytetä vaikkapa kliinisessä psykologiassa. Kuten aiemmin tähän liittyen kirjoitinkin blogissani MBTI -testien käsittely on hyvin eriytynyt oma klikkinsä. Mutta annetaan tämän nyt olla.) MBTI on nimenomaan identiteettikysymys. Ja tällöin tietysti tyypityksen kritisoiminen uhkaa tätä identiteettiä. (Etenkin jos selittää että luottaa vain luonnontieteisiin ja että on nollatoleranssi hevonkukulle.) Takkiraudan kommenteista onkin hauskaa lukea siitä miten monelle ihmiselle on tärkeää esitellä itsensä tuloksensa kautta. Ja miten tärkeää on että näitä tyyppejä on yksi. Ja miten tämä tyyppi ikään kuin muokkautuu identiteetiksi jota ei oikein haluta vaihtaa kuin paitaa.

Tätä henkeä korostaa se, miten MBTI -mittarin käyttö ammatinvalinnassa voidaan nähdä huonona. Mutta sitten kuitenkin käytännössä esitetään sen tyylisiä lausuntoja kuin "tarvitaan INTJ toteuttamaan asioita joita ENFP ideoi." Joka viittaa toteuttavaan asteeseen. MBTI -stereotyypit oikeutetaan tosina "suurilla tilastoilla" tavalla jossa katoaa se että virallisen totuuden mukaan tyypitys mittaa enemmän asennetta kuin taitoja.

Tässä kohden Ruukinmatruunalla on toki jonkinlainen melko hauska vastaveto. Hänhän todellakin korosti että MBTI -mittari voidaan liittää myös negatiivisiin asioihin. Syynä on se, että MBTI -testien tarjoamat pelkät positiiviset vastaukset ovat optimistisia ja siksi houkuttelevat ihmisiä. Testi "joka vittuilee" tuomitaan helposti huonoksi testiksi vaikka sillä olisi reliabiliteettia ja validiteettia. Tässä jännittävä piirre on kuitenkin se, että virallisia MBTI -tekstejä läpikäydessä tämä positiivisuus tulee vastaan. Mutta sitten kun tarjolla on negatiivisia niin niissä on enemmänkin humoristisuuden sävy. Ja siksi Ruukinmatruunan generoimat negatiiviset kuvaukset muuttuivat hikipedian MBTI -vitsiartikkelin perusmalleiksi. Sillä ne ovat jotenkin erilaisia ja hauskoja ja niihin suhtaudutaan eriyttävästi huumorilla. Mutta jos piirteet ovat positiivisia niin niihin nyökytellään. Että kyllähän minä olen juuri kuten tuo sanoo.
1: Varsin ansiokkaasti minusta kyllä. Ruukinmatruuna tuo hikipediaan lisäarvoa, joskin hän ei selvästi osaa rakentaa vitsejä vaan on enemmän sarkastinen tai inspiroitunut. Minä en osaa inspiroitua vaan rakennan huonoja vitsejä. Joista minulla onkin vuosien kokemus...

Tämä ei tietenkään tarkoita että MBTI olisi huono. (Siihen liittyvän olen käsitellyt jo aiemmin.) Ei myöskään ole huono asia että ihminen ottaa jonkun konseptin ja tekee tästä osan identiteettiään. (Vrt. minä ja Fiore dei Liberin hyveet. Ja se että blogini on tunnettu siitä että jaottelen "evoluution" ja "evolutionismin" toisistaan erikseen, ja pidän itseäni evoluutioteorian kannattajana ja jossain määrin tästä huolimatta myös evolutionistina. Samaan tapaan on ihan ymmärrettävää että ottaa sen hyvän MBTI -testistä ja ryhtyy MBTI -istiksi.) On kenties epäreilua kutsua tätä sosiaalista pöhinää - MBTI -testien sosiaalisen suosion syytä - kulttitoiminnaksi. Mutta toisaalta. Jos nimityksessä ei olisi loukkaavaa hyperbolaa, se en olisi minä.
1: Ja tämä sosiologinen puoli on se, jonka vuoksi minä rinnastan MBTI:tä horoskooppeihin ja käytän "kultti" -sanaa. Sillä suosion syyt ja ihmisten käytös näiden testien äärellä (ja jossain määrin myös heidän suhtautumisensa kriitikoihin) muistuttavat juuri sitä miten horoskooppien kannattajat tekevät ja suhtautuvat tämän mittarin kanssa. Tämä on hieman epäreilua sille "teologisesti korrektille" MBTI:lle. Mutta yllättävän vähän.

sunnuntai 21. joulukuuta 2014

Pyhät Vangit : Eli miten näen MBTI -luokitelman hyödyttävän jossain


Eero Koskela kertoi blogissaan tärkeän asian vangeista. "Olen tällä hetkellä myös osa-aikaisena vankilapastorina tämän vuoden loppuun asti. No vankiloissa on usein fiksumpaa porukkaa kuin siviilissä. Pojat sentään kunnioittaa yleensä pyhiä arvoja ja Jumalan valtakunnan työntekijöitä. Kuulijakuntakin on monesti otollisempi kuin siviilissä Näinhän se on kun eletään yltäkylläisyydessä ei tarvita Jumalaa mutta kun tipahtaa pohjan läpi alkaa viimeistään kaipaamaan." Ajatus on tietysti varsin kummallinen. Sillä voitaisiin ajatella että ihmisellä olisi jonkinlainen persoonallisuustyyppi. Ja että vankilaan joutuminen olisi jonkinlainen indikaattorin siitä että ovatko nämä henkilöt fiksumpia ja asiallisempia kuin muut. Väitänkin että Eero Koskelan kohdalla ainoat jotka ovat samaa mieltä tästä psykologisesta profiilista ovat vangit itse. Tuore psykologinen tutkimus tältä vuodelta kertoo todellakin että vangit kuvaavat itseään keskivertoa mukavammiksi.

Syyksi vankien itseluokitukselle ajatellaan kahta asiaa ; Lake Wobegon -efektin mukaan suurin osa ihmisistä imartelee itseään. Suurin osa kokee olevansa keskivertoa parempia otettiinpa mittariksi mikä tahansa. "Many studies have shown that people tend to exaggerate their own positive characteristics and abilities. A popular example is the finding that most drivers think they are a better-than-average driver. This suggests there are many sub-standard drivers cruising our roads in the belief they are unusually gifted at the wheel. Similar findings apply for literally hundreds of traits, all of which supports the idea of a widespread, self-serving "better-than-average effect". Toinen on sitten aivan puhdas Dunning-Kruger -efekti jossa erityisen huonotaitoiset yliarvioivat itseään koska eivät edes tiedä miten ignorantteja he ovat. "Past research on intellectual performance has shown that it is weaker performers who most over-estimate their own ability."

Tämä ihmisen huonous itsereflektiossa on tärkeä asia jos mietitään psykologista luokittelua. En luota niihin luokitelmiin jotka nojaavat hyvin vahvasti ihmisen itsetuntemukseen. Asioita on mitattava osaamisella ja koettelulla. Tässä mielessä olen ottanut kantaa blogissani persoonallisuustesteihin aikaisemmin. Minua on pyydetty harkitsemaan kantaani MBTI -testiä kohtaan. Kenties siksi että olen aikaisemmin ottanut tähän varsin kovasanaisesti kantaa. Olen aikaisemmin antanutkin MBTI -mittarille huutia. Ja tarvittaessa aika ilkeäsävyisesti. Minulla on ollut syyni. Teen niistä lyhyen tiivistelmän alle, korostaakseni sitä lähtötilannetta josta olen asiaan kiinnittänyt huomiota.
1: Se on itsereflektiopohjainen sen sijaan että mittaisi kyseisiä taipumuksia. Näin ollen se on hieman kuin älykkyysosamäärätesti jossa ei kysyttäisikään älykkyyshaasteita vaan jossa kysyttäisiin eri sanavalinnoin että "koetko itsesi fiksuksi". Ja itsereflektion kohdalla on sitten se, että jos itsereflektio on huono, testin tulos on arvoton. Ja jos itsereflektio on hyvä, itse asiassa tiedät tuloksen jo etukäteen.
2: Validiteetti on osassa testin jaotelmissa kyseenalainen koska yhteen kysymykseen samalla tavalla vastaaminen ei johda kasvaneeseen todennäköisyyteen vastata kysymykseen. Moni toki korostaa että MBTI ei ole "sellainen testi", mutta kun jokainen sosiaalinen tilanne on itse asiassa valintatilanne jossa "kysytään". Joten on ihmeellistä että miten testin tulos sitten korreloi näidenkään kysymysten kanssa.
3: Reliabiliteetti on vaihteleva. Joka kertoo siitä että aihetta testaavan taidot ovat hyvin keskeisessä osassa. Havaittu vaihtelu kertoo että testi mittaa jotain ja mittaajan taidoilla on oleellisen tärkeä osa tässä. (Internettestiin tuskin siis kannattaa mennäkää!) Samalla se kertoo että tässä on menossa monta menijää ja testaajia tulisi kontrolloida paremmin. Yksi syy suureen vaihteluun johtuukin varmasti testin suosiosta.
A: Epäsuoremmin testiä sitten sovelletaan tilanteissa joihin se soveltuu hieman omituisesti. Testi mittaa asenteita ja taipumuksia, mutta tästä päätellään usein sellaisia asioita kuin taito. Esimerkiksi INTJ on yht'äkkiä sopiva asiantuntijatehtäviin. Toki näiden välillä on varmasti korrelaatioita. Mutta se on sen verran epäsuoraa että se on samaa kuin päättelisi kädenvääntöjoukkueen jäsenet ainoana tietonaan henkilöiden sukupuoli.
B: Testi perustuu jungilaisuuteen johon en luota. Toisaalta testi on jo varsin vanha. Psykologiassa tiedon puoliintumisaika on yleensä noin 5 vuotta. Tämä ei toki suoraan sano että testi on huono, mutta se vihjaa että se ei kenties ole aivan cutting edge. Että kenties on olemassa parempia testejä joita käyttää sen megasuositun sijasta.
C: Testi on varmasti saanut suosiota siitä että kaikki sen tuomat kuvaukset ovat positiivisia. Tämä yhdistää myös muita suosittuja ehdottomasti eipsykologisia luokitelmia. Positiivinen kuvaus imartelee. Tämän aiheena ei sitten enää ole "testi ei toimi" vaan "yliarvostus".
D: MBTI -testin testaaminen ja kehittely toimii hyvin rajoitetuilla foorumeilla. Kritiikkiin on yllättävän usein tapana vastata diagnosoimalla kriitikko. (Parhaimmillaan antamalla hänelle MBTI -luokitelma joka selittää miksi hänellä on sellainen asenne.) sen sijaan että osoitettaisiin että testi on laadukas. Tämä ei toki suoraan sano että testi on huono, mutta se vihjaa että piirit ovat taipuvaisia ns. nihilaatioon (kritiikin olemassaolo ennustetaan ja tämän kautta kritiikki irrelevantisoidaan) ja echo chamberoitumiseen (keskustelua käydään vain samanmielisten kesken omissa piireissä).
*: Ja niin edespäin.

En kuitenkaan tässä lähde moittimaan testiä. Sillä vaikka periaatteessa tuo vankien itsereflektion puute paljastaa jotain oleellista siitä miten ihmisiltä itseltään ei kenties ole järkevintä kysyä, niin se kuitenkin paljastaa jotain muuta. Nimittäin sen, että Lake Wobegon efekti heijastelee kykyjen ja ominaisuuksien sijasta arvostuksia. Ja arvostukset voivat olla tärkeä tieto ihmisestä. ; MBTI -mittarissa kysytään asioita jotka eivät ole kovin laajakirjoisesti "hyvä vastaan paha". Tämä näkyy erityisen vahvasti siinä että kaikki tulokset nähdään positiivisina ja kuvataan sellaisina. MBTI -testi ei ole älykkyysosamäärätesti siinä mielessä että siinä ei voi epäonnistua.

Ja tätä kautta testi on todennäköisesti erinomainen mittari kuvaamaan ihmisen arvostuksia. Esimerkiksi T-F -väli kertoo arvostaako ihminen enemmän ajattelua vai tunteita ja J-P linja sitä arvostaako hän harkitsevaa vai spontaania elämäntyyliä. Tämänlaisessa testi voi olla oikein hyväkin. Ja tässä ei edes haittaa se että jaotelmat ovat arkijärjen mukaisia sen sijaan että niiden rajat ja luonne olisi haettu vaikkapa etsimällä isosta kysymysaineistosta keskenään korreloiva alueita ja ottamalla nämä klusterit toisiinsa liittyviksi persoonallisuuspiirteiksi. Tässä mielessä pidän MBTI -mittaria jossain määrin perustellumpana kuin aiemmin.

Siksi suhtaudun MBTI -testien tuloksiin hieman kuten noiden vankien haastatteluun. Ei vangeilta saatu vastaus kerro että he (a) olisivat erityisen kyvykkäitä sosiaalisuudessa ja mukavuudessa tai (b) että heillä olisi taipumusta sosiaalisuuteen ja mukavuuteen vaan että (c) he ovat ihmisiä ja he arvostavat sosiaalisuutta ja mukavuutta siitä huolimatta että eivät ole siinä hyviä asenteiltaan tai kyvyiltään.

lauantai 19. heinäkuuta 2014

MBTI -cultist strikes back (of their own)

"The interesting - and somewhat alarming - fact about the MBTI is that, despite its popularity, it has been subject to sustained criticism by professional psychologists for over three decades. One problem is that it displays what statisticians call low "test-retest reliability." So if you retake the test after only a five-week gap, there's around a 50% chance that you will fall into a different personality category compared to the first time you took the test."
(Fortune magazine, "Have we all been duped by the Myers-Briggs test?")

Kirjoitin eilen MBTI -ilmiön lieveilmiöistä. Teksti oli jotain jota tein hieman vasemmalla kädellä huvittuneena. Ajattelin, että se on huumoriblogaus jossa on perusasiat kunnossa. En aina jaksa pingottaa. Kuitenkin ajattelin että siinä on ne perusasiat kunnossa. Ja ajattelin antaa luvan mennä. Ihan sillä että olin jo aikaisemmin alustanut aihetta. Ajattelin että näin syntyy kiva pikku juttu, jossa asiat eivät ole liian perseestä jotta sen kehtaa nimiinsä laittaa.

Mutta koska kyseessä on ilmiö joka on hyvin suuri, ja koska sen ympärillä on sosiaalista pihinää, sain ns. pahastuneen kommentin. Se esitti itseään kritiikkinä, mutta siitä oli vaikeaa löytää ns. argumenttia. Rohkeasti ad hominem-diagnoosilinjalla sain kuulla että kritisoiminen on helppoa ja vaivatonta. Ja että en selvästi ollut tutustunut aiheeseen ja että olin kaunainen Takkiraudan kirjoittajalle. Tästä toki puuttui se, mikä tekee argumentin. Eli se ei eritellyt mitkä väitteeni olivat väärin ja miten asiat oikeasti hoidetaan ja mitkä tutkimukset antavat niille pontta. Ei kerrottu asiavirheitä eli mikä tekstissä oli mainittavan asiantuntematonta. Ja tätä kautta se oli ironisesti jotain jonka profetoin siinä kritisoidussa tekstissä. Että kritiikki hoidetaan diagnoosilla.

Erityisesti minua huvitti se, että kuten ensimmäisestä linkistäni voi huomata, MBTI -ilmiö on suuri. Ja sen kritiikki on suhteellisen valtavirtaa. Sitä löytyy suurista lehdistä ja persoonallisuustutkijoilta. Silti Suomessa MBTI -kritiikin a ja o näyttää olevan se, että kaikki kritiikki on lähtökohtaisesti vain nettitestejä ja asiantuntematonta. Toki ymmärrän että kritiikin kohteena ei ole hyvä. Mutta evoluution puolestapuhujana tiedän että "helppo kritiikki" on todella olemassaoleva ilmiö. Ja että en silti ole lähtenyt sille linjalle että kiistäisin kreationistien olemassaolon. Tai että Dembskin ja Behen tapaisia professoritason miehiä ei olisi olemassa. Siitä huolimatta, että nämä ovat väärässä, olen pyrkinyt joka itse korostamaan heidän olemassaoloaan. ; Mutta tätä ei toisaalta oikein voi ihmetellä, sillä David Pittenger on korostanut että MBTI -julkaisut ovat keskittyneet tiettyihin sitä ajaviin lehtiin. Tietty "echo chamber" -ilmiö onkin tässä suhteessa enemmän kuin odotettavaa.

Toisaalta minulle tuli rippusen myötätuntoa kritisoijalle. Sillä MBTI -kulttilaisille aihe on rakas. Minulle asia oli vain leikkiä, ja suhteeni Takkirautaan sisältää minulle normaalin määrän pilkkasanoja. (nähdäkseni olen monesti suhtautunut häneen suopeasti ja jopa maininnut että kyllä minä voisin hänen aivojaan panna. Joka ei ole ehkä kauniisti sanottu, mutta on minun suustani ns. kohteliaisuus.) Siksi on kenties tarpeen rakentaa hieman syvempi argumentti aiheesta.

Pyrin käyttämään tässä lähdeviitteitä. Ja käytänkin. Toki ne ovat tämän aihepiirin "klassikkoja". En raapinut mitään omia uniikkeja uusia löydöksiä. Jos siis olet tottunut MBTI -aihepiirin parista, tämä on heille lähinnä referaatti tutuksi tulleesta. Klassikkous toki tekee kritiikkiin vastaamisesta helpompaa. Mutta tälläistä sitä saa kasaan kun raapii ikiaikaisia kliseisiä tietokoneen uumenista. Nyt se ei ole kuitenkaan tehty vasemmalla kädellä leikkimielisesti, eli nähdäkseni demonstroin millä argumentein olen aiheesta sitä mieltä kuin olen.
1: Samalla voidaan varmasti arvioida hitusen sitäkin että miten hyvin minulla on aavistusta tai ei ole aihepiirin perusmetodeista. Ja missä määrin ajatteluni on tuulesta temmattua. Tämä on oleellista siinä mielessä että jos minua kutsuu amatööriksi, se on syytös ja loukkaus. Joku voi miettiä tätä blogausta lukiessaan asiaa myös henkilökohtaisen kautta. ; Että jos loukkaa niin on kusipää mutta jos loukkaa epäargumentatiivisesti on idiootti ja kusipää. Esimerkiksi. Jotain muutakin vastaavaa tulee mieleen.

MBTI mokaa vain kahdessa asiassa ; Reliabiliteetissa ja validiteetissa

Monet ihmiset vastustavat kaikkia persoonallisuustestejä. Taustalla voi olla vaikka fenomenologinen filosofia jossa tämänlainen on lokerointia. Itse en tämänlaisia edusta. Itse asiassa, mikäli jotakuta kiinnostaa, olen ollut äärimmäisen myönteinen erilaisten temperamenttitutkimusten teolle ja vastaaville. En siis ole "persoonallisuustestejä vastaan yleensä". Itse asiassa tässä blogauksessa on, ihan tämän vuoksi, mainittu muita persoonallisuustestejä. Niissä on otettu huomioon jotain jota MBTI:ssä ei ole. Joka tarkoittaa sitä että jos minulla on vastahankaa, se on vain ja ainoastaan MBTI -testiä kohtaan. Tämänlainen obskuuri spesifisyys on tietysti merkki jostain. Ei kenties siitä että haluan leikkiä kriittistä kriittisyyden vuoksi tässä yhdessä asiassa.

Jokainen persoonallisuustesti pyörii validiteetin ja reliabiliteetin kanssa. Suorastaan voidaan sanoa että jos persoonallisuustestien tieteellisyyttä arvioidaan, virheet yleensä vaikuttavat jompaan kumpaan tai molempiin näistä ilmiöistä. ; Validiteetti tarkoittaa sitä että luonnossa - tässä tapauksessa psyykessä - on todella sellaisia ilmiöitä ja vaikutussuhteita joita siitä mitataan testillä. Reliabiliteetti tarkoittaa sitä että testin tulokset eivät vaihdu mittauskerrasta toiseen. Hyvä testi on jotain jonka on onnistuttava molemmissa. Sillä jos tutkitaan olemassaolevaa piirettä testillä joka antaa eri tuloksia eri kerroilla, testi menettää luotettavuuden. Ja jos taas testi tuottaa konsistentisti saman tuloksen, joka taas ei koske tosielämää mitenkään, niin testiä on paha soveltaa yhtään mihinkään.

Ja näistä ongelmista pahin on yleensä Forer -efekti. Siksi Forer -efektin mainitseminen on jotain joka tekee kaksi asiaa (a) Se on todellakin helppo kritiikki, sillä se on se jonka kanssa joudutaan miltei aina painimaan ja asia hoitamaan jotenkin. (b) Toisaalta se on pelottava uhka. Sillä Forer -efektin kohdalla ongelmana on se, että se iskee sekä validiteettin että reliabliliteettiin.

Tässä moni on moittinut MBTI -tutkimusta siitä että sen käsitteet ovat epämääräisiä. Esimerkiksi Robert Carroll on moittinut MBTI:tä siitä että testin peruskäsitteet ovat aika heikosti määriteltyjä. Ja tämä johtaa tiedetysti Forer -efektin kasvamiseen. Itse näen että tämä ongelma on jotain joka on varmasti vahvimmillaan nettitesteissä ja jonka asiantunteva ihminen voi kiertää. Sillä tosiasiassa MBTI -kyselyn rakenteessa on tiettyjä väitelauseita jotka sidotaan tiettyyn ilmiöön. Näin peruskäsitteiden obskuurius on haaste joka ainakin periaatteessa voidaan kiertää hyvin tehdyllä testillä.

Tai siis se teoriassa voisi. Mutta valitettavasti MBTI -testin tunnettu heikkous, heikkous jota MBTI:n harjoittajat eivät oikein pysty kiertämään, kertoo siitä että sen reliabiliteetti on melkoisen heikko. Eri kerroilla tulokset vaihtuvat. Sama henkilö saa kaksi kertaa testissä käydessään eri tulokset.

Ja kysymys ei ole pelkistä testituloksista jotka tehdään internetin ihmemaassa. ; Ja tämä ongelma itse asiassa on mukana myös ammattilaisten tekemissä testeissä. Tämä syy on se, että MBTI ei itse asiassa ollenkaan huomioi sitä asiaa jonka kanssa yleensä painitaan heti jos psykometria on kyseessä. Esimerkiksi sellaiset testit kuin MMPI (Minnesota Multiphasic Personality Inventory) ja PAI (Personality Assesment Inventory) käsittelevät testiä siten että siinä valehteleminen olisi vaikeaa ja haasteellista.

MBTI:llä ei ole tämänlaista. Se luottaa vastaajan puhtaaseen rehellisyyteen. Matthewsin tutkimus, joka jo nimessään spoilaa tuloksesta olennaisimman "The MBTI is a flawed measure of personality" kuvaa sitä miten testien tulokset vaihtuvat lyhyelläkin koejaksolla. Jo aikaisemmin viittaamani Pittenger nostaa tämän myös esiin siinä jo viittaamassani. Harveyn "Reliability and Validity, in MBTI Applications" kertoo MBTI -keskusteluissa usein esiin nousevan 50% muutosprosentin. (Nämä ovat asianmukaisesti tehtyjä testejä eivätkä mitään nettitestejä.) MBTI -testien luotettavuus vaihtelee testistä ja kokeesta ja testaajasta riippuen 39-76%. Näin suuri haarukka selittää varmasti osansa 50% keskiarvosta.
1: Itse olen varovaisen optimistinen ja uskon että tässä MBTI -testaajan asiantuntevuus on ehkä mahdollisesti kovassakin osassa. Suuri haarukka toisaalta kertoo että MBTI -läisten sisällä on sitten, mikäli edellinen selitykseni MBTI -testin hyvyydestä ja testaajien välisistä eroista on tosi, että MBTI -ilmiö on suuruutensa vuoksi imenyt ties minkälaista koheltajaa. Ammattilaisen valinta on tarkkaa ja tämä vihjaa siihen että kenties asiaa voisi parantaa valvonnalla. Aka MBTI -kulttilaisten ammattiversion torppaamisella. Kenties tätä kautta saadaan uskottavuutta.

Ongelma ei kenties vaikuta suurelta. Moni voi ajatella että kaikki testit olisivat yhtä suurissa vaikeuksissa. Sillä kun kysytään ja toinen vastaa, niin minkäs teet. Mutta tosiasiassa tämä on valtavan tärkeä kysymys. Esimerkiksi Furnhamin "Faking personality questionnaires: Fabricating different profiles for different purposes" käsittelee sitä miten persoonallisuustestin haasteena on se, miten rehellinen vastaaja on. Ongelma on kieroimmillaan tuttu jokaiselle Hannibal Lecterin psykopaattiseikkailuista kiinnostuneelle. Tämä ovela psykiatri kun osaa vastata kaikkiin psykologisiin testeihin sopivasti. Mutta tosiasiassa valehtelun lisäksi ongelmana on itsetuntemus. Jo aikaisemmissa kritiikeissäni nostinkin esiin sen, että MBTI -testin ongelmana on aivan yleisesti tunnetusti se, että se antaa juuri niitä tuloksia joita siihen annetaan. Ja jos kyselyn tekijän motiivina on valehdella, hänen on helppo valehdella. Ja jos hänellä on huono itsetuntemus, hän valehtelee ensin itselleen ja tätä kautta testin tulkitsijalle. Esimerkiksi G. Boyle on korostanut tätä "Myers-Briggs Type Indicator (MBTI): Some psychometric limitations":issa. Tämä iskee luonnollisesti reliabiliteettiin siltä osin että hivenen eri mielentila voi muuttaa suhtautumista asioihin. Ja toisaalta validiteettiin kun testi ei mittaakaan sitä mitä se yrittää mitata. Hannibal Lecter -tyylisen ilmiön loppuun asti vie se, että Francis ja Jones tekivät psykologisen tutkimuksen "The Relationship Between the Myers-Briggs Type Indicator and the Eysenck Personality Questionnaire Among Adult Churchgoers" ja löysivät korrelaation ; J-P -linjaman tuloksilla on yhteys valehteluun ; Selitys löytyy suoraan tutkimuksesta. Jos ihminen pelkää että heillä on jotain menetettävää tai saavutettavaa, he helposti vastaavat helposti siten miten he odottavat että muut haluaisivat heidän vastaavan. Testin rakenne siis suorastaan kannustaa valehtelemaan. Toki tavalla jota voidaan vähentää siten että tämä huomioidaan. Mutta tämä huomionti kuitenkin vie tehoa tämän yhden mittarin merkitykseltä. (Siihen mihin valehdellaan annetaan vähemmän painoa ja se siitä. Kun testissä ei ole enää asioilla painoa, on kysyttävä miksi sitä enää testataan. Ei tämä arkijärjellekään ole mitään korkeaa mystiikkaa.)

Validiteetilla ei toki muutoinkaan mene hirveän lujasti. Nowackin tutkimuksessa on suoraan katsottu MBTI:n validiteettia. Kun katsotaan miten kysymyksiin vastaaminen liittyy toisiinsa, voidaan huomata että vaikka luokitus niputtaa tietyt kysymykset tiettyä kategoriaa kartoittavaksi, niihin vastaamisen kohdalla ei näytä olevan yhteyttä. Eli kun vastaat yhteen tietyllä tavalla, ei ole erityisen paljon todennäköisempää että vastaisit saman kategorian muihin kysymyksiin samalla tavalla. Kun testissä on neljä kirjainta, vain yksi niistä I-E on jotain jonka validiteetti on korkea. S-N ja T-F -luokat taas ovat hyvin heikkoja. Kun tulokset laitetaan yhteen, on hyvä muistaa mitä tapahtuu silloin kun yhteen kerrotaan useita lukuja jotka ovat alle yhden ; Kombinaation kohdalla voidaan olla todella varmoja siitä että testitulos ei joltain osin ole oikein.
* Yhtenä syynä tähän on varmasti myös se, että faktorianalyyseissä on yleensä paljastunut kaksi asiaa ; Muuttujia tarvitaan enemmän. Neljä kirjainta stereotypisoi siis liiaksi. Klustereita syntyy enemmän, joten ilmiöitä ei ole  luokiteltu oikein. Tämä on esimerkiksi Sipps, Alexander ja Friedt tekivät faktorianalyysin MBTI -testistä "Item Analysis of the Myers-Briggs Type Indicator"in tulos.
* Toisaalta MBTI -luokitelman haasteena on se, että kirjaimet eivät olekaan erillisiä vaan mittaavat samaa asiaa vaikka niitä pidetään eri asioina. Ne eivät siis paljasta niin paljoa tietoa kuin olisi tarpeen, ne tarjoavat redundanttia tietoa. McCrae ja Costa esittävät, myös faktorianalyysiä soveltaen,  "Reinterpreting the Myers-Briggs Type Indicator From the Perspective of the Five-Factor Model of Personality" miten J-P ja S-N ovat keskenään yhteydessä. Tämä herättää kysymyksiä esimerkiksi siitä miksi näitä ei sitten nivota samaan vastapariin. Kun toisaalta muihin on syytä laittaa samaan kirjaimeen asioita joiden erot ovat selviä. Costan ja McCraen tuomio on tyly "the MBTI does not give comprehensive information on the four domains it does sample".

Loppukaneetti.

MBTI -testi on selvästi tunteisiin vetoava. Ja miksi ei olisi. Horoskoopit ja monet muut ihmisiä luokittelevat järjestelmät ovat tunnetusti saavuttaneet suurta suosiota. Ihmisiä yksinkertaisesti kiinnostaa tämänlaiset asiat. Kiinnostavuus ei tietenkään tee persoonallisuustesteistä horoskooppeja. Ja itse asiassa MBTI -testikin on validimpi kuin horoskoopit. Sen vahvuus vain ei ole mainittava. Ja tämän väitteen takana uskallan todellakin seistä.
1: Ja enemmän. Sen soveltamista heikentää esimerkiksi se, että vaikka tiettyjen ihmisten yhteen pistäminen toimii intuitiossa horoskooppiparittajia myöten, MBTI -n ja ryhmätyön toimivuuden välille ei ole saatu oikein pohjaa. En kuitenkaan keskittynyt näihin soveltamisongelmiin tässä, koska siinä tekstissäni joka synnytti loukkaantumista leikin tällä ilmiöllä enemmän. Itse testi ja sen lieveilmiöt on syytä katsoa paitsi yhdessä niin myös erikseen.

Itse näkisin että MBTI -testissä on näiden lisäksi se, että se on ns. "incomplete". Eli se mittaa muutamaa piirrettä. Eikä edes kaikkia hirveän oleellisia piirteitä. (Validiteetin puuttuminen tarkoittaa että on kyseenalaista mittaako se suurelta osin yhtään mitään piirteitä. Tätä validiteetin heikkous nimittäin perimmiltään tarkoittaa.) Sitä voisi mainita, että jos testin ajateltaisiin kuitenkin toimivan ja sen J-P -skaala näyttäisi olenko organisoija vai suunnittelija, mutta samanaikaisesti ohittaa saavutuksen hakemista mittaavat temperamenttipiirteet, jotka taas tarvitaan näiden toteuttamisen tasolla. MBTI -mittari ei esimerkiksi tarkastele sellaista ilmiötä kuin "conscientiousness". Vaikka se onkin melkoisen oleellinen asia juuri sitä kautta että MBTI:tä sovelletaan työelämään ja muuhun missä ihmiset tekevät asioita. Tältä kannalta itse suosittelisin enemmän vaikkapa HEXACO -testiä. Kuten niitä muitakin tässä blogauksessa sekaan välähtäneitä muutamia.

Nähdäkseni MBTI -testin ytimessä onkin ongelma joka psykologiaa vaivaa. Psykologian perusongelma on tiivistettävissä siihen että (a) Jokainen luulee olevansa siinä hyvä. Kyökkipsykologia on jopa suositumpaa kuin internetpäteminen. (b) Psykologia on vaikea ala joka on hirvittävän kiinnostava, dynaaminen ja edistyvä. Tämä ei ole sanahelinää vaan se tarkoittaa sitä mitä tästä väistämättä seuraa. Donald Hebb on arvioinut että psykologiassa tiedon puoliintumisaika (half life of knowledge) on viisi vuotta. Toisin sanoen psykologiassa opitaan koko ajan niin paljon että viiden vuoden päästä puolet nyt opetellusta tieteellisestä tiedosta on viiden vuoden päästä joko täysin väärin tai jotain jota on pakko täydentää ja täsmentää että se on tieteelle sopivan asianmukaista. MBTI -testi taas on tässä vaiheessa luonut instituution jota on ehditty kritisoida sen kolmekymmentä vuotta. (MBTI -kritiikki ei ole uusi asia. Ja ihan ammattilaisten tekemänä.)

Valitettavasti luottamukseni ihmisten rationaalisuuteen ei ole luja. Moni nojaa perinteisiin, ja MBTI on instituutio. Jonka loukkaamiseen liittyy, kuten kommentoija demonstroi, syviä tunteita. Tunteita jotka vaativat reagoimista ja syytöksiä ad hominem -rakenteella. Siksi en usko että MBTI -testit tulevat katoamaan mihinkään. Sillä aina löytyy sellaisia ihmisiä joille aforismit ja kansansanonnat voivat toimia psykologisen ilmiön todisteena, korrelaatin ja tutkimuksen korvikkeina. Tälläisellä tiellä systeemit ovat auki kaikille jotka haluavat luoda mitä tahansa ihmistä profiloivaa. Olipa se sitten vaikka tehotonta horoskooppeilua. (MBTI on toki astetta luotettavampaa kuin horoskoopit. Se ei vain juhli luotettavuudellaan. Horoskooppien vakavastiottaminen on sen sijaan jo ihan suoraan häpeäksi. MBTI -testin tekeminen on OK. Sen fanittaminen on sen sijaan noloa, ei vielä häpeäksi, mutta noloa.)