Fleiss-en kappa, κ kappa hizki grekoaz irudikatzen dena, balorazio metodo edo epaile ezberdinen arteko adostasun mailarako neurria da, balorazioak era kualitatiboan zein kuantitatibo diskretuan izan daitezkeelarik. Cohenen kappa ez bezala, 2 epaile edo balorazio metodo baino gehiagotarako, erabil daiteke. Adibidez, epaile batzuek lanpostu baterako hautagai bati ezaugarri ezberdinei buruz baloratzen badute 1etik 5erako puntuazioak emanez, Fleissen kappak epaileen arteko adostasun maila neurtzen du. Neurketa gailu baten zehaztasuna neurtzeko ere erabil daiteke, une ezberdinetan elementu edo banako bati egindako neurketen arteko adostasuna aztertuz.

Fleissen kappa adierazleak zoriz itxaron daitekeen adostasun maila baztertuz neurtzen du adostasun maila. Honela kalkulatzen da:

(1)

Zatitzailean zoriz itxaron daitekeen adostasun maila ezabatu da. Zatikizunean berriz, balorazio ezberdinetarako adostasun maila azaltzen da, betiere zoriz itxaron daitekeen adostasun maila bazterturik.

Kalkulua

aldatu

  baloratutako banako edo elementuak dira.   baloratu beharreko alderdiak edo aldagaiak dira. n epaile edo balorazio metodo kopurua da.   i-garren elementua j-garren balorazio edo kategoriarako jasotako boto edo neurketa kopurua da.

Definitu behar dira  , j-garren kategoriara bildutako elementuen proportzioa,

 ,

eta   adierazpena, i-garren elementurako balorazio metodoek edo epaileek zenbateraino datozen bat ematen duena:

(3)

 
 
 

Azken adierazpen honen garapena egiteko, identitate hau erabili da:  .

Aurreko bi adierazpenek ematen dituzten balioetan oinarrituz, hauek kalkulatu behar dira:

(4)

 
 

(5)

 

Adibidea

aldatu

10 hautagai baloratu behar dituzte 14 epailek, 1etik 5erako eskala batean. Emaitzak ondoko taulan azaltzen dira.

1 2 3 4 5  
1 0 0 0 0 14 1.000
2 0 2 6 4 2 0.253
3 0 0 3 5 6 0.308
4 0 3 9 2 0 0.440
5 2 2 8 1 1 0.330
6 7 7 0 0 0 0.462
7 3 2 6 3 0 0.242
8 2 5 3 2 2 0.176
9 6 5 2 1 0 0.286
10 0 2 2 3 7 0.286
Guztira 20 28 39 21 32
  0.143 0.200 0.279 0.150 0.229
Adibideko datuak eta kalkuluak

Adibidez, bigarren zutaberako,


 


Eta bigarren errenkadarako,


 


Taulan bertan azaltzen diren balio hauetan oinarrituz:


 


 


Eta azkenik, hau izango da Fleiss-en kappa:


 

Interpretazioa

aldatu

Kategoria eta banako kopuruak kapparen emaitzan eragin nabarmena izan dezaketen arren (esaterako, kategoria kopuru txiki batek kapparen balioa igotzeko joera du), jarraian Fleissen kapparen emaitzaren interpretaziorako gida bat ematen da, oso subjektiboa dena:

  Interpretazioa
< 0 Adostasun eza
0.0 – 0.20 Adostasun oso txikia
0.21 – 0.40 Adostasun txikia
0.41 – 0.60 Adostasun ertaina
0.61 – 0.80 Adostasun handia
0.81 – 1.00 Ia erabateko adostasuna

Kanpo estekak

aldatu