Klínískt mat og innanhópafylgni ( clinical assessment and within-group correlation)

Klínískt mat/mat á vettvangi (Clinical assessment/field observation)

Oft ekki hægt að nota spurningalista við mat á hegðun. (Often not possible to use questionnaires for behavior assessment.)

Áreiðanleiki og réttmæti beina athugana (Reliability and validity of direct observations)

Ekki einfalt; þarf að skoða umhverfi, aðstæður og hvort mælingar séu byggðar á viðurkenndum stöðlum. (Complex; depends on setting and observation methods.)

Matsmenn (Raters)

Eru þeir þjálfaðir? Hvernig meta þeir? (Are they trained? How do they rate?)

Hættur í matsferli (Risks in rating process)

Geislabaugsáhrif (halo effect) og reki (observer drift). (Bias and inconsistency in observations.)

Mismunandi matsmenn (Different raters)

Hætta á skekkju þegar mismunandi matsmenn meta. (Risk of bias with different raters.)

Áreiðanleiki milli matsmanna (Interrater reliability)

Matsmenn gefa sömu einkunnir í sömu aðstæðum. (Raters consistently scoring the same.)

Samræmi milli matsmanna (Interrater agreement)

Eru matsmenn sammála í niðurstöðum sínum? (Are raters' scores in agreement?)

Einfalt samræmi (Nominal agreement)

Hlutfall tilfella þar sem matsmenn eru sammála. (Proportion of total agreement.)

Gallar við einfalt samræmi (Limitations of nominal agreement)

Tekur ekki tillit til tilviljunar, segir ekkert um réttmæti matsins. (Does not account for chance agreement.)

Cohen's Kappa

Mælir samræmi milli matsmanna með leiðréttingu fyrir tilviljun. (Adjusts agreement for chance.)

Cronbach's alpha

Mælir áreiðanleika matsmanna; hærri gildi betri. (Measures reliability among raters.)

Innanhópafylgni (Intraclass Correlation Coefficient, ICC)

Metur hversu líkleg þátttakendur eru til að fá sambærilegar einkunnir frá mismunandi matsmönnum. (Measures consistency or absolute agreement among raters.)

Val á ICC-stuðli (Choosing ICC model)

Fer eftir hvort matsmenn meta sömu eða mismunandi þátttakendur. (Depends on study design: crossed, nested, etc.)

ICC-snið (ICC model types)

Crossed design, nested design, random vs fixed effects, absolute agreement vs consistency. (Different models based on study design and focus.)