Determining the quality of rater judgements using intraclass correlation, and enhancing rater judgements;Bestimmung der güte von beurteilereinschätzungen mittels der intraklassenkorrelation und verbesserung von beurteilereinschätzungen

Rehabilitation

Volumn 43, Issue 6, 2004, Pages 384-389

  Wirtz, Markus ^a,b  

^a MZRSFS Freiburg/Bad Sackingen   (Germany)

^b UNIVERSITY OF FREIBURG   (Germany)

Author keywords

Intraclass correlations; Rater reliability; Rater training; Rating mistakes; Rating scales

Indexed keywords

ARTICLE; CORRELATION ANALYSIS; HUMAN; PSYCHOLOGIC ASSESSMENT; RELIABILITY;

ALGORITHMS; DATA INTERPRETATION, STATISTICAL; DECISION SUPPORT SYSTEMS, CLINICAL; DISABLED PERSONS; OBSERVER VARIATION; QUALITY ASSURANCE, HEALTH CARE; REHABILITATION; REPRODUCIBILITY OF RESULTS; SENSITIVITY AND SPECIFICITY; STATISTICS;

EID: 10644250775     PISSN: 00343536     EISSN: None     Source Type: Journal    
DOI: 10.1055/s-2003-814935     Document Type: Article

References (19)

1. Agresti A. Modelling patterns of agreement and disagreement. Statistical Methods in Medical Research 1992; 1: 201-218
2. Bortz J, Döring N. Forschungsmethoden und Evaluation. 3. Aufl. Berlin: Springer, 2001
3. Bortz J, Lienert GA. Kurzgefasste Statistik für die klinische Forschung. Berlin: Springer, 2002
4. Bullinger M, Kirchberger I. SF-36 Fragebogen zum Gesundheitszustand (SF-36). Handbuch für die deutschsprachige Fragebogenversion. Göttingen: Hogrefe, 1998
5. Fleiss JL. Statistical methods for rates and proportions. New York: Wiley, 1981
6. Franke GH. SCL-90-R - Die Symptom-Checkliste von L. R. Derogatis. Göttingen: Beltz-Test, 2002
7. Greve W, Wentura D. Wissenschaftliche Beobachtungen. Eine Einführung. Weinheim: Psychologie-Verlags-Union, 1997
8. Lienert G, Raatz U. Testaufbau und Testanalyse. 5. Aufl. Weinheim: Beltz, PVU, 1998
9. McGraw KO, Wong SP. Forming inferences about some intraclass correlation coefficients. Psychological Methods 1996; 1: 31-43
10. Rohrmann B. Empirische Studien zur Entwicklung von Antwortskalen für die sozialwissenschaftliche Forschung. Zeitschrift für Sozialpsychologie 1978; 9: 222-245
11. Rost J. Lehrbuch Testtheorie Testkonstruktion. Bern: Huber, 1996
12. Shrout PE, Fleiss JL. Intraclass correlations: Uses in assessing rater reliability. Psychological Bulletin 1979; 86 (2): 420-428
13. Stevens SS. Measurement, psychophysics, and utility. In: Churchman CW, Ratoosh P (eds). Measurement: definitions and theory. New York: Wiley, 1959
14. Suen HK, Ary D. Analyzing quantitative behavioral observation data. Hillsdale, NJ: Erlbaum, 1989
15. Tinsley HEA, Weiss DJ. Interrater reliability and agreement of subjective judgements. Journal of Counseling Psychology 1975; 22 (4): 358-376
16. Uebersax JS. A review of modeling approaches for the analysis of observer agreement. Investigative Radiology 1992; 27: 738-743
17. Uebersax JS. Statistical methods for rater agreement [Internet]. Verfügbar unter: http://ourworld.compuserve.com/homepages/jsueber-sax, 2001, last updated May 2003
18. Wirtz M, Caspar F. Beurteilerübereinstimmung und Beurteilerreliabilität. Göttingen: Hogrefe, 2002
19. Wolf M. Social validity: The case for subjective measurement or how applied behavior analysis is finding its heart. Journal of Applied Behavior Analysis 1978; 1: 203-214