Untersuchungen zur Re-Test Reliabilität eines webbasierten Farbsehtests

Zusammenfassung

Hintergrund: Siebtests sollen einfach sein, eine hohe Akzeptanz, geringe Kosten, eine hohe Sensitivität und Spezifität sowie eine hohe Reliabilität aufweisen. Die Re-Test-Reliabilität eines webbasierten Farbsehtests wurde bestimmt. Methode: Aus der mySQL-Datenbank eines webbasierten Farbsehtests (http://www.farbsehtest.de) wurden die Ergebnisse von 386 Probanden analysiert, die den Farbsehtest mindestens 2 × mit 25 Tafeln absolviert haben. Wiederholungstests wurden entweder spontan, in der Regel am selben Tag durchgeführt oder kamen aufgrund von Rundbrief-E-Mails zustande, mit der Bitte, den Test zu wiederholen. Für die Bewertung der Re-Test-Reliabilität wurden der Kappa-Koeffizient und das zugehörige 95 %-Konfidenzintervall berechnet. Ergänzend wurde mit dem Test von McNemar geprüft, ob es systematische Unterschiede zwischen den Testergebnissen gab. Ergebnisse: Der Kappa-Koeffizient steigt mit zunehmendem Zeitabstand zwischen der ersten Testdurchführung und der Testwiederholung an. Während er bei einer Testwiederholung innerhalb einer Stunde bei 0,24 (Konfidenzintervall: 0,07 – 0,41; n = 63) lag, steigt er bei den Probanden, die den Test frühestens nach 2 Jahren wiederholt haben, auf 0,83 (Konfidenzintervall: 0,75 – 0,92; n = 240) an. Während bei einer kurzfristigen Testwiederholung innerhalb einer Stunde der Anteil an nicht bestandenen Tests (< 3 Fehler) in der zweiten Testung deutlich abnimmt (p < 0,001, McNemar), haben wir bei einem Zeitabstand von mehr als einem Tag keine systematischen Unterschiede finden können (p = 0,602). Schlussfolgerungen: Der webbasierte Farbsehtest ist als zuverlässiger Siebtest mit gut reproduzierbaren Ergebnissen auch unter unkontrollierten Untersuchungsbedingungen anzusehen, sofern die Probanden den Test ernsthaft durchführen und nicht über einen Trainingseffekt oder Manipulation ein positives Ergebnis anstreben und sich damit selbst täuschen. Die Ergebnisse sind gut reproduzierbar, wenn der Abstand zwischen Erst- und Wiederholungstest mindestens einen Tag beträgt.

Abstract

Background: Screening tests should be simple, with high acceptance, low costs and offer a high sensitivity and specificity as well as high reliability. The test-retest reliability of a web-based colour vision test was evaluated. Method: The results of 386 subjects, who had performed the web-based colour vision test with 25 colour plates twice (available at http://www.farbsehtest.de), were analysed from an mySQL data base. Retests were performed spontaneously, normally on the same day, or through an email newsletter with a request to repeat the test. Test-retest reliability was assessed by calculating the kappa coefficient and the corresponding confidence interval. The McNemar test was used as a complementary procedure to detect the presence of systematic differences between test results. Results: The kappa coefficient rises with increasing time interval between the first test performance and the test repetition. Thus it was 0.24 when the test was repeated within one hour (confidence interval 0.07 – 0.41, n = 63), it increases to 0.83 (confidence interval 0.75 – 0.92, n = 240) in the subjects who repeated the test at the earliest after two years. While the proportion of failed tests (< 3 mistakes) in the second test performance markedly decreases when the test is repeated in the short term within one hour (p < 0.001, McNemar), we were unable to identify any systematic differences (p = 0.602) for a time interval of more than one day. Conclusions: The web-based colour vision test is a reliable screening test with good reproducible results as well under uncontrolled examination conditions. Subjects must perform the test with serious intent and should not aim at a positive test result by training or manipulation because of self-delusion. Test results are reliable if the time interval between test and retest is more than one day.

Schlüsselwörter

Informationstechnologie - Neuroophthalmologie - Farbsehen - Farbsehtest

Key words

information technology - neuroophthalmology - colour vision - colour vision test

Literatur

• 1 Arden G, Gunduz K, Perry S. Color vision testing with a computer graphics system: preliminary results.  Doc Ophthalmol. 1988;  69 167-174
• 2 Cavanagh P, Maurer D, Lewis T et al. Computer-generated screening test for color blindness.  Color Research. 1986;  11 63-66
• 3 Heard P F, Stone C J, Gregory R L. et al .A new computer graphics test for red/green colour anomaly. In Verriest G, ed Colour Vision Deficiencies VIII.. Dodrecht: Martinus Nijhoff/Dr. W. Junk; 1987: 181-194
• 4 Hoffmann A, Menozzi M. Computer-basierte Bestimmung von Rot/Grün-Farbanomalien.  Biomed Tech. 1998;  43 124-132
• 5 Huber C. Colour vision testing on video screen using the Macintosh II computer.  Eur J Implant Ref Surg. 1989;  1 257-263
• 6 King-Smith P E, Chioran G M, Sellers K L. et al .Normal and deficient colour discrimination analysed by colour television. In Mollon J D, Sharpe L T, eds Colour Vision: Physiology and Psychophysics.. London: Academic Press; 1983: 167-172
• 7 King-Smith P E, Vingrys A J, Benes S C. Visual tresholds measured with color video monitors.  Color Res Appl. 1987;  12 73-80
• 8 Kuchenbecker J, Wecke T, Wiermer R et al. Untersuchungen des Farbsinns mittels eines web-basierten Farbsehtests.  Ophthalmologe. 2004;  101 278-284
• 9 Kuchenbecker J, Röhl F W, Weßelburg A et al. Untersuchungen zur Validität eines web-basierten Farbsehtest für Screeninguntersuchungen des Farbensehens.  Ophthalmologe. 2007;  104 47-53
• 10 Mollon J D, Reffin J E. A computer-controlled colour vision test that combines the principles of Chibret and Stilling.  J Physiol. 1989;  414 5
• 11 Mollon J D, Baker M R. The use of CRT displays in research on colour vision. In Drum B, ed Colour Vision Deficiences XII. Kluwer Academic Publishers; 1995: 423-444
• 12 Reffin J P, Astell S, Mollon J D. Trials of a computer-controlled colour vision test that preserves the advantages of pseudoisochromatic plates. In Drum B, Moreland J D, Serra A, eds Colour Vision Deficiencies X. Dordrecht: Kluwer Academic Publishers; 1991: 69-76
• 13 Bach M, Meigen T, Strasburger H. Raster-scan cathode-ray tubes for vision research – limits of resolution in space, time and intensity, and some solutions.  Spat Vis. 1997;  10 403-414
• 14 Dain S J. Clinical colour vision tests.  Clin Exp Optom. 2004;  87 276-293
• 15 Kuchenbecker J, Lindner H, Behrens-Baumann W. Möglichkeiten und Grenzen der Testung visueller Funktionen mittels Internet.  Ophthalmologe. 2002;  99 866-871
• 16 Seshadri J, Christensen J, Lakshminarayanan V et al. Evaluation of the new web-based „Colour Assessment and Diagnosis” test.  Optom Vis Sci. 2005;  82 882-885
• 17 Velhagen K, Broschmann D. Tafeln zur Prüfung des Farbensinnes. 32. unveränd. Auflage ed. Stuttgart New-York: Thieme Verlag; 2000
• 18 Ishihara S. Tests for colour-blindness, 24 plates. Tokio: Kanehara Co. Ltd; 1978
• 19 Cochrane A L, Holland W W. Validation of screening procedures.  Br Med Bull. 1971;  27 3-8
• 20 Fleiss J L. Statistical Methods for Rates and Proportions. 2nd. ed. New York: Wiley; 1981: 321
• 21 Kongsved S M, Basnov M, Holm-Christensen K et al. Response rate and completeness of questionnaires: a randomized study of Internet versus paper-and-pencil versions.  Journal of medical Internet research. 2007;  9 e25
• 22 Jiménez J R, Reche J F, Díaz J A et al. Optimization of color reproduction on CRT-color monitors.  Color Res Appl. 1999;  24 207-213
• 23 Sachs L. Angewandte Statistik. 11. überarbeitete Auflage Berlin: Springer-Verlag; 2004