Geautomatiseerde adaptieve testsysteem van functionele beoordeling van een beroerte
Summary
Hier presenteren we een protocol voor de ontwikkeling van de geautomatiseerde adaptieve testsysteem van de functionele beoordeling van beroerte (CAT-FAS). De CAT-FAS kunnen tegelijkertijd vier functies (twee motorische functies [bovenste en onderste extremiteiten], posturale controle en fundamentele activiteiten van het dagelijks leven) met voldoende betrouwbaarheid en administratieve efficiëntie beoordelen.
Abstract
De geautomatiseerde adaptieve testsysteem van de functionele beoordeling van beroerte (CAT-FAS) kan gelijktijdig vier functies (motorische functies van de bovenste en onderste extremiteiten, posturale controle en fundamentele activiteiten van het dagelijks leven) met voldoende beoordelen betrouwbaarheid en administratieve efficiency. KAT, een moderne meetmethode, streeft naar een betrouwbare schatting van de examinandus het niveau van de functie snel. CAT beheert slechts een paar items waarvan moeilijkheden item overeenkomen met de een examinandus functie, en dus de door de overheid gereguleerde items van kat kunnen voldoende gegevens opleveren voor betrouwbaar inschatten van de examinandus functie in een korte tijd. De CAT-FAS werd ontwikkeld door middel van vier stappen: (1) het bepalen van de item-bank, (2) bepalen de regels stoppen (3) het valideren van de CAT-FAS en (4) tot oprichting van een platform voor online administratie. De resultaten van deze studie blijkt dat de kat-FAS heeft voldoende administratieve efficiëntie (gemiddelde aantal artikelen = 8,5) en betrouwbaarheid (groepeerniveau Rasch betrouwbaarheid: 0.88 – 0.93; individu-niveau Rasch betrouwbaarheid: ≥70% van de patiënten had Rasch betrouwbaarheid Score ≥0.90) om te beoordelen tegelijkertijd vier functies bij patiënten met een beroerte. Bovendien, omdat de CAT-FAS is een computer-based test, de CAT-FAS heeft drie extra voordelen: de automatische berekening van scores, de onmiddellijke opslag van gegevens en het eenvoudig exporteren van gegevens. Deze voordelen van de CAT-FAS zal gunstig zijn voor gegevensbeheer voor clinici en onderzoekers.
Introduction
Dysfuncties van de bovenste en onderste extremiteiten (UE en LE), posturale controle en fundamentele activiteiten van het dagelijks leven (BADL) zijn grote gevolgen voor lijn1,2,3. De beoordeling van deze vier functies bij patiënten met een beroerte is van fundamenteel belang voor clinici evalueren van patiënten niveaus van disfuncties, stelt behandeling doelen en plannen en volgen van de longitudinale trajecten van deze functies.
De Fugl-Meyer beoordeling (FM), hebben4 de posturale beoordeling schaal voor slag-patiënten (PASS),5 en de Barthel Index (BI)6 goede psychometrische eigenschappen te beoordelen van de UE/LE motorische functies posturale controle en BADL, respectievelijk, bij patiënten met een beroerte7,8,9. Echter, het totaal van 72 items uit deze drie maatregelen belemmert de haalbaarheid van de beoordeling van alle drie maatregelen binnen een tijd-beperkte therapeutische sessie. Een efficiëntere testmethode gerechtvaardigd is. Geautomatiseerde adaptieve testen (kat) is een moderne meetmethode. Vergeleken met conventionele meetmethoden, biedt CAT een meer betrouwbare schatting van de examinandus het niveau van de functie in veel minder tijd10,11,12. In conventionele meetmethoden, elke examinandus ontvangt het dezelfde testformulier (of object ingesteld), waarin veel items zijn te moeilijk of te gemakkelijk voor de examinandus. Deze objecten bieden beperkte informatie voor het inschatten van de examinandus niveau van functie en zijn tijdrovende voor examenkandidaten. In tegenstelling, bij kat krijgt elke examinandus een op maat gemaakte item set, de moeilijkheidsgraad van de geselecteerde items in die voldoet aan het niveau van de functie van de examinandus. Omdat deze items op maat voor dat bepaalde examinandus gemaakt zijn, kan kat bieden een meer betrouwbare schatting van de examinandus niveau van functie met minder items en dus in veel minder tijd. De stappen van CAT ontwikkeling staan in aanvullende bestand 1: aanhangsel 1.
Omdat CAT belooft betrouwbaar en efficiënt evaluaties, werd de CAT-FAS ontwikkeld ter verbetering van de administratieve efficiency van de drie maatregelen vroeger (FM, PASS en BI)13. Deze paper beschrijft de ontwikkeling en het beheer van de CAT-FAS. Dit protocol biedt informatie voor onderzoekers te ontwikkelen hun katten en voor potentiële gebruikers van de CAT-FAS om het te beheren. We pakken ook de sterktes en zwaktes van de CAT-FAS.
Protocol
Representative Results
Discussion
De hier gepresenteerde resultaten bleek dat de kat-FAS toegediend ongeveer 10% van de items in de oorspronkelijke tests (het gemiddelde aantal items gebruikt in de CAT-FAS: 8.5 items vs. de oorspronkelijke proeven: 72 items). Deze bevindingen wijzen erop dat de kat-FAS heeft goede administratieve efficiëntie. De resultaten werden in overeenstemming met eerdere studies, die gemeld dat een kat beheerd slechts ongeveer 10 punten of minder om sociale functie, evenwicht, of activiteiten van het dagelijkse leven bij …
Disclosures
The authors have nothing to disclose.
Acknowledgements
Deze studie werd ondersteund door onderzoekssubsidies van het ministerie van wetenschap en technologie (105-2314-B-002-015-MY3).
Materials
| Computer | Any | Compatible with software listed below | |
| MATLAB software | The MathWorks Inc. | http://www.mathworks.com/products/matlab/ | Numerical computing software, which is used in the Protocol Section 1 (Step 1.3) |
| Java Development Kit | Oracle | https://www.oracle.com/java/ | Programming language, which is used in the Protocol Section 1 (Step 1.5) |
References
- Kim, S. S., Lee, H. J., You, Y. Y. Effects of ankle strengthening exercises combined with motor imagery training on the timed up and go test score and weight bearing ratio in stroke patients. Journal of Physical Therapy Science. 27 (7), 2303-2305 (2015).
- Langhorne, P., Coupar, F., Pollock, A. Motor recovery after stroke: A systematic review. Lancet Neurology. 8 (8), 741-754 (2009).
- Lum, P. S., Burgar, C. G., Shor, P. C., Majmundar, M., Van der Loos, M. Robot-assisted movement training compared with conventional therapy techniques for the rehabilitation of upper-limb motor function after stroke. Archives of Physical Medicine and Rehabilitation. 83 (7), 952-959 (2002).
- Fugl-Meyer, A. R., Jaasko, L., Leyman, I., Olsson, S., Steglind, S. The post-stroke hemiplegic patient 1: A method for evaluation of physical performance. Scandinavian Journal of Rehabilitation Medicine. 7 (1), 13-31 (1975).
- Benaim, C., Perennou, D. A., Villy, J., Rousseaux, M., Pelissier, J. Y. Validation of a standardized assessment of postural control in stroke patients: The Postural Assessment Scale for Stroke Patients (PASS). Stroke. 30 (9), 1862-1868 (1999).
- Mahoney, F. I., Barthel, D. W. Functional Evaluation: The Barthel Index. Maryland State Medical Journal. 14, 61-65 (1965).
- Duffy, L., Gajree, S., Langhorne, P., Stott, D. J., Quinn, T. J. Reliability (inter-rater agreement) of the Barthel Index for assessment of stroke survivors: Systematic review and meta-analysis. Stroke. 44 (2), 462-468 (2013).
- Lin, J. H., Hsueh, I. P., Sheu, C. F., Hsieh, C. L. Psychometric properties of the sensory scale of the Fugl-Meyer Assessment in stroke patients. Clinical Rehabilitation. 18 (4), 391-397 (2004).
- Mao, H. F., Hsueh, I. P., Tang, P. F., Sheu, C. F., Hsieh, C. L. Analysis and comparison of the psychometric properties of three balance measures for stroke patients. Stroke. 33 (4), 1022-1027 (2002).
- Hsueh, I. P., et al. Development of a computerized adaptive test for assessing balance function in patients with stroke. Physical Therapy. 90 (9), 1336-1344 (2010).
- Hsueh, I. P., Chen, J. H., Wang, C. H., Hou, W. H., Hsieh, C. L. Development of a computerized adaptive test for assessing activities of daily living in outpatients with stroke. Physical Therapy. 93 (5), 681-693 (2013).
- Wong, A. W., Heinemann, A. W., Miskovic, A., Semik, P., Snyder, T. M. Feasibility of computerized adaptive testing for collection of patient-reported outcomes after inpatient rehabilitation. Archives of Physical Medicine and Rehabilitation. 95 (5), 882-891 (2014).
- Lin, G. H., Huang, Y. J., Lee, S. C., Huang, S. L., Hsieh, C. L. Development of a computerized adaptive testing system of the Functional Assessment of Stroke. Archives of Physical Medicine and Rehabilitation. 99 (4), 676-683 (2017).
- Wang, Y. L., Lin, G. H., Yi-Jing, H., Chen, M. H., Hsieh, C. L. Refining three measures to construct an efficient Functional Assessment of Stroke. Stroke. 48 (6), 1630-1635 (2017).
- Adams, R. J., Wilson, M., Wang, W. C. The multidimensional random coefficients multinomial logit model. Applied Psychological Measurement. 21 (1), 1-23 (1997).
- Masters, G. N. A Rasch model for partial credit scoring. Psychometrika. 47 (2), 149-174 (1982).
- Wang, W. C., Chen, P. H. Implementation and measurement efficiency of multidimensional computerized adaptive testing. Applied Psychological Measurement. 28 (5), 295-316 (2004).
- Mulder, J., Van der Linden, W. J. Multidimensional adaptive testing with optimal design criteria for item selection. Psychometrika. 74 (2), 273-296 (2009).
- Segall, D. O. General ability measurement: An application of multidimensional item response theory. Psychometrika. 66 (1), 79-97 (2001).
- Lee, S. C., et al. Development of a social functioning assessment using computerized adaptive testing for patients with stroke. Archives of Physical Medicine and Rehabilitation. 99 (2), 306-313 (2018).
- Paap, M. C. S., et al. Measuring patient-reported outcomes adaptively: Multidimensionality matters!. Applied Psychological Measurement. 42 (5), 327-342 (2018).
- Paap, M. C. S., Kroeze, K. A., Terwee, C. B., van der Palen, J., Veldkamp, B. P. Item usage in a multidimensional computerized adaptive test (MCAT) measuring health-related quality of life. Quality of Life Research. 26 (11), 2909-2918 (2017).
