Sistema de teste adaptativo computadorizado de avaliação funcional do curso
Summary
Aqui, apresentamos um protocolo para desenvolver o sistema de teste adaptativo informatizado da avaliação funcional do curso (CAT-FAS). Os CAT-FAS simultaneamente podem avaliar quatro funções (duas funções motoras [extremidades superiores e inferiores], controle postural e atividades básicas de vida diária) com suficiente confiabilidade e eficiência administrativa.
Abstract
O sistema informatizado de teste adaptativo da avaliação funcional do curso (CAT-FAS) simultaneamente pode avaliar quatro funções (funções motoras das extremidades superiores e inferiores, controle postural e atividades básicas de vida diária) com suficiente confiabilidade e eficiência administrativa. CAT, um método de medição moderno, visa proporcionar uma estimativa confiável do nível da o examinando função rapidamente. CAT administra apenas alguns itens cujas dificuldades item coincidir com o nível do examinando uma função e, assim, os itens administrados de gato podem fornecer informações suficientes para estimar confiavelmente a nível do examinando de função em um curto espaço de tempo. Os CAT-FAS foi desenvolvido através de quatro etapas: (1) determinar o item de banco, (2) determinar as regras de parada, (3) Validando os CAT-FAS e (4) estabelecer uma plataforma de administração on-line. Os resultados deste estudo indicam que o CAT-FAS tem suficiente eficiência administrativa (número médio de itens = 8,5) e confiabilidade (grupo nível de confiabilidade de Rasch: 0,88 – 0.93; nível de indivíduo Rasch confiabilidade: ≥70% dos pacientes tinham confiabilidade Rasch escore ≥ 0.90) para avaliar simultaneamente quatro funções em pacientes com acidente vascular cerebral. Além disso, porque os gato-FAS é um teste baseado em computador, os CAT-FAS tem três vantagens adicionais: o cálculo automático de partituras, o imediato de armazenamento de dados e a fácil exportação de dados. Estas vantagens do CAT-FAS será benéficas para gerenciamento de dados para clínicos e investigadores.
Introduction
Disfunções das extremidades superiores e inferiores (UE e LE), controle postural e atividades básicas de vida diária (BADL) são grandes sequelas de acidente vascular cerebral1,2,3. A avaliação dessas quatro funções em pacientes com AVC é fundamental para os clínicos avaliar os níveis dos pacientes de disfunções, definir planos e objetivos do tratamento e monitorar as trajetórias longitudinais dessas funções.
A avaliação de Fugl-Meyer (FM),4 a escala de Avaliação Postural para acidente vascular cerebral pacientes (PASS),5 e o índice de Barthel (BI)6 têm boas propriedades psicométricas para avaliar as funções motoras, controle postural e BADL, UE/LE respectivamente, em pacientes com AVC7,8,9. No entanto, o total de 72 itens a partir destas três medidas impede a viabilidade de avaliar todas as três medidas dentro de uma sessão terapêutica limitada no tempo. Um método mais eficiente de teste é garantido. Testes adaptativos computadorizado (CAT) são um método de medição moderno. Em comparação com métodos convencionais de medição, CAT fornece uma estimativa mais confiável do nível da o examinando função em muito menos tempo10,11,12. Em métodos de medição convencional, cada examinando recebe a mesma forma de teste (ou item define), em que muitos itens são muito difíceis ou muito fácil para o examinando. Esses itens fornecem informações limitadas para estimar o nível da o examinando função e consomem tempo para examinandos. Em contraste, no CAT, cada examinando Obtém um conjunto de item costurado, em que o nível de dificuldade dos itens selecionados cumpre a função de nível do examinando. Porque estes itens são adaptados para esse determinado examinando, CAT pode fornecer uma estimativa mais confiável do nível da o examinando função com menos itens e, assim, em muito menos tempo. As etapas de desenvolvimento de CAT são mostradas em arquivo complementar 1: Apêndice 1.
Porque CAT promete avaliações confiáveis e eficientes, os CAT-FAS foi desenvolvido para melhorar a eficiência administrativa das três medidas anteriormente utilizadas (FM, PASS e BI)13. Este trabalho descreve o desenvolvimento e administração do CAT-FAS. Este protocolo fornece informações para pesquisadores desenvolver seus gatos e potenciais utilizadores do CAT-FAS para administrá-lo. Também abordamos os pontos fortes e fracos do CAT-FAS.
Protocol
Representative Results
Discussion
Os resultados aqui apresentados mostraram que o CAT-FAS administrada cerca de 10% dos itens nos testes originais (o número médio de itens usados em CAT-FAS: 8.5 itens vs os testes originais: 72 itens). Estes resultados indicam que o CAT-FAS tem boa eficiência administrativa. Os resultados foram em consonância com estudos anteriores, que relataram que um gato administrada apenas cerca de 10 itens ou menos para avaliar a função social, o equilíbrio ou atividades da vida diária em pacientes com AVC<sup clas…
Disclosures
The authors have nothing to disclose.
Acknowledgements
Este estudo foi suportado por bolsas de investigação do Ministério da ciência e tecnologia (105-2314-B-002-015-MY3).
Materials
| Computer | Any | Compatible with software listed below | |
| MATLAB software | The MathWorks Inc. | http://www.mathworks.com/products/matlab/ | Numerical computing software, which is used in the Protocol Section 1 (Step 1.3) |
| Java Development Kit | Oracle | https://www.oracle.com/java/ | Programming language, which is used in the Protocol Section 1 (Step 1.5) |
References
- Kim, S. S., Lee, H. J., You, Y. Y. Effects of ankle strengthening exercises combined with motor imagery training on the timed up and go test score and weight bearing ratio in stroke patients. Journal of Physical Therapy Science. 27 (7), 2303-2305 (2015).
- Langhorne, P., Coupar, F., Pollock, A. Motor recovery after stroke: A systematic review. Lancet Neurology. 8 (8), 741-754 (2009).
- Lum, P. S., Burgar, C. G., Shor, P. C., Majmundar, M., Van der Loos, M. Robot-assisted movement training compared with conventional therapy techniques for the rehabilitation of upper-limb motor function after stroke. Archives of Physical Medicine and Rehabilitation. 83 (7), 952-959 (2002).
- Fugl-Meyer, A. R., Jaasko, L., Leyman, I., Olsson, S., Steglind, S. The post-stroke hemiplegic patient 1: A method for evaluation of physical performance. Scandinavian Journal of Rehabilitation Medicine. 7 (1), 13-31 (1975).
- Benaim, C., Perennou, D. A., Villy, J., Rousseaux, M., Pelissier, J. Y. Validation of a standardized assessment of postural control in stroke patients: The Postural Assessment Scale for Stroke Patients (PASS). Stroke. 30 (9), 1862-1868 (1999).
- Mahoney, F. I., Barthel, D. W. Functional Evaluation: The Barthel Index. Maryland State Medical Journal. 14, 61-65 (1965).
- Duffy, L., Gajree, S., Langhorne, P., Stott, D. J., Quinn, T. J. Reliability (inter-rater agreement) of the Barthel Index for assessment of stroke survivors: Systematic review and meta-analysis. Stroke. 44 (2), 462-468 (2013).
- Lin, J. H., Hsueh, I. P., Sheu, C. F., Hsieh, C. L. Psychometric properties of the sensory scale of the Fugl-Meyer Assessment in stroke patients. Clinical Rehabilitation. 18 (4), 391-397 (2004).
- Mao, H. F., Hsueh, I. P., Tang, P. F., Sheu, C. F., Hsieh, C. L. Analysis and comparison of the psychometric properties of three balance measures for stroke patients. Stroke. 33 (4), 1022-1027 (2002).
- Hsueh, I. P., et al. Development of a computerized adaptive test for assessing balance function in patients with stroke. Physical Therapy. 90 (9), 1336-1344 (2010).
- Hsueh, I. P., Chen, J. H., Wang, C. H., Hou, W. H., Hsieh, C. L. Development of a computerized adaptive test for assessing activities of daily living in outpatients with stroke. Physical Therapy. 93 (5), 681-693 (2013).
- Wong, A. W., Heinemann, A. W., Miskovic, A., Semik, P., Snyder, T. M. Feasibility of computerized adaptive testing for collection of patient-reported outcomes after inpatient rehabilitation. Archives of Physical Medicine and Rehabilitation. 95 (5), 882-891 (2014).
- Lin, G. H., Huang, Y. J., Lee, S. C., Huang, S. L., Hsieh, C. L. Development of a computerized adaptive testing system of the Functional Assessment of Stroke. Archives of Physical Medicine and Rehabilitation. 99 (4), 676-683 (2017).
- Wang, Y. L., Lin, G. H., Yi-Jing, H., Chen, M. H., Hsieh, C. L. Refining three measures to construct an efficient Functional Assessment of Stroke. Stroke. 48 (6), 1630-1635 (2017).
- Adams, R. J., Wilson, M., Wang, W. C. The multidimensional random coefficients multinomial logit model. Applied Psychological Measurement. 21 (1), 1-23 (1997).
- Masters, G. N. A Rasch model for partial credit scoring. Psychometrika. 47 (2), 149-174 (1982).
- Wang, W. C., Chen, P. H. Implementation and measurement efficiency of multidimensional computerized adaptive testing. Applied Psychological Measurement. 28 (5), 295-316 (2004).
- Mulder, J., Van der Linden, W. J. Multidimensional adaptive testing with optimal design criteria for item selection. Psychometrika. 74 (2), 273-296 (2009).
- Segall, D. O. General ability measurement: An application of multidimensional item response theory. Psychometrika. 66 (1), 79-97 (2001).
- Lee, S. C., et al. Development of a social functioning assessment using computerized adaptive testing for patients with stroke. Archives of Physical Medicine and Rehabilitation. 99 (2), 306-313 (2018).
- Paap, M. C. S., et al. Measuring patient-reported outcomes adaptively: Multidimensionality matters!. Applied Psychological Measurement. 42 (5), 327-342 (2018).
- Paap, M. C. S., Kroeze, K. A., Terwee, C. B., van der Palen, J., Veldkamp, B. P. Item usage in a multidimensional computerized adaptive test (MCAT) measuring health-related quality of life. Quality of Life Research. 26 (11), 2909-2918 (2017).
