Summary

Un método de evaluación y un kit de herramientas para evaluar el diseño del teclado en teléfonos inteligentes

Published: October 05, 2020
doi:

Summary

El protocolo presentado integra varios métodos de evaluación y demuestra un método para evaluar el diseño del teclado en teléfonos inteligentes. Los pares emparejados por caracteres en inglés se proponen como material de entrada, y el tiempo de transición entre dos claves se utiliza como variable dependiente.

Abstract

La entrada de teclado ha desempeñado un papel esencial en la interacción humano-computadora con una vasta base de usuarios, y el diseño del teclado siempre ha sido uno de los objetos fundamentales de estudio sobre dispositivos inteligentes. Con el desarrollo de la tecnología de pantalla, los teléfonos inteligentes podrían recopilar datos e indicadores más precisos para evaluar en profundidad el diseño del teclado. La ampliación de la pantalla del teléfono ha llevado a una experiencia de entrada insatisfactoria y dolor en los dedos, especialmente para la entrada con una sola mano. La eficiencia de entrada y la comodidad han atraído la atención de investigadores y diseñadores, y el teclado curvo con botones ajustables en tamaño, que concuerda aproximadamente con la estructura fisiológica de los pulgares, se propuso para optimizar el uso con una sola mano en teléfonos inteligentes de pantalla grande. Sin embargo, sus efectos reales siguieron siendo ambiguos. Por lo tanto, este protocolo demostró un método general y resumido para evaluar el efecto del diseño curvo del teclado QWERTY en un teléfono inteligente de 5 pulgadas a través de un software de desarrollo propio con variables detalladas, incluidos datos de comportamiento objetivo, retroalimentación subjetiva y los datos de coordenadas de cada punto de contacto. Existe suficiente literatura sobre la evaluación de teclados virtuales; sin embargo, sólo unos pocos de ellos resumieron sistemáticamente y reflexionaron sobre los métodos y procesos de evaluación. Por lo tanto, este protocolo llena el vacío y presenta un proceso y método de evaluación sistemática del diseño del teclado con códigos disponibles para el análisis y la visualización. No necesita equipos adicionales o costosos y es fácil de conducir y operar. Además, el protocolo también ayuda a obtener posibles razones para las desventajas del diseño e ilumina la optimización de los diseños. En conclusión, este protocolo con los recursos de código abierto no solo podría ser un experimento demostrativo en clase para inspirar al novato a comenzar sus estudios, sino que también contribuye a mejorar la experiencia del usuario y los ingresos de las empresas editoras de métodos de entrada.

Introduction

La entrada de teclado es el método principal de la interacción humano-teléfono inteligente1,2,y con la penetración de los teléfonos inteligentes, la entrada de teclado obtiene miles de millones de usuarios. En 2019, la tasa global de penetración de teléfonos inteligentes había alcanzado el 41,5%3,mientras que Estados Unidos, con la mayor penetración, había llegado hasta el 79,1%4. Hasta el primer trimestre de 2020, el teclado móvil Sogou tenía alrededor de 480 millones de usuarios activos diarios5. Hasta el 6 de mayo de 2020, el Google Gboard se había descargado más de 1.000 millones de veces6.

La experiencia de entrada de teclado insatisfactoria aumenta con la ampliación de la pantalla del teléfono. Aunque la pantalla ampliada tenía como objetivo mejorar la experiencia de visualización, ha cambiado la gravedad, el tamaño y el peso de los teléfonos inteligentes, lo que hace que los usuarios cambien la postura de sujeción repetidamente para llegar a áreas remotas (por ejemplo, los botones A y Q para usuarios diestros), lo que lleva a la ineficiencia de entrada. El estiramiento del músculo puede hacer que los usuarios sufran de trastornos musculoesqueléticos, dolores en las manos y diferentes tipos de enfermedades (por ejemplo, síndrome del túnel carpiano, osteoartritis del pulgar y tenosinovitis del pulgar7,8,9,10). Los usuarios que prefieren el uso con una sola mano están en peores condiciones11,12.

Por lo tanto, la evaluación y optimización del diseño del teclado se han convertido en temas candentes de investigación psicológica, técnica y ergonómica. Las empresas e investigadores del editor de métodos de entrada (IME) han propuesto constantemente diseños y conceptos de teclado variable para optimizar la experiencia y la eficiencia de la entrada, incluidos los teclados con cambio de diseño y reordenados por caracteres: Microsoft WordFlow Keyboard13,Functional Button Area in Glory of Kings14,IJQWERTY15y Quasi-QWERTY16.

Los métodos de evaluación existentes del diseño del teclado varían de un investigador a otro, excepto por varios indicadores altamente aceptados, y se proponen indicadores más precisos. Sin embargo, con una variedad de indicadores, no hay un protocolo resumido y sistemático proporcionado para demostrar el proceso de evaluación y análisis del diseño del teclado. La Ley17 de Fitts y su versión extendida de la Ley FFitts18,que describía la interacción humano-computadora, fueron ampliamente adoptadas para evaluar el rendimiento del teclado19,20,21,22. Además, el área funcional del pulgar se propuso para mejorar el diseño del teclado, y describió un área de movimiento curva para que el pulgar complete cómodamente la tarea de entrada23. Sobre la base de estas teorías, los indicadores que incluyen palabra por minuto, tasa de error de palabra y retroalimentación subjetiva (usabilidad percibida, rendimiento percibido, velocidad percibida, carga de trabajo subjetiva, esfuerzo y dolor percibidos, e intención de uso, etc.), que fueron altamente adoptados, se utilizaron parcialmente en estudios previos24,25,26,27,28,29 excepto para los métodos de modelado y simulación. Además, la elipse ajustada de puntos de contacto en cada botón y su desplazamiento30,31 se utilizaron en los últimos años para investigar el rendimiento preciso de los eventos de entrada. Asimismo, se adoptaron la respuesta galvánica de la piel, la frecuencia cardíaca, la actividad electromiográfica, el gesto con las manos y el movimiento corporal32,33, 34,35 para evaluar directa o indirectamente la fatiga muscular, la comodidad y la satisfacción de los usuarios. Sin embargo, estos diversos métodos carecen de reflexión sobre la idoneidad de los indicadores utilizados, y un investigador novato puede confundirse para seleccionar los indicadores apropiados para su investigación.

La investigación sobre el diseño del teclado también es fácil de realizar, operar y analizar. Con el auge de la tecnología de pantalla, se podrían recopilar fácilmente más datos de comportamiento para evaluar el diseño del teclado en profundidad (por ejemplo, el tiempo de transición entre dos teclas y los datos de coordenadas de cada punto de contacto). Sobre la base de los datos mencionados, los investigadores podrían explorar con precisión los detalles del diseño del teclado y analizar sus desventajas y ventajas. En comparación con otras investigaciones de interacción humano-computadora, la investigación del diseño del teclado en teléfonos inteligentes portátiles también tiene un alto valor de aplicación para su vasta base de usuarios sin equipos costosos, materiales complicados o un gran espacio de laboratorio necesario. Los cuestionarios, escalas y scripts de Python sobre la investigación son de código abierto y de fácil acceso.

El propósito de esta investigación es resumir los métodos anteriores para demostrar un protocolo sistemático, preciso y general para evaluar y analizar el diseño del teclado en los teléfonos inteligentes. El experimento ejemplar y los resultados tienen como objetivo mostrar si el teclado QWERTY curvo con botones ajustables en tamaño podría optimizar la experiencia de entrada de una sola mano en un teléfono inteligente de 5 pulgadas en comparación con el teclado QWERTY tradicional y compartir el método de visualización y el script Python de análisis de datos.

Protocol

El estudio se realizó de acuerdo con el principio ético y fue aprobado por el Comité de Ética de la Universidad de Tsinghua. La Figura 1 muestra el proceso de evaluación del diseño del teclado de los teléfonos inteligentes. Figura 1: Proceso general de realización de un experimento de teclado y evaluación del diseño del teclado.</…

Representative Results

El estudio representativo sigue principalmente el protocolo mencionado. El estudio adopta un diseño dentro × del sujeto 2 (Distribución del teclado: QWERTY curva vs. QWERTY tradicional vs. QWERTY tradicional) 2 (Tamaño del botón: grande, 6.3 mm × 9 mm vs. pequeño, 4.9 mm × 7 mm) para evaluar si el QWERTY curvo podría mejorar la eficiencia de entrada y la comodidad en comparación con el QWERTY tradicional en diferentes tamaños de botones por la tarea de entrada del par de caracteres a través de nuestro softwar…

Discussion

En este estudio, basado en el desarrollo de la tecnología de pantalla, presentamos un protocolo resumido y general de evaluación del diseño del teclado para evaluar el diseño del teclado de manera sistemática y precisa. Los indicadores y métodos existentes de estudios anteriores, los pares emparejados por caracteres en inglés y el tiempo de transición entre dos claves se integran y modifican para generar un protocolo efectivo.

Varios puntos críticos deben ser notados en este protocolo…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Esta investigación está respaldada por el Programa de Investigación Científica de la Iniciativa de la Universidad de Tsinghua (Diseño ergonómico del teclado curvo en dispositivos inteligentes). Los autores aprecian a Tianyu Liu por sus amables sugerencias y asistencia de codificación en figuras.

Materials

Changxiang 6S smartphone Huawei Smartphone used in the examplar study
Curved QWERTY keyboard software Tsinghua University Developed by authors
SPSS software IBM Data analysis software
G*Power software Heinrich-Heine-Universität Düsseldorf Sample size calculation
E4 portable wireless wristband Empatica Recording galvanic skin response and heart rate
Arqus Qualysis Motion capture camera platform
Passive marker Qualysis Appropriate sizes: 2.5 mm, 4 mm, and 6.5 mm
Trigno sEMG Delsys Recording electromyographic activity
Visual Studio Code Microsoft Python editor

References

  1. Lee, S., Zhai, S. The performance of touch screen soft buttons. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , (2009).
  2. Smith, B. A., Bi, X., Zhai, S. Optimizing touchscreen keyboards for gesture typing. Proceedings of the 33rd Annual ACM Conference on Human Factors in Computing Systems. , (2015).
  3. . Global smartphone penetration rate as share of population from 2016 to 2020 [Fact sheet] Available from: https://www.statista.com/statistics/203734/global-smartphone-penetration-per-capita-since-2005 (2020)
  4. Top Countries by Smartphone Users [Fact sheet]. Newzoo Available from: https://newzoo.com/insights/rankings/top-countries-by-smartphone-penetration-and-users (2019)
  5. Gboard – the Google Keyboard [Press release]. Google Play Available from: https://play.google.com/store/apps/details?id=com.google.android.inputmethod.latin (2020)
  6. Eitivipart, A. C., Viriyarojanakul, S., Redhead, L. Musculoskeletal disorder and pain associated with smartphone use: A systematic review of biomechanical evidence. Hong Kong Physiotherapy Journal. 38 (2), 77-90 (2018).
  7. Chang, J., Choi, B., Tjolleng, A., Jung, K. Effects of button position on a soft keyboard: Muscle activity, touch time, and discomfort in two-thumb text entry. Applied Ergonomics. 60, 282-292 (2017).
  8. Gehrmann, S. V., et al. Motion deficit of the thumb in CMC joint arthritis. Journal of Hand Surgery. 35 (9), 1449-1453 (2010).
  9. Kim, G., Ahn, C. S., Jeon, H. W., Lee, C. R. Effects of the Use of Smartphones on Pain and Muscle Fatigue in the Upper Extremity. Journal of Physical Therapy Science. 24 (12), 1255-1258 (2012).
  10. Girouard, A., et al. One-handed bend interactions with deformable smartphones. Proceedings of the 33rd annual ACM conference on human factors in computing systems. , (2015).
  11. Lee, M., Hong, Y., Lee, S., Won, J., Yang, J., Park, S. The effects of smartphone use on upper extremity muscle activity and pain threshold. Journal of Physical Therapy Science. 27 (6), 1743-1745 (2015).
  12. Word Flow keyboard [Press release]. Microsoft Garage Available from: https://www.microsoft.com/en-us/garage/profiles/word-flow-keyboard/ (2020)
  13. The glory of kings [Press release]. Tencent Games Available from: https://pvp.qq.com/ (2020)
  14. Bi, X., Zhai, S. Ijqwerty: what difference does one key change make? Gesture typing keyboard optimization bounded by one key position change from qwerty. Proceedings of the 2016 CHI Conference on Human Factors in Computing Systems. , (2016).
  15. Bi, X., Smith, B. A., Zhai, S. Quasi-qwerty soft keyboard optimization. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , (2010).
  16. Fitts, P. The information capacity of the human motor system is controlled by the amplitude of movement. Journal of Experimental Psychology. 47, 381-391 (1954).
  17. Bi, X., Li, Y., Zhai, S. FFitts law: modeling finger touch with fitts’ law. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , (2013).
  18. Dunlop, M., Levine, J. Multidimensional pareto optimization of touchscreen keyboards for speed, familiarity and improved spell checking. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , (2012).
  19. Li, Y., Chen, L., Goonetilleke, R. S. A heuristic-based approach to optimize keyboard design for single-finger keying applications. International Journal of Industrial Ergonomics. 36 (8), 695-704 (2006).
  20. Benligiray, B., Topal, C., Akinlar, C. SliceType: fast gaze typing with a merging keyboard. Journal on Multimodal User Interfaces. 13 (4), 321-334 (2019).
  21. Wang, Y., Ai, H., Liang, Q., Chang, W., He, J. How to optimize the input efficiency of keyboard buttons in large smartphone? A comparison of curved keyboard and keyboard area size [Conference presentation]. International Conference on Human-Computer Interaction. , (2019).
  22. Bergstrom-Lehtovirta, J., Oulasvirta, A. Modeling the functional area of the thumb on mobile touchscreen surfaces. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , (2014).
  23. Brooke, J. SUS: A retrospective. Journal of Usability Studies. 8 (2), 29-40 (2013).
  24. Borg, G. Principles in scaling pain and the Borg CR Scales. Psychologica. 37, 35-47 (2004).
  25. Hart, S. G., Staveland, L. E., Hancock, P. A., Meshkati, N. Development of NASA-TLX (task load index): results of empirical and theoretical research. Human mental workload. , 139-183 (1988).
  26. Trudeau, M. B., Asakawa, D. S., Jindrich, D. L., Dennerlein, J. T. Two-handed grip on a mobile phone affords greater thumb motor performance, decreased variability, and a more extended thumb posture than a one-handed grip. Applied Ergonomics. 52, 24-28 (2016).
  27. Turner, C. J., Chaparro, B. S., He, J. Text input on a smartwatch qwerty keyboard: tap vs. trace. International Journal of Human Computer Interaction. 33 (1-3), 143-150 (2017).
  28. Zhai, S., Kristensson, P. O. The word-gesture keyboard: reimagining keyboard interaction. Communications of the ACM. 55 (9), 91-101 (2012).
  29. Azenkot, S., Zhai, S. Touch behavior with different postures on soft smartphone keyboards. Proceedings of the 14th international conference on Human-computer interaction with mobile devices and services. , (2012).
  30. Yi, X., Yu, C., Shi, W., Shi, Y. Is it too small?: Investigating the performances and preferences of users when typing on tiny qwerty keyboards. International Journal of Human Computer Studies. 106, 44-62 (2017).
  31. Li, Y., You, F., Ji, M., You, X. Smartphone text input: effects of experience and phrase complexity on user performance, physiological reaction, and perceived usability. Applied Ergonomics. 80, 200-208 (2019).
  32. Gerard, M. J., Jones, S. K., Smith, L. A., Thomas, R. E., Wang, T. An ergonomic evaluation of the Kinesis ergonomic computer keyboard. Ergonomics. 37 (10), 1661-1668 (1994).
  33. Van Galen, G. P., Liesker, H., Haan, A. Effects of a vertical keyboard design on typing performance, user comfort and muscle tension. Applied Ergonomics. 38 (1), 99-107 (2007).
  34. Baker, N. A., Cham, R., Cidboy, E. H., Cook, J., Redfern, M. S. Kinematics of the fingers and hands during computer keyboard use. Clinical Biomechanics. 22 (1), 34-43 (2007).
  35. Soukoref, R. W., MacKenzie, I. S. Metrics for text input research: an evaluation of MSD and KSPC, and a new unified error metric. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , 113-120 (2003).
  36. Mackenzie, I. S., Soukoreff, R. W. Phrase sets for evaluating text entry techniques. CHI’03 Extended Abstracts on Human Factors in Computing Systems. , 754-755 (2003).
  37. Trudeau, M. B., Sunderland, E. M., Jindrich, D. L., Dennerlein, J. T., Federici, S. A data-driven design evaluation tool for handheld device soft keyboards. Plos One. 9 (9), 107070 (2014).
  38. Cao, S., Ho, A., He, J. Modeling and predicting mobile phone touchscreen transcription typing using an integrated cognitive architecture. International Journal of Human-Computer Interaction. 34 (4-6), 544-556 (2018).

Play Video

Cite This Article
Wang, Y., Wang, K., Huang, Y., Wu, D., Wu, J., He, J. An Assessment Method and Toolkit to Evaluate Keyboard Design on Smartphones. J. Vis. Exp. (164), e61796, doi:10.3791/61796 (2020).

View Video