Summary

スマートフォンでのキーボード設計評価の評価方法とツールキット

Published: October 05, 2020
doi:

Summary

提示されたプロトコルは、さまざまな評価方法を統合し、スマートフォンでキーボードの設計を評価する方法を示しています。英字で一致するペアが入力材料として提案され、2つのキー間の遷移時間が従属変数として使用されます。

Abstract

キーボード入力は、膨大なユーザーベースとの人間とコンピュータの相互作用に不可欠な役割を果たしており、キーボードの設計は常にスマートデバイスに関する研究の基本的なオブジェクトの1つとなっています。スクリーン技術の開発により、より正確なデータと指標をスマートフォンで収集し、キーボードの設計を詳細に評価することができました。携帯電話の画面の拡大は、特に片手入力のために、不十分な入力経験と指の痛みにつながっています。入力効率と快適さが研究者やデザイナーの注目を集めており、親指の生理学的構造とほぼ一致するサイズ調整可能なボタンを備えた湾曲したキーボードは、大画面スマートフォンでの片手使用を最適化するために提案されました。しかし、その本当の効果はあいまいなままでした。そこで、このプロトコルは、5インチスマートフォンにおける曲面型QWERTYキーボード設計の効果を、客観的な行動データ、主観的フィードバック、各タッチポイントの座標データなどの詳細な変数を持つ自己開発ソフトウェアを通じて評価する一般的かつ要約的な方法を実証しました。仮想キーボードの評価には十分な既存の文献があります。しかし、そのうちのほんの一部だけが体系的に要約し、評価方法とプロセスを反映しました。したがって、このプロトコルはギャップを埋め、分析と可視化のために利用可能なコードを持つキーボード設計の体系的な評価のプロセスと方法を提示します。それは追加または高価な装置を必要としないし、実施し、作動しやすい。さらに、このプロトコルは、設計の欠点の潜在的な理由を得るのに役立ち、設計の最適化を啓発します。結論として、オープンソースのリソースを持つこのプロトコルは、初心者に研究を開始するよう促すクラス内実証実験であるだけでなく、ユーザーエクスペリエンスと入力方式エディタ企業の収益の向上にも貢献する可能性があります。

Introduction

キーボード入力は、人間とスマートフォンの相互作用の主流の方法である 1,2, スマートフォンの普及に伴い, キーボード入力は、ユーザーの数十億を取得します.2019年の世界のスマートフォン普及率は41.5%3に達し、最も普及率が高い米国は79.1%4に達した。2020年第1四半期まで、Sogouモバイルキーボードは、毎日約4億8000万人のアクティブユーザー5を持っていました。2020年5月6日まで、Google Gboardは10億回以上6回ダウンロードされていました。

携帯電話の画面の拡大に伴って、不十分なキーボード入力の経験が増加します。拡大画面は視聴体験の向上を目的としたものの、スマートフォンの重力、サイズ、重量が変化し、ユーザーが遠隔地(右手のユーザー向けのボタンAやQなど)に到達するように姿勢を繰り返し変更し、入力の非効率性を引き起こします。筋肉のストレッチは、筋骨格系障害、手の痛み、および異なるタイプの疾患(例えば、手根管症候群、親指変形性関節症、および親指テノソノビティス7、8、9、10)に苦しむ可能性があります。片手で使用を好むユーザーは、より悪い条件の下で 11,12.

そのため、キーボード設計の評価と最適化は、心理学的、技術的、人間工学的研究のホットな話題となっています。可変的なキーボード設計と概念は、入力操作性を最適化するために入力操作性と効率を最適化するために、常に提案されてきました。

キーボード設計の既存の評価方法は、いくつかの高い評価指標を除いて研究者によって異なり、より正確な指標が提案されています。しかし、さまざまな指標では、キーボード設計の評価と分析のプロセスを実証するために提供される要約された体系的なプロトコルはありません。フィットの法則17と人間とコンピュータの相互作用を記述したその拡張バージョン FFitts 法18は広くキーボードのパフォーマンスを評価するために採用されました19,20,21,22.また、親指の機能領域はキーボード設計を改善するために提案され、入力タスク23を快適に完了させる親指の湾曲運動領域を説明した。これらの理論に基づいて、1分あたりの単語、単語エラー率、および主観的フィードバック(知覚されたユーザビリティ、知覚されたパフォーマンス、知覚された速度、主観的な作業負荷、知覚された運動と痛み、および使用する意図など)を含む指標は、以前の研究24、25、26、27、28、29で部分的に使用されました。 モデリングとシミュレーションの方法を除く。また、タッチポイントのフィット楕円を各ボタンとそのオフセット30,31に合わせて入力イベントの正確な性能を調査するために近年使用されました。また、ガルバニック皮膚応答、心拍数、筋電図活動、手のジェスチャー、および身体運動32、33、34、35は、直接的または間接的にユーザーの筋肉疲労、快適性、および満足度を評価するために採用された。しかし、これらの様々な方法は、使用される指標の適切性に反映されていない、と初心者の研究者は、彼または彼女の研究のための適切な指標を選択するために混乱する可能性があります。

キーボード設計に関する研究も容易に行い、操作し、分析することができます。画面技術のブームにより、より多くの行動データを簡単に収集してキーボード設計を詳細に評価することができます(例えば、2つのキー間の遷移時間と各タッチポイントの座標データ)。上記のデータに基づいて、研究者はキーボード設計の詳細を正確に探求し、その欠点と利点を分析することができました。他の人とコンピュータの相互作用研究と比較すると、ポータブルスマートフォンのキーボード設計の研究は、高価な機器、複雑な材料、または必要な巨大な実験室スペースを持たない広大なユーザーベースのための高いアプリケーション価値を持っています。調査に関するアンケート、スケール、および Python スクリプトはオープンソースで、簡単にアクセスできます。

本研究の目的は、スマートフォンでのキーボード設計を評価し分析するための体系的、正確、一般的なプロトコルを実証するための、これまでの方法を要約することです。例示的な実験と結果は、サイズ調整可能なボタンを備えた湾曲したQWERTYキーボードが、従来のQWERTYキーボードと比較して5インチスマートフォン上の片手入力の入力体験を最適化できるかどうかを示し、データ分析の視覚化方法とPythonスクリプトを共有することを目的としています。

Protocol

この研究は倫理原則に従って実施され、清華大学倫理委員会によって承認されました。 図1 は、スマートフォンのキーボード設計を評価するプロセスを示しています。 図1:キーボード実験を行い、キーボード設計を評価する一般的なプロセス<a href="…

Representative Results

代表的な研究は、主に、上記のプロトコルに従っています。この研究では、2(キーボードレイアウト:湾曲QWERTY対伝統的なQWERTY)×2(ボタンサイズ:大きく、6.3mm×9mm対小、4.9mm×7mm)を採用し、曲面QWERTYが従来のQWERTYと比較して従来のQWERTYと比較して入力効率と快適性を向上させることができるかどうかを評価します。).この研究は、高価な生理学的検出器装置やモーションキ?…

Discussion

本研究では、スクリーン技術の発展に基づき、キーボード設計評価の概要と一般的なプロトコルを提示し、キーボード設計を体系的かつ正確に評価した。これまでの研究の既存の指標とメソッド、英語の文字と一致するペア、および2つのキー間の遷移時間が統合され、効果的なプロトコルを生成するように変更されます。

このプロトコルでは、いくつかの重要なポイン?…

Disclosures

The authors have nothing to disclose.

Acknowledgements

この研究は、清華大学イニシアチブ科学研究プログラム(スマートデバイス上の湾曲したキーボードのエルゴノミックデザイン)によって支えられている。著者らは、彼の親切な提案と数字に対するコーディング支援のために天友劉を高く評価している。

Materials

Changxiang 6S smartphone Huawei Smartphone used in the examplar study
Curved QWERTY keyboard software Tsinghua University Developed by authors
SPSS software IBM Data analysis software
G*Power software Heinrich-Heine-Universität Düsseldorf Sample size calculation
E4 portable wireless wristband Empatica Recording galvanic skin response and heart rate
Arqus Qualysis Motion capture camera platform
Passive marker Qualysis Appropriate sizes: 2.5 mm, 4 mm, and 6.5 mm
Trigno sEMG Delsys Recording electromyographic activity
Visual Studio Code Microsoft Python editor

References

  1. Lee, S., Zhai, S. The performance of touch screen soft buttons. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , (2009).
  2. Smith, B. A., Bi, X., Zhai, S. Optimizing touchscreen keyboards for gesture typing. Proceedings of the 33rd Annual ACM Conference on Human Factors in Computing Systems. , (2015).
  3. . Global smartphone penetration rate as share of population from 2016 to 2020 [Fact sheet] Available from: https://www.statista.com/statistics/203734/global-smartphone-penetration-per-capita-since-2005 (2020)
  4. Top Countries by Smartphone Users [Fact sheet]. Newzoo Available from: https://newzoo.com/insights/rankings/top-countries-by-smartphone-penetration-and-users (2019)
  5. Gboard – the Google Keyboard [Press release]. Google Play Available from: https://play.google.com/store/apps/details?id=com.google.android.inputmethod.latin (2020)
  6. Eitivipart, A. C., Viriyarojanakul, S., Redhead, L. Musculoskeletal disorder and pain associated with smartphone use: A systematic review of biomechanical evidence. Hong Kong Physiotherapy Journal. 38 (2), 77-90 (2018).
  7. Chang, J., Choi, B., Tjolleng, A., Jung, K. Effects of button position on a soft keyboard: Muscle activity, touch time, and discomfort in two-thumb text entry. Applied Ergonomics. 60, 282-292 (2017).
  8. Gehrmann, S. V., et al. Motion deficit of the thumb in CMC joint arthritis. Journal of Hand Surgery. 35 (9), 1449-1453 (2010).
  9. Kim, G., Ahn, C. S., Jeon, H. W., Lee, C. R. Effects of the Use of Smartphones on Pain and Muscle Fatigue in the Upper Extremity. Journal of Physical Therapy Science. 24 (12), 1255-1258 (2012).
  10. Girouard, A., et al. One-handed bend interactions with deformable smartphones. Proceedings of the 33rd annual ACM conference on human factors in computing systems. , (2015).
  11. Lee, M., Hong, Y., Lee, S., Won, J., Yang, J., Park, S. The effects of smartphone use on upper extremity muscle activity and pain threshold. Journal of Physical Therapy Science. 27 (6), 1743-1745 (2015).
  12. Word Flow keyboard [Press release]. Microsoft Garage Available from: https://www.microsoft.com/en-us/garage/profiles/word-flow-keyboard/ (2020)
  13. The glory of kings [Press release]. Tencent Games Available from: https://pvp.qq.com/ (2020)
  14. Bi, X., Zhai, S. Ijqwerty: what difference does one key change make? Gesture typing keyboard optimization bounded by one key position change from qwerty. Proceedings of the 2016 CHI Conference on Human Factors in Computing Systems. , (2016).
  15. Bi, X., Smith, B. A., Zhai, S. Quasi-qwerty soft keyboard optimization. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , (2010).
  16. Fitts, P. The information capacity of the human motor system is controlled by the amplitude of movement. Journal of Experimental Psychology. 47, 381-391 (1954).
  17. Bi, X., Li, Y., Zhai, S. FFitts law: modeling finger touch with fitts’ law. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , (2013).
  18. Dunlop, M., Levine, J. Multidimensional pareto optimization of touchscreen keyboards for speed, familiarity and improved spell checking. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , (2012).
  19. Li, Y., Chen, L., Goonetilleke, R. S. A heuristic-based approach to optimize keyboard design for single-finger keying applications. International Journal of Industrial Ergonomics. 36 (8), 695-704 (2006).
  20. Benligiray, B., Topal, C., Akinlar, C. SliceType: fast gaze typing with a merging keyboard. Journal on Multimodal User Interfaces. 13 (4), 321-334 (2019).
  21. Wang, Y., Ai, H., Liang, Q., Chang, W., He, J. How to optimize the input efficiency of keyboard buttons in large smartphone? A comparison of curved keyboard and keyboard area size [Conference presentation]. International Conference on Human-Computer Interaction. , (2019).
  22. Bergstrom-Lehtovirta, J., Oulasvirta, A. Modeling the functional area of the thumb on mobile touchscreen surfaces. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , (2014).
  23. Brooke, J. SUS: A retrospective. Journal of Usability Studies. 8 (2), 29-40 (2013).
  24. Borg, G. Principles in scaling pain and the Borg CR Scales. Psychologica. 37, 35-47 (2004).
  25. Hart, S. G., Staveland, L. E., Hancock, P. A., Meshkati, N. Development of NASA-TLX (task load index): results of empirical and theoretical research. Human mental workload. , 139-183 (1988).
  26. Trudeau, M. B., Asakawa, D. S., Jindrich, D. L., Dennerlein, J. T. Two-handed grip on a mobile phone affords greater thumb motor performance, decreased variability, and a more extended thumb posture than a one-handed grip. Applied Ergonomics. 52, 24-28 (2016).
  27. Turner, C. J., Chaparro, B. S., He, J. Text input on a smartwatch qwerty keyboard: tap vs. trace. International Journal of Human Computer Interaction. 33 (1-3), 143-150 (2017).
  28. Zhai, S., Kristensson, P. O. The word-gesture keyboard: reimagining keyboard interaction. Communications of the ACM. 55 (9), 91-101 (2012).
  29. Azenkot, S., Zhai, S. Touch behavior with different postures on soft smartphone keyboards. Proceedings of the 14th international conference on Human-computer interaction with mobile devices and services. , (2012).
  30. Yi, X., Yu, C., Shi, W., Shi, Y. Is it too small?: Investigating the performances and preferences of users when typing on tiny qwerty keyboards. International Journal of Human Computer Studies. 106, 44-62 (2017).
  31. Li, Y., You, F., Ji, M., You, X. Smartphone text input: effects of experience and phrase complexity on user performance, physiological reaction, and perceived usability. Applied Ergonomics. 80, 200-208 (2019).
  32. Gerard, M. J., Jones, S. K., Smith, L. A., Thomas, R. E., Wang, T. An ergonomic evaluation of the Kinesis ergonomic computer keyboard. Ergonomics. 37 (10), 1661-1668 (1994).
  33. Van Galen, G. P., Liesker, H., Haan, A. Effects of a vertical keyboard design on typing performance, user comfort and muscle tension. Applied Ergonomics. 38 (1), 99-107 (2007).
  34. Baker, N. A., Cham, R., Cidboy, E. H., Cook, J., Redfern, M. S. Kinematics of the fingers and hands during computer keyboard use. Clinical Biomechanics. 22 (1), 34-43 (2007).
  35. Soukoref, R. W., MacKenzie, I. S. Metrics for text input research: an evaluation of MSD and KSPC, and a new unified error metric. Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. , 113-120 (2003).
  36. Mackenzie, I. S., Soukoreff, R. W. Phrase sets for evaluating text entry techniques. CHI’03 Extended Abstracts on Human Factors in Computing Systems. , 754-755 (2003).
  37. Trudeau, M. B., Sunderland, E. M., Jindrich, D. L., Dennerlein, J. T., Federici, S. A data-driven design evaluation tool for handheld device soft keyboards. Plos One. 9 (9), 107070 (2014).
  38. Cao, S., Ho, A., He, J. Modeling and predicting mobile phone touchscreen transcription typing using an integrated cognitive architecture. International Journal of Human-Computer Interaction. 34 (4-6), 544-556 (2018).

Play Video

Cite This Article
Wang, Y., Wang, K., Huang, Y., Wu, D., Wu, J., He, J. An Assessment Method and Toolkit to Evaluate Keyboard Design on Smartphones. J. Vis. Exp. (164), e61796, doi:10.3791/61796 (2020).

View Video