Summary

制御工学教育に応用されたオンラインバーチャルリアリティネットワーク制御実験室

Published: February 23, 2024
doi:

Summary

この研究では、VRデバイスがサポートする没入型でインタラクティブな実験機能をユーザーに提供する、WebVRベースのオンライン仮想現実(VR)ラボラトリーシステムについて説明します。提案されたシステムは、オンライン実験へのユーザー参加のリアリズムを高めるのに役立つだけでなく、幅広いオンラインラボフレームワークにも適用できます。

Abstract

オンラインラボは、工学教育において重要な役割を果たしています。この作業では、WebVRベースの仮想実験室システムについて説明します。ユーザーは、仮想現実(VR)デバイスを介してシミュレートされた実験室環境に入り、物理的な実験室での実践的な実験と同様に、実験装置と対話します。さらに、提案されたシステムでは、ユーザーは独自の制御アルゴリズムを設計し、さまざまな制御パラメータの影響を観察して、実験の理解を深めることができます。提案された仮想実験室の特徴を説明するために、この論文では、二重倒立振り子システムの実験である例が示されています。実験結果は、提案されたシステムが、ユーザーが没入型でインタラクティブな方法で実験を行うことを可能にし、ユーザーにプリンシパルデザインから実験操作までの完全な実験プロセスを提供することを示しています。また、あらゆるバーチャルラボを教育やトレーニングのためのWebVRベースのバーチャルラボに変えるソリューションも提供されています。

Introduction

インターネットの進歩とモバイルデバイスの人気に伴い、オンライン教育の需要が高まっています1。特に、流行が蔓延している時期には、従来の教育機関は対面式の指導を効果的に行う上で課題に直面することが多く、これは重要な教育的アプローチとしてのオンライン教育の重要性を浮き彫りにしています2。理論コースは、オンラインプラットフォームに比較的簡単に移行できます。これらは、リモートビデオ会議ソフトウェアや大規模公開オンラインコース(MOOC)3などのツールを使用して実施できます。しかし、実践的なコースでは、従来の研究室で実践的な実験を行う必要があるため、より大きな課題に直面しています。

研究者は、実験装置をオンラインで利用できるようにするという課題に取り組むために多大な貢献をしてきました。過去20年間にわたり、オンラインラボ4,5の概念と技術について広範な研究が行われてきました。オンラインラボには、通常、リモートラボ6、バーチャルラボ7、およびハイブリッドラボ8が含まれます。これらのオンラインラボアプローチは、制御工学9、機械工学10、ソフトウェア工学11など、さまざまな工学分野で広く応用されています。

オンラインラボ12での実験操作の利便性の点では大きな進歩が見られましたが、ユーザーは従来のラボ環境と比較して、リアリズムや同様の実践的な操作が不足していると依然として感じており、これが全体的なエクスペリエンス13に影響を与えています。このユーザーエクスペリエンスの不一致は、オンラインラボ環境でのリアリズムとエンゲージメントを強化するためのさらなる研究開発の取り組みを動機付けています。

上記の問題を解決するために、バーチャルリアリティ(VR)技術がバーチャルラボ14 に適用され、バーチャルラボ15の没入感と双方向性が向上した。VRベースのバーチャルラボは、ユーザーに現実に近い実験体験を提供します。ユーザーは、アバター16を通じて建築教育プロセスのグループ課題を完了することができ、従来の教室環境と同じように、建築測量プロセスを没入型で一緒に実行できます。さらに、VRベースの仮想実験室は、ユーザーが仮想実験室の没入型環境に入り、VRヘッドセットとハンドル17を装着して仮想実験装置と対話することを可能にし、ユーザーの実践能力18を向上させる。さまざまな教育目的のために、さまざまな仮想環境を設計できます。例えば、VRをゲーミフィケーション理論と組み合わせることで、一般市民向けの工学教育を充実させ、持続可能な開発などの理解しにくい知識の普及効率を向上させることができる19

オンラインラボ、特にバーチャルラボと同様に、WebVRベースのバーチャルラボには多くの利点があります。まず、従来の実験室の時間とスペースの制限を打ち破り、ユーザーはいつでもどこでも実験を行うことができます20。第二に、オンラインラボは、実験操作21で起こりうる危険や事故を回避するために、より安全な実験環境を提供できる。第三に、仮想実験室は、ユーザーの実験範囲と経験を拡大するために、より多くの実験リソースとシミュレーション状況を提供することもできます22。最も重要なことは、WebVRベースの仮想実験室は、ユーザーの学習関心とイニシアチブを刺激し、実験経験と参加を向上させることができるということである23

他のVRベースのバーチャルラボと比較して、WebVRベースのバーチャルラボは、VRベースのバーチャルラボとWebベースのオンラインラボのメリットをシームレスに組み合わせています。Virtual Instrument Systems in Reality(VISIR)24 は、実際の回路基板を構築することにより、基本的なアナログ電子リモートラボを構築します。ユーザーは、Webインターフェースでシミュレートされた実験を実行して、実際の回路基板の実験を完了することができます。Weblab-Deusto8 は、ユーザーが他のプラグインに頼らずにWebプラットフォーム内の水タンクの3次元(3D)モデルを操作できる、水タンクField Programmable Gate Array(FPGA)ラボを構築します。このホワイトペーパーで提案されているシステムは、WebVRをモジュラーコンポーネントとして既存の仮想ラボインフラストラクチャにシームレスに統合する機能を導入しています。この統合は、実験室の元の建築フレームワークを破壊することなく達成できるため、実験室の基本構造と機能が維持されます。この統合は、フロントエンドとバックエンドが分離されたオンラインラボのフレームワークにも適用できます。

本稿で提案するシステムは、NCSLabシステムの柔軟性、双方向性、モジュール性、およびクロスプラットフォーム機能を継承したNetworked Control System Laboratory(NCSLab)25に基づいて実装されています。ユーザーは、さまざまなモジュールに従って実験を行うことができ、アルゴリズムや設定インターフェースをカスタマイズすることもでき、自己実現のための十分なスペースをユーザーに提供できます。オンライン実験は、ユーザーが実行したアルゴリズムに従ってリアルタイムで実行されます。ユーザーは、VR実験を行う際に仮想モデルと対話して実験アルゴリズムの入力を変更したり、コンポーネントを介して制御アルゴリズムのパラメータを変更したりできるため、ユーザーは制御アルゴリズムの原理をよりリアルに体験できます。

WebVRベースの仮想実験室は、オンライン教育に大きな可能性をもたらします。没入型の実験体験を提供し、従来の実験室の限界を克服し、ユーザー間で実践的な実践スキルと革新的な思考を促進することができます。

Protocol

この研究は、武漢大学の人間研究倫理委員会のガイドラインを満たしており、すべての実験データについてインフォームドコンセントが得られました。この論文では、二重倒立振子システムの実験ステップについて説明し、すべてのステップをWebVRベースのNCSLabで実行します。 1. WebVRベースのNCSLabシステムにアクセスする WebVRをサポートするWebブラウ?…

Representative Results

今回紹介するVR実験システムは、VRデバイスを用いた没入型実験を行うことで、ユーザーと実験装置とのインタラクションを強化するものです。さらに、システムはWebベースであるため、ユーザーがローカル環境を構成する必要がありません。この設計により、システムのスケーラビリティが確保され、大規模なアプリケーションやトレーニング、教育目的に適しています。 <p class="jove_cont…

Discussion

提示されたプロトコルは、ユーザがオンラインでVR実験を行うことを可能にするが、また、大規模なアプリケーションの推進を助長する低コストのPCコントローラ28を使用することを可能にする仮想実験室システムを説明する。ユーザーは、原理やアルゴリズムから実際の実験操作まで、実験プロセス全体についての知識を得ることができます。このシステムにより、ユーザ?…

Disclosures

The authors have nothing to disclose.

Acknowledgements

この研究は、一部は中国国家自然科学基金会(National Natural Science Foundation of China Under Grant 62103308 and Grant 62073247)、一部はGrant 2042023kf0095、一部はChina Postdoctoral Science Foundation(中国ポスドク科学基金会)のGrant 2022T150496、一部はWuhan University Experiment Technology Project Funding(WHU-2022-SYJS-10)の支援を受けました。

Materials

3DS Max Autodesk 3ds Max professional 3D modeling, rendering, and animation software enables you to create expansive worlds and premium designs.
https://www.autodesk.com/ca-en/products/3ds-max/overview
Meta Quest 2 Meta Platforms 10036728220341 meta quest 2 is a standalone virtual reality headset that allows users to experience WebVR content.
https://www.meta.com/it/quest/products/quest-2/
Unity Unity Technologies Unity is the platform for real-time 3D interactive content creation and operation.
All creators, including game developers, artists, architects, automotive designers, film and television, use Unity to bring their ideas to life.
The Unity platform offers a complete suite of software solutions for creating, operating, and realizing any real-time interactive 2D and 3D content
on cell phones, tablets, PCs, game consoles, augmented reality, and virtual reality devices.
https://unity.com/cn

References

  1. Martin, F., Sun, T., Westine, C. D. A systematic review of research on online teaching and learning from 2009 to 2018. Comput Educ. 159, 104009 (2020).
  2. Al-Nsour, R., Alkhasawneh, R., Alqudah, S. Online engineering education: Laboratories during the pandemic – A case study. 2022 Intermountain Eng, Tech Comp. , 1-4 (2022).
  3. Chirikov, I., Semenova, T., Maloshonok, N., Bettinger, E., Kizilcec, R. F. Online education platforms scale college stem instruction with equivalent learning outcomes at lower cost. Sci Adv. 6 (15), (2020).
  4. Gamage, K. A. A., et al. Online delivery of teaching and laboratory practices: continuity of university programmes during covid-19 pandemic. Educ Sci. 10 (10), 291 (2020).
  5. Kefalis, C., Drigas, A. Web based and online applications in stem education. Int J Eng Pedagogy. 9 (4), 76-85 (2019).
  6. Maiti, A., et al. A framework for analyzing and evaluating architectures and control strategies in distributed remote laboratories. IEEE Trans Learn Technol. 11 (4), 441-455 (2018).
  7. Liang, Y., Liu, G. Design of large scale virtual equipment for interactive hil control system laboratories. IEEE Trans Learn Technol. 11 (3), 376-388 (2018).
  8. Rodriguez-Gil, L., Garcia-Zubia, J., Orduna, P., Lopez-De-Ipina, D. Towards new multiplatform hybrid online laboratory models. IEEE Trans Learn Technol. 10 (3), 318-330 (2017).
  9. Chevalier, A., Copot, C., Ionescu, C., De Keyser, R. A three-year feedback study of a remote laboratory used in control engineering studies. IEEE Trans Educ. 60 (2), 127-133 (2017).
  10. Wang, N., et al. A novel wiki-based remote laboratory platform for engineering education. IEEE Trans Learn Technol. 10 (3), 331-341 (2017).
  11. Cruz-Benito, J., et al. Usalpharma: a software architecture to support learning in virtual worlds. IEEE Revista Iberoamericana De Tecnologias Del Aprendizaje. 11 (3), 194-204 (2016).
  12. Letowski, B., Lavayssière, C., Larroque, B., Schröder, M., Luthon, F. A fully open source remote laboratory for practical learning. Electronics. 9 (11), 1832 (2020).
  13. Potkonjak, V., et al. Virtual laboratories for education in science, technology, and engineering: a review. Comput Educ. 95, 309-327 (2016).
  14. Rukangu, A., Tuttle, A., Johnsen, K. Virtual reality for remote controlled robotics in engineering education. IEEE Conference on Virtual Reality and 3D User Interfaces Abstracts and Workshops (VRW). , 751-752 (2021).
  15. Sermet, Y., Demir, I. Geospatialvr: a web-based virtual reality framework for collaborative environmental simulations. Comput Geosci. 159, 105010 (2022).
  16. zacar, K., Ortakcı, Y., Küçükkara, M. Y. VRArchEducation: Redesigning building survey process in architectural education using collaborative virtual reality. Comp Graph. 113, 1-9 (2023).
  17. Li, Y., Lei, Z., He, Y., Liu, Z. A virtual simulation experiment of mechanics: material deformation and failure based on scanning electron microscopy. J Vis Exp. (191), e64521 (2023).
  18. Alsaleh, S., Tepljakov, A., Kose, A., Belikov, J., Petlenkov, E. Reimagine lab: bridging the gap between hands-on, virtual and remote control engineering laboratories using digital twins and extended reality. IEEE Access. 10, 89924-89943 (2022).
  19. Han, B., Weeks, D. J., Leite, F. Virtual reality-facilitated engineering education: A case study on sustainable systems knowledge. Comput Appl Eng Educ. 31 (5), 1174-1189 (2023).
  20. Lei, Z., Zhou, H., Hu, W., Liu, G. Concurrent experimentation in ncslab: a scalable approach for online laboratories. Fut Gen Comp Sys. (148), 139-149 (2023).
  21. Li, W., Huang, H., Solomon, T., Esmaeili, B., Yu, L. Synthesizing personalized construction safety training scenarios for vr training. IEEE Trans Vis Comput Graph. 28 (5), 1993-2002 (2022).
  22. Zhang, Y., et al. Virtual simulation system of paste filling for green mining of metallic mine. 2020 International Conference on Virtual Reality and Visualization. , 256-257 (2020).
  23. Callaghan, M. J., Mccusker, K., Losada, J. L., Harkin, J., Wilson, S. Using game-based learning in virtual worlds to teach electronic and electrical engineering. IEEE Trans Industr Inform. 9 (1), 575-584 (2013).
  24. Garcia-Zubia, J., et al. Empirical analysis of the use of the VISIR remote lab in teaching analog electronics. IEEE T EDUC. 60 (2), 149-156 (2017).
  25. Lei, Z., Zhou, H., Hu, W., Liu, G. Unified and flexible online experimental framework for control engineering education. IEEE T Ind Electron. 69 (1), 835-844 (2022).
  26. Galan, D., Chaos, D., de la Torre, L., Aranda-Escolastico, E., Heradio, R. Customized online laboratory experiments: a general tool and its application to the furuta inverted pendulum [focus on education. IEEE Cont Sys. 39 (5), 75-87 (2019).
  27. Lei, Z., Zhou, H., Hu, W., Liu, G., Guan, S. Web-based digital twin communication system of power systems for training and education. IEEE T Pow Syst. , (2023).
  28. Lei, Z., Zhou, H., Hu, W., Liu, G. Controller effect in online laboratories-An overview. IEEE Trans. Learn. Technol. 17, 1-12 (2024).
  29. Liu, Y., et al. Virtual reality system for industrial training. 2020 International Conference on Virtual Reality and Visualization. , 338-339 (2020).
  30. Lei, Z., et al. Interactive and visualized online experimentation system for engineering education and research. J Vis Exp. (177), e63342 (2021).

Play Video

Cite This Article
Zhang, G., Lei, Z., Hu, W., Zhou, H. Online Virtual Reality Networked Control Laboratory Applied in Control Engineering Education . J. Vis. Exp. (204), e66432, doi:10.3791/66432 (2024).

View Video