RESEARCH ON THE MULTIMODAL FRAMEWORK OF VR ORAL CLASS UNDER THE THEORY OF EMBODIED COGNITION

Traditional spoken language teaching and existing VR applications often ignore the central role of the body in language learning. This study proposes and constructs a multimodal interaction framework for VR speaking classes based on embodied cognition theory. By integrating multimodal channels such as language, movement, vision, and touch, we support learners to actively participate in language input, meaning construction, and output interactions through their bodies. This study is dedicated to bridging the gap between theory and practice, and promoting the development of a new paradigm of immersive oral language learning centered on learners' bodies.

Традиционное обучение устной речи и существующие приложения виртуальной реальности часто игнорируют центральную роль тела в изучении языка. В этом исследовании предлагается и конструируется система мультимодального взаимодействия для занятий разговорной речью в виртуальной реальности, основанная на теории воплощенного познания. Интегрируя мультимодальные каналы, такие как язык, движение, зрение и осязание, мы помогаем учащимся активно участвовать в языковом вводе, конструировании смысла и выводе информации посредством своего тела. Это исследование посвящено преодолению разрыва между теорией и практикой и содействию развитию новой парадигмы иммерсивного изучения устной речи, ориентированной на тело обучаемого.