該系統(tǒng)主要由智能腦機(jī)支撐平臺、頭戴式眼動設(shè)備、力反饋及人體動作采集系統(tǒng)、大屏幕多點(diǎn)觸控環(huán)境、語音交互、基于攝像頭的人體動作采集及交互環(huán)境、頭部跟蹤和視覺手勢識別及交互環(huán)境組成，如下圖所示。包含觸摸屏交互、語音交互、基于攝像頭的人體動作采集及交互、頭部跟蹤與手勢交互環(huán)境、VR/AR設(shè)備。