上海大学未来技术学院在AWE中国家电及消费电子博览会上和索尼公司共同推出基于索尼空间现实显示屏研发的“Spatial Remote”APP。该APP是我院仿真部在数字孪生领域的创新成果之一，通过“Spatial Remote”能够轻松实现数字校园、数字展厅等全息场景的无痕互动，此款APP的开发目前已得到索尼官方技术的支持，相信为用户带来更好的全息互动体验。

传统沉浸体验交互方式的弊端 

1. 头戴式VR设备带来的眩晕、出汗、佩戴繁琐等不快体验。

2. 传统平面显示设备在纵深感、沉浸感、真实感等方面的呈现差强人意。

3. 不能很好的表达出孪生物体间的空间关系。

4. 人机交互方式比较单一。

解决方案

1. 利用空间现实显示屏作为数字孪生系统的主要展示端，相较于头戴式VR设备和传统平面显示设备，提供了更好的可视体验。

2. 针对空间现实显示屏以及数字内容开发配套的APP，作为控制端，能够提供更加便捷、流畅、沉浸的人机交互体验。

Spatial Remote程序界面

开发环境、预览以及无痕互动

通过“Spatial Remote”软件展示的数字校园交互场景

全新的数字孪生呈现方式

空间现实显示屏是一种基于眼感应光场技术的立体显示设备，能够在不佩戴任何特殊眼镜或头盔的情况下，直接观察到三维立体图像。空间现实显示屏能够根据观察者的视点，实时调整光线的方向和强度，从而产生逼真的立体效果。空间现实显示屏还能够显示出图像的纵深感、透视感、视差感等，让观察者感受到真实的空间关系。通过空间现实显示屏，将校园的各个场景和建筑以数字孪生的形式展现出来，让观察者能够轻松地在虚拟和现实之间切换，感受到校园的历史、文化和风貌。

友好的人机交互体验

数字孪生是一种利用数字模型和物理实体之间的实时数据交换，实现对物理实体的动态模拟和预测的技术。数字孪生可以为各行各业提供更高效、更智能、更安全的解决方案，但同时也带来了人机交互的挑战。如何让用户能够方便地观察和控制数字孪生，是数字孪生技术的重要研究方向之一。

为了提供更友好、更流畅、更沉浸的人机交互体验，未来技术学院仿真部开发了“Spatial Remote” APP作为控制端，通过手机或平板电脑与空间现实显示屏进行无线或有线连接。通过“Spatial Remote”，观察者可以自由地选择想要观看的场景和角度，同时也可以对场景进行缩放、旋转、移动等操作，让观察者可以用自然的方式与数字孪生进行互动和控制。

“Spatial Remote” APP的设计理念是基于用户的需求和习惯，提供简单易用、直观高效、灵活多样的人机交互方式。APP的界面设计采用了清晰明了的图标和文字，以及统一协调的色彩和风格，让用户能够快速地找到所需的功能和信息。APP的交互设计采用了多种手势识别和触摸控制技术，让用户能够通过轻松地滑动、点击、捏合等动作，来完成对数字孪生的观察和控制。

未来展望

未来技术学院成功研发的全息数字校园技术，是虚拟现实技术在教育领域的一次创新性应用，也是数字孪生技术在可视化方面的一次突破性进展。该技术不仅为上海大学的教育创新提供了有力支撑，也为虚拟现实技术在其他领域的应用拓展了新的可能性。未来，上海大学将继续探索空间现实显示屏和数字孪生技术的相结合的道路，开发出更多具有创意和价值的应用场景，为社会和经济发展做出贡献。

未来技术学院将持续和sony就空间现实显示等新兴技术展开深入的合作，欢迎广大志同道合的朋友加入我们一起学习与研究。仿真部：13122335321或邮箱mfs@shu.edu.cn。