针对上述需求，探索如何将AR/MR软件开发技术与云平台相结合，打造出MR操控设备、软件以及云MR操控、云MR教学和云MR远程协作场景，对教育培训、远程协作产生积极作用。

目标识别模块负责捕捉、识别、追踪AR/MR设备输入画面中的目标设备实体。模型、信息展示模块负责将目标设备的模型资产、技术参数、实时运行参数、动画资产、操作步骤资产等信息在虚拟空间的对应位置显示。模型操控模块负责操控虚拟模型，包括虚拟模型的放大、缩小，以及对于可以移动、转动的零部件的相关操作。多设备协作模块实现AR/MR设备远程通讯功能，远程一对一协作功能，以及多台AR/MR设备在同一个虚拟空间中进行协作。

应用场景开发：

①遥操控场景

云操控应用场景指向“数字孪生”概念，在虚拟空间中展示一个与真实设备同步的数字化虚拟设备模型，包括其三维模型、设备参数及运行时状态。

双臂机器人应用：查看实时数据、设备数字化、远程虚拟操控设备作业。

下肢机器人应用：MR音视频通讯、远程维修、三维可视化手册。

②教学场景

虚拟示教场景是指使用AR/MR设备，在虚拟空间中完成针对某设备的教学培训工作。

发动机构造及原理教学：3D可视化教材，还原细节、多人互动，交互共享。

EMC设备使用教学：将传统培训进行创新、提高培训效率。

■ 功能特点

1.目标设备识别及设备性能参数于虚拟场景显示

2.运用手势识别技术，手势作为人机交互控制混合场景虚拟模型的输入形式，在MR头戴式设备上实现人机交互

3.建立云操控通讯接口同步虚拟模型与真实机器人的运动路径和末端位姿

4.监测虚拟模型与真实机器人运动数据同步，提升云操控精度与安全性

5.实现多台AR/MR在同一个虚拟空间内展开协作