Hololens全息应用常用的API对应能力

注意：官方的实例用的是C++代码，打开研究模式，会减少Hololens的安全性和电池性能。

InteractionManager

Custom Data Channels with Holographic Remoting and the OpenXR API 本文是根据官方示例的学习笔记 https://docs.microsoft.com/en-us/windows/mixed-reality/develop/native/holographic-remoting-custom-data-channels-openxr 自定义数据时需要先取消注释 // #define ENABLE_CUSTOM_DATA_CHANNEL_SA

文章目录综述大纲主传感器读取循环传感器类型相机传感器惯性传感器传感器坐标帧传感器传感器帧VLC帧载荷AHAT和长抛摄像机帧载荷长抛失效AHAT无效IMU帧载荷同意提示设置要求清单条目API参考设备接口传感器接口传感器帧同意接口 综述 第一代 HoloLens 引入了研究模式，研究不用于部署访问设备上的关键传感器的应用程序。HoloLens2 的研究模式保留了 HoloLens1 的功能，增加了对额外流的访问。同样，对于第一个版本，可以从以下输入中收集数据: 可见光环境跟踪摄像机-系统用于头部跟踪和地图创建

软件功能仿照微软Dynamics 365 Remote Assist。 软件预览 https://www.bilibili.com/video/BV1Vq4y1T7t5/ 功能原理 1、首先PC端或者专家端软件通过网络传输协议获取Hololens的实时画面。 2、Hololens 提供的实时画面中包含了该画面的空间坐标数据。这些数据Hololens有提供的API接口。 3、专家端开始标注时，将标记的屏幕坐标数据转换成该画面时Hololens中的空间坐标数据，并将坐标本身信息通过网络回传给Holo

通过Hololens提供的 Rest API可以对Hololens进行远程控制和获取信息，可以通过第三方程序对Hololens重启或者关机，当然，还有更多更丰富的API，例如可以在PC上分流显示Hololens设备看到的画面， 浏览器敲入 http://127.0.0.1/api/holographic/stream/live.mp4 即可分流显示Hololens画面，注意模拟器是...

使用USB连接HoloLens，首先输入网址此时可能会出现的问题是，浏览器无法连接到设备，这通常是由于缺少win10 SDK，影响HoloLens及Windows 浏览器的连接；解决方法如下：手动安装win10 SDK到VS2017的安装目录下，使用默认路径安装安装完成后，顺利连接...

Enabling the capability for Photo Video Camera 启用相机能力   为了使用摄像头，我们必须启用WebCam能力。 在Unity中打开Player settings 展开Windows Store标签页 在"Publishing Settings > Capabilities"部分勾选WebCam能力   同一时刻只能执行...

用凝视做交互

在U3D 开发适用于 Hololens 的 UWP 平台的 语音识别功能。 U3D 的UWP 不支持比如`FileStream`,` Directory`,` File类取读写文件。 U3D Hololens的中文语音识别。

关于hololens中全息物体在现实空间中的定位，是微软在kinect的基础上的一个坐标系统。 根据hololens与unity 3D开发的过程，发现unity 3D中的具有两个坐标系统，一个是绝对（世界）坐标，一个为相对（局部）坐标。绝对世界坐标可以理解为hololens中的人体头部到全息物体之间的坐标系统。基本上在unity 3D中设置绝对坐标的话，我们利用两者开发的全息物体就会随着人体的头部