大型仪器设备开放共享网络平台

主要规格及技术指标

沉浸式音视频信号采集编辑层应包含心形指向、全向指向、环形/线性阵列以及2H1V阵列MIC，频率响应范围低频在20~40Hz，高频在16~20KHz；室内人员定位及拾音具备100 万像素 ToF摄像头、1200 万像素以上RGB 摄像头、3D 电子加速度计和 3D 电子陀螺仪。沉浸式场景分析处理部分中的高性能虚拟现实图形工作站包含双路 Xeon Gold 4210（或以上）处理器，TESLA GV100 × 1 + TESLA V100 (s)× 3的GPU以及不低于512GB的内存和不小于16TB的服务器硬盘。MR设备包含透明全息透镜（波导）、2台红外和4台可见光传感器的头部追踪模块、5声道麦克风阵列、全息密度：>2.5k 辐射点、1-MP ToF的深度传感器，加速度计、陀螺仪、磁强计等；耳机耳放设备功率支持正常12 W、最大18 W，采样频率384 kHz，其中高阻抗耳机阻抗300Ω，频率响应为6 -48000Hz (-10dB)。

主要附件及配置

SennheiserHDV820+HD820+HD660S、Dell PowerEdge R7525+R740XD、NOITOM HI5、Microsoft Azure Kinect DK/HoloLens 2、DBR DM321A、Jabra Speak 510+ MS、Core Sound Oc

主要功能及特色

沉浸式三维音频智能分析展示系统，包括三大组成部分：音频信号采集部分、场景分析处理部分、沉浸式音频呈现部分。可以实现对三维音频感知全消声实验室的提升，建立强真实感的三位音视频协同呈现环境，实现超过现有设备的沉浸感，以适应科研和学术交流的需要。音视频采集层通过功性能麦克风阵列及音频工作站采集系统进行采集，其中集成二阶麦克风阵列的声散数据，深度摄像头及头部捕捉系统运动位置达到视频数据采集，数据处理层主要利用移动互联及平台的联通性和灵敏性，达到数据实时采集，实时处理展示的效果。音视频沉浸式展示层主要利用目前的AR MR技术，以及5G网络的高速性，实时进行展示分享。