基于认知负荷控制三维场景构建的方法及系统与流程

本公开涉及计算机，尤其涉及一种基于认知负荷控制三维场景构建的方法及系统。

背景技术：

1、扩展现实(extended reality，简称xr)，是指通过计算机将真实与虚拟相结合，打造一个可人机交互的虚拟环境，这也增强现实(augmented reality，简称ar)、虚拟现实(virtual reality，简称vr)、混合现实(mix reality,简称mr)等多种技术的统称。

2、目前，用户在使用扩展现实产品的过程中，由于视觉疲劳、活动强度等因素容易造成认知负荷大幅提升进而影响使用体验。

技术实现思路

1、有鉴于此，本公开的目的在于提出一种基于认知负荷控制三维场景构建的方法及系统。

2、基于上述目的，第一方面，本公开提供了基于认知负荷控制三维场景构建的方法，所述方法包括：

3、响应于头戴式显示设备处于工作状态，获取第一脑电信号，并基于所述第一脑电信号确定认知负荷水平；

4、根据预设匹配规则和所述认知负荷水平，确定用于构建三维场景的特征点数量；

5、获取所述头戴式显示设备所处的环境图像；

6、根据预设特征点检测算法、所述环境图像和所述特征点数量，确定特征点集合，以使根据所述特征点集合构建的三维场景能够调节所述认知负荷水平。

7、第二方面，本公开提供了基于认知负荷控制三维场景构建的系统，所述系统包括：

8、显示模组，被配置为显示画面；

9、脑电信号采集模块，被配置为采集所述显示模组处于工作状态时用户的第一脑电信号；

10、环境图像采集模组，被配置为获取所述系统所处的环境图像；以及

11、处理器，与所述显示模组、所述脑电信号采集模块和所述环境图像采集模组连接，并被配置为：

12、基于所述第一脑电信号确定认知负荷水平；

13、根据预设匹配规则和所述认知负荷水平，确定用于构建三维场景的特征点数量；以及

14、根据预设特征点检测算法、所述环境图像和所述特征点数量，确定特征点集合，以使根据所述特征点集合构建的三维场景能够调节所述认知负荷水平。

15、从上面所述可以看出，本公开提供的基于认知负荷控制三维场景构建的方法及系统，通过获取获取第一脑电信号并依据第一脑电信号确定认知负荷水平，根据所述认知负荷水平匹配对应的用于构建三维场景的特征点数量，使得根据所述特征点集合构建的三维场景能够调节所述认知负荷水平，从而改善认知负荷，提高用户体验。

技术特征：

1.基于认知负荷控制三维场景构建的方法，其特征在于，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述第一脑电信号包括单通道信号；和/或

3.根据权利要求1所述的方法，其特征在于，所述认知负荷的评价指标包括平均功率谱；

4.根据权利要求3所述的方法，其特征在于，所述对所述第一脑电信号进行预处理，得到第二脑电信号的步骤，具体包括：

5.根据权利要求3所述的方法，其特征在于，所述利用加窗平均周期图法和归一化法对所述第二脑电信号进行处理，得到平均功率谱的步骤，具体包括：

6.根据权利要求1所述的方法，其特征在于，所述预设特征点检测算法为fast特征点检测算法；

7.根据权利要求1所述的方法，其特征在于，还包括：

8.基于认知负荷控制三维场景构建的系统，其特征在于，所述系统包括：

9.根据权利要求8所述的系统，其特征在于，所述脑电信号采集模块包括：

10.根据权利要求9所述的系统，其特征在于，所述脑电信号采集电极被配置为至少采集单通道信号。

11.根据权利要求8所述的系统，其特征在于，所述处理器被配置为控制所述脑电信号采集模块的采样频率800～1200hz、采样时间50～70秒。

12.根据权利要求8所述的系统，其特征在于，所述认知负荷的评价指标包括平均功率谱；

13.根据权利要求12所述的系统，其特征在于，所述处理器还被配置为：

14.根据权利要求12所述的系统，其特征在于，所述处理器还被配置为：

15.根据权利要求12所述的系统，其特征在于，所述预设特征点检测算法为fast特征点检测算法；

16.根据权利要求8所述的系统，其特征在于，还包括：惯性测量单元；

技术总结
本公开提供一种基于认知负荷控制三维场景构建的方法及系统。所述方法包括：响应于头戴式显示设备处于工作状态，获取第一脑电信号，并基于所述第一脑电信号确定认知负荷水平；根据预设匹配规则和所述认知负荷水平，确定用于构建三维场景的特征点数量；获取所述头戴式显示设备所处的环境图像；根据预设特征点检测算法、所述环境图像和所述特征点数量，确定特征点集合，以使根据所述特征点集合构建的三维场景能够调节所述认知负荷水平。这样的方式，能够改善认知负荷，提高用户体验。

技术研发人员：何惠东,陈丽莉,张浩,韩鹏,杜伟华,秦瑞峰,石娟娟,姜倩文,吕耀宇,韩娜,于静
受保护的技术使用者：北京京东方显示技术有限公司
技术研发日：
技术公布日：2024/1/13