眼动跟踪方法、装置、显示设备、存储介质和程序产品与流程
技术特征:
1.一种眼动跟踪方法,其特征在于,包括:
2.根据权利要求1所述的眼动跟踪方法,其特征在于,在响应于接收到的脉冲信号,将所述脉冲信号输入眼动跟踪模型之前,还包括:
3.根据权利要求2所述的眼动跟踪方法,其特征在于,构建所述眼动跟踪模型,包括:
4.根据权利要求3所述的眼动跟踪方法,其特征在于,采用眼动跟踪数据集对人工神经网络进行训练,得到用于眼动跟踪的初始模型,包括:
5.根据权利要求4所述的眼动跟踪方法,其特征在于,基于所述预测偏航角和对应的偏航角标签之间的关系,以及所述预测俯仰角和对应的俯仰角标签之间的关系,更新所述特征提取网络、所述第一全连接层以及所述第二全连接层的模型参数,直至训练完毕,还包括:
6.根据权利要求3所述的眼动跟踪方法,其特征在于,基于人工神经网络和脉冲神经网络之间的映射关系,将所述初始模型转换为所述眼动跟踪模型,包括:
7.根据权利要求1所述的眼动跟踪方法,其特征在于,响应于接收到的脉冲信号,将所述脉冲信号输入眼动跟踪模型,由所述眼动跟踪模型输出与所述脉冲信号对应的眼动跟踪信息,包括:
8.根据权利要求1至7中任一项所述的眼动跟踪方法,其特征在于,还包括:
9.一种眼动跟踪装置,其特征在于,包括:
10.一种头戴式显示设备,其特征在于,包括:
11.一种计算机存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1~8中任意一项所述的眼动跟踪方法。
12.一种计算机程序产品,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1~8中任意一项所述的眼动跟踪方法。
技术总结
本公开提供了一种眼动跟踪方法、装置、显示设备、存储介质和程序产品,涉及计算机技术领域。其中,眼动跟踪方法包括:响应于接收到的脉冲信号,将所述脉冲信号输入眼动跟踪模型,由所述眼动跟踪模型输出与所述脉冲信号对应的眼动跟踪信息,所述脉冲信号根据采集到的光流信号进行转换生成,所述光流信号包括反映眼动的光流信息,所述眼动跟踪模型基于脉冲神经网络生成。通过本公开的技术方案,不需要采用复杂的图像处理算法从捕获的图像中提取有用的眼动信息,并且更接近生物神经系统的工作原理,眼动跟踪模型的高时间分辨率和低能耗特性,也有助于实现更高精度和更低功耗的实时跟踪眼动。
技术研发人员:陈锦伟
受保护的技术使用者:脉冲视觉(北京)科技有限公司
技术研发日:
技术公布日:2024/11/18
文档序号 :
【 40048542 】
技术研发人员:陈锦伟
技术所有人:脉冲视觉(北京)科技有限公司
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
技术研发人员:陈锦伟
技术所有人:脉冲视觉(北京)科技有限公司
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
