一种多模态融合的手写电子签名验证方法与流程
技术特征:
1.一种多模态融合的手写电子签名验证方法,其特征在于,所述方法包括以下模态数据的预处理和特征提取步骤:
2.如权利要求1所述的一种多模态融合的手写电子签名验证方法,其特征在于:所述步骤s5中在获得时序级深度表征向量hs后,使用tfn 网络进行后端融合,其计算方式为:,其中为拼接运算,为张量外积运算,fc为全连接层。
3.如权利要求1所述的一种多模态融合的手写电子签名验证方法,其特征在于:所述步骤s6中挖掘输入全局特征向量vg中适用于真伪分类的信息时,输出向量hg,并计算,其中fv为融合了多模态信息的签名特征向量。
4.如权利要求1所述的一种多模态融合的手写电子签名验证方法,其特征在于:所述步骤s4中得到表示签名全局特征的向量vg还包括以下全局特征:签名总时间t、提笔数量nup、最大压力点的位置(xpmax, ypmax)、平均速度和最大速度之比、横向跨度和纵向跨度之比和签名路径长度。
技术总结
本发明提出了一种多模态融合的手写电子签名验证方法,所述方法包括以下模态数据的预处理和特征提取步骤:S1:采集用户手写电子签名的若干个模态数据,包括签名图像pic和签名时序数据seq;S2:通过签名时序数据得到压力矩阵pmat;所述签名时序数据包含每个时刻的横坐标xt、纵坐标yt和压力pt,首先生成大小ymax×xmax二维全零矩阵,然后将矩阵在yt行xt列处赋值为pt;将矩阵进行插值操作,统一至和签名图像pic相同的大小H×W;S3:通过签名时序数据提取局部特征,并同时定义时间函数,从带有坐标、时间和压力信息的时间序列中,提取速度、角度和加速度特征,得到维度扩展的时间序列,通过插值操作将每条签名的书写时长差异规整至统一长度L。
技术研发人员:黄小刚
受保护的技术使用者:北京华隐熵策数据科技有限公司
技术研发日:
技术公布日:2024/11/28
文档序号 :
【 40163371 】
技术研发人员:黄小刚
技术所有人:北京华隐熵策数据科技有限公司
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
技术研发人员:黄小刚
技术所有人:北京华隐熵策数据科技有限公司
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
