多模态信息融合的皮带巷道监测方法及装置与流程
技术特征:
1.一种多模态信息融合的皮带巷道监测方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,对所述第一目标数据进行预处理,得到第三目标数据,包括:
3.根据权利要求2所述的方法,其特征在于,在基于第一目标公式对所述第一目标数据进行所述图像增强之前,所述方法还包括:
4.根据权利要求1所述的方法,其特征在于,在将所述第三目标数据和所述第二目标数据输入多模态融合模型之前,所述方法还包括:
5.根据权利要求4所述的方法,其特征在于,基于各预设模型和所述学生模型之间知识蒸馏的过程分别构建对应的损失函数,包括:
6.根据权利要求1所述的方法,其特征在于,基于所述第四目标数据和所述第五目标数据发出目标报警信息,并对所述皮带巷道中的所述设备进行控制,包括:
7.根据权利要求1所述的方法,其特征在于,基于所述第四目标数据和所述第五目标数据发出目标报警信息,并对所述皮带巷道中的所述设备进行控制,还包括:
8.一种多模态信息融合的皮带巷道监测装置,其特征在于,所述装置包括:
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括存储的程序,其中,所述程序执行权利要求1至7中任意一项所述的多模态信息融合的皮带巷道监测方法。
10.一种监控系统,其特征在于,包括:一个或多个处理器,存储器,以及一个或多个程序,其中,所述一个或多个程序被存储在所述存储器中,并且被配置为由所述一个或多个处理器执行,所述一个或多个程序包括用于执行权利要求1至7中任意一项所述的多模态信息融合的皮带巷道监测方法。
技术总结
本发明公开了一种多模态信息融合的皮带巷道监测方法及装置。其中,该方法包括:通过摄像机获取皮带巷道的监控视频数据,得到第一目标数据,通过多种传感器获取皮带巷道中的设备的运行数据,得到第二目标数据;对第一目标数据进行预处理,得到第三目标数据;将其和第二目标数据输入多模态融合模型,得到皮带巷道中的煤流量数据的第四目标数据和皮带巷道的异常状态的第五目标数据;基于第四目标数据和第五目标数据发出目标报警信息,并对皮带巷道中的设备进行控制。本发明解决了现有技术中将监控数据和传感器数据分别进行预警和控制导致预测结果的准确性和可靠性较低的技术问题。
技术研发人员:周勇,张辰宇,任文华,贺新田,刘志宝,薛燕龙,马杰,李暄,越强,刘海青,钱海军,张磊,任程
受保护的技术使用者:国家能源集团乌海能源有限责任公司
技术研发日:
技术公布日:2024/11/26
文档序号 :
【 40126711 】
技术研发人员:周勇,张辰宇,任文华,贺新田,刘志宝,薛燕龙,马杰,李暄,越强,刘海青,钱海军,张磊,任程
技术所有人:国家能源集团乌海能源有限责任公司
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
技术研发人员:周勇,张辰宇,任文华,贺新田,刘志宝,薛燕龙,马杰,李暄,越强,刘海青,钱海军,张磊,任程
技术所有人:国家能源集团乌海能源有限责任公司
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
