一种领域知识驱动的多模态电力巡检方法、装置和系统与流程

1.一种领域知识驱动的多模态电力巡检方法，其特征在于，所述的多模态电力巡检方法包括：

2.根据权利要求1所述的一种领域知识驱动的多模态电力巡检方法，其特征在于，所述的利用部署在边端的轻量级目标检测网络对待测目标的图像数据集进行初步检测和分类并过滤掉无缺陷样本，具体过程包括：

3.根据权利要求1所述的一种领域知识驱动的多模态电力巡检方法，其特征在于，所述的将缺陷样本数据标注为后续缺陷检测所需的数据格式，具体包括：

4.根据权利要求1-3任一项所述的一种领域知识驱动的多模态电力巡检方法，其特征在于，所述的根据大语言模型及多模态大模型进行小目标缺陷检测，具体包括：

5.根据权利要求4所述的一种领域知识驱动的多模态电力巡检方法，其特征在于，所述的clip模型的训练过程具体包括：

6.根据权利要求5所述的一种领域知识驱动的多模态电力巡检方法，其特征在于，所述的对比损失函数表示为：

7.根据权利要求5所述的一种领域知识驱动的多模态电力巡检方法，其特征在于，所述的clip模型的训练过程还包括：

8.根据权利要求5所述的一种领域知识驱动的多模态电力巡检方法，其特征在于，所述的采用预训练的yolov8模型进行缺陷检测，具体过程包括：

9.一种领域知识驱动的多模态电力巡检装置，其特征在于，所述的多模态电力巡检装置包括：

10.一种领域知识驱动的多模态电力巡检系统，其特征在于，所述的多模态电力巡检系统包括：