(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210173027.5 (22)申请日 2022.02.24 (71)申请人 盛景智能科技 （嘉兴） 有限公司 地址 314506 浙江省嘉兴 市桐乡市桐乡经 济开发区发展大道 288号4幢116室 (72)发明人 徐臻哲　沈飞　唐振　 (74)专利代理 机构 北京路浩知识产权代理有限 公司 11002 专利代理师 刘亚平 (51)Int.Cl. G06V 40/20(2022.01) G06K 9/62(2022.01) G06V 10/42(2022.01) G06V 10/44(2022.01) G06V 10/764(2022.01)G06V 10/80(2022.01) (54)发明名称 拍照行为识别方法、 装置、 电子设备和存储 介质 (57)摘要 本发明涉及计算机技术领域， 提供一种拍照 行为识别方法、 装置、 电子设备和存储介质， 所述 方法包括： 将目标图像帧输入至拍照行为识别模 型， 得到拍照行为识别模型输出的识别结果； 识 别结果用于表征指定区域内是否存在拍照设备； 其中， 拍照行为识别模型用于提取目标图像帧的 全局特征以及多个不同尺度的局部特征后， 对全 局特征以及多个不同尺度的局部特征进行融合， 得到融合特征， 并基于融合特征确定识别结果。 本发明提供的拍照行为识别方法、 装置、 电子设 备和存储介质， 能够进一步提高拍照行为的识别 精度。 权利要求书2页 说明书9页 附图3页 CN 114529990 A 2022.05.24 CN 114529990 A 1.一种拍照行为识别方法， 其特 征在于， 包括： 确定指定区域内待识别的目标图像帧； 将所述目标图像帧输入至拍照行为识别模型， 得到所述拍照行为识别模型输出的识别 结果； 所述识别结果用于表征 所述指定区域内是否存在拍照设备； 其中， 所述拍照行为识别模型基于样本图像帧 以及样本图像帧的样本拍照行为结果训 练得到； 所述拍照行为识别模型用于提取所述目标图像帧的全局特征以及多个不同尺度的 局部特征后， 对所述全局特征以及所述多个不同尺度的局部特征进 行融合， 得到融合特征， 并基于所述融合特 征确定所述识别结果。 2.根据权利要求1所述的拍照行为识别方法， 其特征在于， 所述将所述目标图像帧输入 至拍照行为识别模型， 得到所述拍照行为识别模型输出的识别结果， 包括： 将所述目标图像帧输入至所述拍照行为识别模型的全局特征提取层， 由所述全局特征 提取层对所述目标图像帧进行全局特征提取， 得到所述全局特征提取层输出的所述全局特 征； 将所述目标图像帧输入至所述拍照行为识别模型的局部特征提取层， 由所述局部特征 提取层提取所述目标图像帧的多个不同尺度的局部特征， 并对各尺度的局部特征进行加权 融合， 得到所述局部特 征提取层输出的加权局部特 征； 将所述全局特征和所述加权局部特征输入至所述拍照行为识别模型的融合层， 由所述 融合层对所述全局特征和所述加权局部特征进 行特征融合， 得到所述融合层输出的所述融 合特征； 将所述融合特征输入至所述拍照行为识别模型的行为识别层， 由所述行为识别层基于 所述融合特 征进行行为识别， 得到所述行为识别层输出的所述行为识别结果。 3.根据权利要求2所述的拍照行为识别方法， 其特征在于， 所述将所述融合特征输入至 所述拍照行为识别模型的行为识别层， 由所述行为识别层基于所述融合特征进行行为识 别， 得到所述行为识别层输出的所述行为识别结果， 包括： 将所述融合特征输入至所述行为识别层的目标检测层， 由所述目标检测层基于所述融 合特征进行目标检测， 得到所述目标检测层输出的目标检测框； 将所述目标检测框以及所述目标图像帧输入至所述行为识别层的图像裁剪层， 由所述 图像裁剪层基于所述目标检测框对所述目标图像帧进 行裁剪， 得到所述图像裁剪层输出的 目标区域图像； 将所述目标区域图像输入至所述行为识别层的行为分类层， 由所述行为分类层对所述 目标区域图像进行拍照设备识别， 得到所述行为分类层输出的所述行为识别结果。 4.根据权利要求2所述的拍照行为识别方法， 其特征在于， 所述局部特征提取层基于如 下步骤构建得到： 确定初始特 征金字塔网络； 对所述初始特征金字塔网络的网络宽度进行裁剪， 并基于裁剪后的初始特征金字塔网 络构建所述局部特 征提取层。 5.根据权利要求2所述的拍照行为识别方法， 其特征在于， 所述全局特征提取层基于 MobileNetv1网络构建得到 。 6.根据权利要求1至5任一项所述的拍照行为识别方法， 其特征在于， 所述目标图像帧权　利　要　求　书 1/2 页 2 CN 114529990 A 2为连续视频帧； 所述将所述目标图像帧输入至拍照行为识别模型， 得到所述拍照行为识别模型输出的 识别结果， 包括： 将各视频帧输入至所述拍照行为识别模型， 得到所述拍照行为识别模型输出的各视频 帧对应的初始行为识别结果； 基于各视频帧对应的初始行为识别结果， 确定所述识别结果。 7.根据权利要求1至5任一项所述的拍照行为识别方法， 其特征在于， 所述得到所述拍 照行为识别模型输出的识别结果， 之后还 包括： 在所述识别结果 为所述指定区域内存在拍照设备的情况 下， 进行预警提示。 8.一种拍照行为识别装置， 其特 征在于， 包括： 确定单元， 用于确定指定区域内待识别的目标图像帧； 识别单元， 用于将所述目标图像帧输入至拍照行为识别模型， 得到所述拍照行为识别 模型输出的识别结果； 所述识别结果用于表征 所述指定区域内是否存在拍照设备； 其中， 所述拍照行为识别模型基于样本图像帧 以及样本图像帧的样本拍照行为结果训 练得到； 所述拍照行为识别模型用于提取所述目标图像帧的全局特征以及多个不同尺度的 局部特征后， 对所述全局特征以及所述多个不同尺度的局部特征进 行融合， 得到融合特征， 并基于所述融合特 征确定所述识别结果。 9.一种电子设备， 包括存储器、 处理器及存储在所述存储器上并可在所述处理器上运 行的计算机程序， 其特征在于， 所述处理器执行所述程序时实现如权利要求1至7任一项所 述拍照行为识别方法的步骤。 10.一种非暂态计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述计算 机程序被处 理器执行时实现如权利要求1至7任一项所述拍照行为识别方法的步骤。权　利　要　求　书 2/2 页 3 CN 114529990 A 3