测试方法及装置、电子设备及计算机可读存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114416590A(43)申请公布日2022.04.29(21)申请号202210107393.0(22)申请日2022.01.28(71)申请人深圳市商汤科技有限公司地址518000广东省深圳市前海深港合作区前湾一路1号A栋201室(72)发明人戴瑞康潘贤民(74)专利代理机构广州三环专利商标代理有限公司44202代理人董文俊(51)Int.Cl.G06F11/36(2006.01)权利要求书3页说明书16页附图2页(54)发明名称测试方法及装置、电子设备及计算机可读存储介质(57)摘要本申请公开了一种测试方法及装置、电子设备及计算机可读存储介质。该方法包括：获取测试视频；将测试视频输入待测试模型，获取所述待测试模型基于预设的时间间隔输出的目标事件的告警信息；获取所述测试视频中所述目标事件的标注信息；根据所述告警信息和所述标注信息，确定所述告警信息中的正确告警信息；依据所述正确告警信息，确定所述待测试模型的测试指标。CN114416590ACN114416590A权利要求书1/3页1.一种测试方法，其特征在于，所述方法包括：获取测试视频；将测试视频输入待测试模型，获取所述待测试模型基于预设的时间间隔输出的目标事件的告警信息；获取所述测试视频中所述目标事件的标注信息；根据所述告警信息和所述标注信息，确定所述告警信息中的正确告警信息；依据所述正确告警信息，确定所述待测试模型的测试指标。2.根据权利要求1所述的方法，其特征在于，所述待测试模型的测试指标包括所述待测试模型的漏检数；所述依据所述正确告警信息，确定所述待测试模型的测试指标，包括：确定正确告警信息的次数；依据所述标注信息和所述时间间隔，确定与所述标注信息对应的告警次数；确定所述正确告警信息的次数和与所述标注信息对应的告警次数的差，得到所述待测试模型的漏检数。3.根据权利要求2所述的方法，其特征在于，所述依据所述标注信息和所述时间间隔，确定与所述标注信息对应的告警次数，包括：依据所述标注信息，确定所述目标事件在所述测试视频中的至少一个发生时间段；依据所述至少一个发生时间段，确定所述目标事件在所述测试视频中的发生时长；依据所述发生时长和所述时间间隔，得到与所述标注信息对应的告警次数。4.根据权利要求1至3中任意一项所述的方法，其特征在于，所述时间间隔包括：激活时间；或者，激活时间和冷却时间。5.根据权利要求4所述的方法，其特征在于，在所述时间间隔包括激活时间和冷却时间的情况下，所述依据所述发生时长和所述时间间隔，得到与所述标注信息对应的告警次数，包括：确定所述激活时间与所述冷却时间的和，得到第一值；确定所述发生时长与所述第一值的商，得到第二值；对所述第二值向上取整，得到与所述标注信息对应的告警次数。6.根据权利要求1所述的方法，其特征在于，所述待测试模型的测试指标包括所述待测试模型的误检数；所述依据所述正确告警信息，确定所述待测试模型的测试指标，包括：确定所述待测试模型输出所述告警信息的次数与所述待测试模型输出所述正确告警信息的次数的差，得到所述待测试模型的误检数。7.根据权利要求6所述的方法，其特征在于，所述待测试模型的测试指标还包括所述待测试模型的误检率；所述依据所述正确告警信息，确定所述待测试模型的测试指标，还包括：确定所述待测试模型的误检数与所述待测试模型输出所述告警信息的次数的商，得到所述待测试模型的误检率。8.根据权利要求1所述的方法，其特征在于，所述待测试模型的测试指标包括所述待测2CN114416590A权利要求书2/3页试模型的检出率；所述依据所述正确告警信息，确定所述待测试模型的测试指标，包括：确定所述待测试模型输出所述正确告警信息的次数与所述标注信息对应的告警次数的商，得到所述待测试模型的检出率。9.根据权利要求1所述的方法，其特征在于，所述待测试模型的测试指标包括所述待测试模型的正确率；所述依据所述正确告警信息，确定所述待测试模型的测试指标，包括：确定所述待测试模型输出所述正确告警信息的次数与所述待测试模型输出所述告警信息的次数的商，得到所述待测试模型的正确率。10.根据权利要求1至9中任意一项所述的方法，其特征在于，所述告警信息包括告警时间、所述告警信息对应的第一图像和所述第一图像的检测框；所述标注信息包括所述测试视频的各帧图像的检测框；所述根据所述告警信息和所述标注信息，确定所述告警信息中的正确告警信息，包括：从所述测试视频中确定距离所述告警时间最近的至少一张第二图像；合并所述至少一张第二图像中的检测框，得到所述目标事件的检测范围；根据所述目标事件的检测范围和所述第一图像的检测框，确定所述告警信息中的正确告警信息。11.根据权利要求10所述的方法，其特征在于，所述根据所