(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210531325.7 (22)申请日 2022.05.16 (71)申请人 成都商汤科技有限公司 地址 610000 四川省成 都市中国(四川)自 由贸易试验区成都市天府新区湖畔路 北段366号1栋3楼1号 (72)发明人 徐小凤　田茂清　 (74)专利代理 机构 北京中知恒瑞知识产权代理 事务所(普通 合伙) 11889 专利代理师 张媛媛 (51)Int.Cl. G06V 10/25(2022.01) G06T 7/62(2017.01) G06T 7/70(2017.01) G06V 10/74(2022.01)G06V 10/82(2022.01) G06N 3/04(2006.01) (54)发明名称 一种识别结果校正方法、 装置、 设备以及存 储介质 (57)摘要 本公开提供了一种识别结果校正方法、 装 置、 设备以及存储介质， 通过第一时刻采集的第 一采集图像和第二时刻采集的第二采集图像， 得 到第一采集图像中各个第一物品图像的第一检 测框信息以及第二采集图像中各个第二物品图 像的第二检测框信息， 进而在对第一物品图像和 第二物品图像进行配对后， 通过未配对的第二物 品图像确定第一采集图像中是否存在未被识别 出的漏识别物品， 并根据漏 识别物品对第一采集 图像的图像识别结果进行校正。 这样， 通过对拿 取物品前后的图像的识别结果进行修正， 可以有 效减少图像中物品的漏检情况， 提高物品识别准 确度， 进而可以帮助降低自助购物中结算存在误 差的几率， 帮助提高物品结算信息的准确性， 有 助于提升用户体验。 权利要求书3页 说明书17页 附图5页 CN 114842197 A 2022.08.02 CN 114842197 A 1.一种识别结果校正方法， 其特 征在于， 所述方法包括： 获取从第一时刻采集的第一采集图像中识别出的各个第一物品图像的第一检测框信 息， 以及从第二时刻采集的第二采集图像中识别出的各个第二物品图像的第二检测框信 息， 所述第一时刻 在所述第二时刻之后； 基于所述第 一检测框信 息和所述第 二检测框信 息， 对各个所述第 一物品图像和各个所 述第二物品图像进行一一配对， 得到至少一个候选配对集， 所述候选配对集包括所述第一 物品图像和针对所述第一物品图像来讲满足预设条件的所述第二物品图像； 基于识别出的各个所述第 二物品图像中未配对成功的目标物品图像， 确定所述第 一采 集图像中是否存在未被识别出的漏识别物品； 若存在， 基于所述漏识别物品， 对所述第一采集图像的图像识别结果进行 校正。 2.根据权利要求1所述的方法， 其特征在于， 所述基于所述第 一检测框信 息和所述第 二 检测框信息， 对各个所述第一物品图像和各个所述第二物品图像进行一一配对， 得到至少 一个候选配对集， 包括： 基于所述第 一检测框信 息指示的、 所述第 一物品图像的第 一检测框的各个第 一顶点位 置信息， 确定所述第一物品图像的第一图像面积； 基于所述第 二检测框信 息指示的、 所述第 二物品图像的第 二检测框的各个第 二顶点位 置信息， 确定所述第二物品图像的第二图像面积； 针对每个所述第一物品图像， 基于所述第一图像面积和各个所述第二图像面积， 遍历 各个所述第二物品图像， 确定满足预设条件的第二物品图像， 并将所述第一物品图像和满 足预设条件的第二物品图像确定为同一 候选配对集中的两个图像。 3.根据权利要求2所述的方法， 其特征在于， 通过以下步骤确定满足预设条件的第 二物 品图像： 针对待配对的所述第 一物品图像和所述第 二物品图像， 基于所述各个第 一顶点位置信 息、 所述各个第二顶点位置信息、 所述第一图像面积和所述第二图像面积， 确定所述第一物 品图像与所述第二物品图像之间存在图像重合部分的交集图像面积； 从所述第一物品图像和所述第 二物品图像中选择出待比对物品图像， 所述待比对物品 图像对应的图像面积小于所述第一物品图像和所述第二物品图像中除所述待比对物品图 像之外的另一物品图像对应的图像面积； 若所述交集图像面积与所述待比对物品图像对应的图像面积之间的比值大于预设交 集占比阈值， 将所述第二物品图像确定为针对所述第一物品图像来讲满足预设条件的第二 物品图像。 4.根据权利要求1至3中任一项所述的方法， 其特征在于， 在所述基于所述第一检测框 信息和所述第二检测框信息， 对各个所述第一物品图像和各个所述第二物品图像进行一一 配对， 得到 至少一个候选配对集之后， 所述方法包括： 若存在同一所述第 一物品图像对应被配对到至少两个候选配对集中， 将所述至少两个 候选配对集中各个所述第二物品图像作为待筛 选图像； 按照各个所述待筛选图像对应的第 二检测框信 息， 分别从所述第 一采集图像中提取出 对应的对照图像； 分别确定各个所述待筛 选图像与对应的对照图像之间的图像相似度；权　利　要　求　书 1/3 页 2 CN 114842197 A 2获取各个所述待筛 选图像的图像内容信息和各个所述对照图像的图像内容信息； 从各个所述待筛选图像中确定出目标图像， 所述目标图像与对应的对照图像的图像 内 容信息一致， 并且在各个所述待筛选图像中所述目标图像与所述对照图像之间的图像相似 度最大； 将与所述目标图像对应的所述第二物品图像所在的所述候选配对集作为所述第一物 品图像唯一的候选配对集。 5.根据权利要求1所述的方法， 其特征在于， 所述基于识别出的各个所述第 二物品图像 中未配对成功的目标物品图像， 确定所述第一采集图像中是否存在未被识别出的漏识别物 品， 包括： 从识别出的各个所述第二物品图像中确定出未配对进入任一所述候选配对集的目标 物品图像； 按照所述目标物品图像对应的第 二检测框信 息， 从所述第 一采集图像中提取出对应的 检测图像； 若所述检测图像与 所述目标物品图像之间的图像相似度 大于预设阈值， 确定所述第 一 采集图像中存在未被识别出的漏识别物品。 6.根据权利要求5所述的方法， 其特征在于， 在所述若所述检测图像与 所述目标物品图 像之间的图像相似度大于预设阈值， 确定所述第一采集图像中存在未被识别出的漏识别物 品之后， 所述方法包括： 将所述检测图像对应的物品确定为所述漏识别物品。 7.根据权利要求1所述的方法， 其特征在于， 所述基于所述漏识别物品， 对所述第一采 集图像的图像识别结果进行 校正， 包括： 基于所述目标物品图像的图像识别结果， 确定所述漏识别物品的物品识别结果； 将所述物品识别结果添加至所述第一采集图像的图像识别结果中， 得到校正后的、 所 述第一采集图像的图像识别结果。 8.根据权利要求1所述的方法， 其特征在于， 在所述基于所述漏识别物品， 对所述第一 采集图像的图像识别结果进行 校正之后， 所述方法包括： 基于校正后的、 所述第 一采集图像的图像识别结果和所述第 二采集图像的图像识别结 果， 确定所述用户拿取物品的结算信息， 所述用户拿取 的物品包括各个所述第二物品图像 对应的物品和所述漏识别物品中除各个所述第一物品图像对应的物品之外的物品。 9.根据权利要求1至3中任一项所述的方法， 其特征在于， 在所述基于所述第一检测框 信息和所述第二检测框信息， 对各个所述第一物品图像和各个所述第二物品图像进行一一 配对， 得到 至少一个候选配对集之后， 所述方法包括： 在对所述第 一采集图像的图像识别结果进行校正的过程中， 若存在以下情况中的一种 或者多种， 则停止对所述第一采集图像的图像识别结果进行 校正： 同一所述第 二物品图像对应被配对到至少两个候选配对集中； 任一所述候选配对集中 的所述第一物品图像对应的物品与所述第二物品图像对应的物品不一致； 任一所述第一物 品图像未被 配对到所述 候选配对集中。 10.一种识别结果校正装置， 其特 征在于， 所述装置包括： 信息获取模块， 用于获取从第 一时刻采集的第 一采集图像中识别出的各个第 一物品图权　利　要　求　书 2/3 页 3 CN 114842197 A 3