(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210531209.5 (22)申请日 2022.05.16 (71)申请人 成都商汤科技有限公司 地址 610000 四川省成 都市中国(四川)自 由贸易试验区成都市天府新区湖畔路 北段366号1栋3楼1号 (72)发明人 徐小凤　田茂清　 (74)专利代理 机构 北京中知恒瑞知识产权代理 事务所(普通 合伙) 11889 专利代理师 张媛媛 (51)Int.Cl. G06V 10/762(2022.01) G06V 10/74(2022.01) G06V 20/52(2022.01) (54)发明名称 物品拿取数量的确定方法、 装置、 电子设备 及存储介质 (57)摘要 本公开提供了一种物品拿取数量的确定方 法、 装置、 电子设备及存储介质， 该方法包括： 获 取用户从存储柜内拿取的物品的第一数量， 所述 第一数量由第一图像的第一检测结果 以及第二 图像的第二检测结果得到， 其中， 所述第一图像 为第一时刻所述存储柜内的图像， 所述第二图像 为第二时刻所述存储柜内的图像； 基于所述第一 检测结果以及所述第二检测结果进行聚类， 得到 聚类结果； 基于所述聚类结果， 确定修正数量； 基 于所述修正数量对所述第一数量进行修正， 得到 所述存储柜中被拿取物品的最终数量。 本公开实 施例， 通过对用户拿取的物品数量进行修正， 能 够提升确定用户拿取的物品数量的准确性， 有利 于提升用户的使用体验。 权利要求书2页 说明书16页 附图9页 CN 114898134 A 2022.08.12 CN 114898134 A 1.一种物品拿取 数量的确定方法， 其特 征在于， 所述方法包括： 获取用户从存储柜内拿取的物品的第 一数量， 所述第 一数量由第 一图像的第 一检测结 果以及第二图像的第二检测结果得到， 其中， 所述第一图像为第一时刻所述存储柜 内的图 像， 所述第二图像为第二时刻所述存 储柜内的图像； 基于所述第一检测结果以及所述第二检测结果进行聚类， 得到聚类结果； 基于所述聚类结果， 确定修 正数量； 基于所述修正数量对所述第 一数量进行修正， 得到所述存储柜中被拿取物品的最终数 量。 2.根据权利要求1所述的方法， 其特征在于， 所述第 一检测结果包括所述第 一图像中的 每个物品对应的第一检测框， 所述第二检测结果包括所述第二图像中的每个物品对应的第 二检测框； 所述基于所述第一检测结果以及所述第二检测结果进行聚类， 得到聚类结果， 包括： 分别确定每 个第一检测框的位置信息以及每 个第二检测框的位置信息； 基于所述每个第 一检测框的位置信 息以及所述每个第 二检测框的位置信 息进行聚类， 得到所述聚类结果。 3.根据权利要求2所述的方法， 其特征在于， 所述聚类结果包括至少一个聚类簇； 所述 基于所述聚类结果， 确定修 正数量， 包括： 在每个聚类簇均符合第一预设条件的情况 下， 确定所述 修正数量为零； 所述第一预设条件是指一个聚类簇仅包括一个第 一检测框和一个第 二检测框， 所述第 一检测框属于所述第一图像， 所述第二检测框属于所述第二图像， 且所述第一检测框与所 述第二检测框之间的相似度符合预设要求以及所述第一检测框与所述第二检测框所对应 的物品种类相同。 4.根据权利要求2所述的方法， 其特征在于， 所述聚类结果包括至少一个聚类簇； 所述 基于所述聚类结果， 确定修 正数量， 包括： 在所述至少一个聚类簇 中存在至少一个第 一聚类簇符合第 二预设条件的情况下， 基于 所述至少一个第一聚类簇， 确定所述 修正数量； 所述第二预设条件是指所述聚类簇仅包括一个所述第一检测框或者所述第一聚类簇 仅包括一个所述第二检测框 。 5.根据权利要求4所述的方法， 其特征在于， 在每个第 一聚类簇仅包括一个所述第 一检 测框的情况 下， 所述基于所述至少一个第一聚类簇， 确定所述 修正数量， 包括： 确定每个第一聚类簇中的第一检测框在所述第一图像中对应的第一图像区域以及每 个第一图像区域在所述第二图像中对应的第二图像区域； 基于每个第一图像区域以及每 个第二图像区域， 确定所述 修正数量。 6.根据权利要求5所述的方法， 其特征在于， 所述基于每个第 一图像区域以及每个第 二 图像区域， 确定所述 修正数量， 包括： 确定所述每 个第一图像区域与对应的第二图像区域之间的相似度； 确定每个相似度 是否符合第 一预设要求， 并确定符合所述第 一预设要求的相似度的数 量； 将符合所述第一预设要求的相似度的数量确定为所述 修正数量。权　利　要　求　书 1/2 页 2 CN 114898134 A 27.根据权利要求4所述的方法， 其特征在于， 在存在至少一个第 一聚类簇符合所述第 二 预设条件， 且所述多个第一聚类簇包括一部分第二聚类簇 以及一部分第三聚类簇的情况 下， 其中， 所述第二聚类簇仅包括一个所述第二检测框， 且所述第三聚类簇仅包括一个第一 检测框； 所述基于所述至少一个第一聚类簇， 确定所述 修正数量， 包括： 分别确定所述第二图像中与每个第二聚类簇中的第二检测框对应的目标第一图像区 域以及每 个目标第一图像区域在所述第一图像中对应的目标第二图像区域； 针对每个目标第 一图像区域， 确定所述目标第 一图像区域与对应的目标第 二图像区域 之间的目标相似度； 在每个目标相似度符合第 二预设要求的情况下， 确定所述第 二图像中的未被拿取物品 的第二数量； 分别确定所述第一图像中与每个第三聚类簇中的第一检测框对应的目标第三图像区 域以及每 个目标第三图像区域在所述第二图像中对应的目标第四图像区域； 基于每个目标第 三图像区域以及每个目标第四图像区域， 确定所述第 一图像中的未被 拿取物品的第三数量； 基于所述第二数量以及所述第三数量， 确定所述 修正数量。 8.根据权利要求1 ‑7任一所述的方法， 其特征在于， 所述得到所述存储柜中被拿取物品 的最终数量之后， 所述方法还 包括： 基于所述存储柜中被拿取物品的最终数量以及所述被拿取物品的种类信 息， 生成物品 拿取明细信息 。 9.一种物品拿取 数量的确定装置， 其特 征在于， 包括： 获取模块， 用于获取用户从存储柜内拿取的物品的第一数量， 所述第一数量由第一图 像的第一检测结果以及第二图像的第二检测结果得到， 其中， 所述第一图像为第一时刻所 述存储柜内的图像， 所述第二图像为第二时刻所述存 储柜内的图像； 聚类模块， 用于基于所述第一检测结果以及所述第二检测结果进行聚类， 得到聚类结 果； 确定模块， 用于基于所述聚类结果， 确定修 正数量； 修正模块， 用于基于所述修正数量对所述第一数量进行修正， 得到所述存储柜中被拿 取物品的最终数量。 10.一种电子设备， 其特征在于， 包括： 处理器、 存储器和总线， 所述存储器存储有所述 处理器可执行 的机器可读指令， 当电子设备运行时， 所述处理器与所述存储器之间通过总 线通信， 所述机器可读指 令被所述处理器执行时执行如权利要求 1至8任意一项 所述的物品 拿取数量的确定方法。 11.一种计算机可读存储介质， 其特征在于， 该计算机可读存储介质上存储有计算机程 序， 该计算机程序被处理器运行时执行如权利要求1至8任意一项 所述的物品拿取数量的确 定方法。权　利　要　求　书 2/2 页 3 CN 114898134 A 3