一种商品识别结算方法、装置及系统
本说明书提供了一种商品识别结算方法、装置以及系统。所述方法包括：获取摄像头采集的商品图像，并将所述商品图像分割成与各个商品对应的图像区域；对所述图像区域进行图像识别，获得与各所述图像区域对应的置信度集，并确定所述图像区域是否识别出条形码；其中，所述置信度集用于描述所述图像区域对应的至少一个商品标识的置信度；对所述图像区域进行文字识别，获得所述图像区域的文字信息；基于预设策略确定所述图像区域对应的商品标识，所述预设策略基于所述置信度、是否关联有条形码、以及文字信息设定。本申请通过采集的多维度数据信息，修正置信度集，增加了识别效率以及识别准确度，提高了实用性和用户体验感。
发明专利
CN201811585118.X
2018-12-24
CN109741551A
2019-05-10
G07G1/00(2006.01)
青岛海信智能商用系统股份有限公司
温诚;董杰
266071 山东省青岛市崂山区松岭路399号
北京博思佳知识产权代理有限公司
林祥
1.一种商品识别结算方法，其特征在于，包括以下步骤： 获取摄像头采集的商品图像，并将所述商品图像分割成与各个商品对应的图像区域； 对所述图像区域进行图像识别，获得与各所述图像区域对应的置信度集，并确定所述图像区域是否识别出条形码；其中，所述置信度集用于描述所述图像区域对应的至少一个商品标识的置信度； 对所述图像区域进行文字识别，获得所述图像区域的文字信息； 基于预设策略确定所述图像区域对应的商品标识，所述预设策略基于所述置信度、是否关联有条形码、以及文字信息设定。 2.根据权利要求1所述的一种商品识别结算方法，其特征在于，所述方法还包括：获取重量传感器采集的重量信息，并利用所述重量信息对所述置信度集中的商品标识的置信度进行筛选；和/或获取红外摄像头采集的尺寸信息，利用所述尺寸信息对所述置信度集中的商品标识的置信度进行筛选。 3.根据权利要求1所述的一种商品识别结算方法，其特征在于，所述预设策略包括： 如果所述图像区域识别出条形码，则根据图像识别出的条形码对应的商品标识确定所述图像区域对应的商品标识； 如果所述图像区域未识别出条形码，则根据所述置信度和/或所述文字信息确定所述图像区域对应的商品标识。 4.根据权利要求3所述的一种商品识别结算方法，其特征在于，根据所述置信度和/或所述文字信息确定所述图像区域对应的商品标识包括： 如果未识别出所述文字信息或所述文字信息不存在对应的商品标识，则将所述置信度集中置信度最高的商品标识确定为所述图像区域对应的商品标识； 如果所述文字信息对应的商品标识与所述置信度集中的商品标识匹配，则将匹配的商品标识中置信度最高的商品标识确定所述图像区域对应的商品标识。 5.根据权利要求1所述的一种商品识别结算方法，其特征在于，还包括：获取红外扫描仪采集的条形码； 所述预定策略包括： 确定从图像区域识别出的条形码与红外扫描仪采集的条形码是否匹配，如果匹配，则将匹配的条形码对应的商品标识确定为所述图像区域对应的商品标识； 基于未匹配到的所述红外扫描仪采集的条形码/图像识别出的条形码、置信度和/或所述文字信息确定所述图像区域对应的商品标识。 6.根据权利要求5所述的一种商品识别结算方法，其特征在于，基于未匹配到的所述红外扫描仪采集的条形码/图像识别出的条形码、置信度和/或所述文字信息确定所述图像区域对应的商品标识包括： 将所述未匹配到的图像识别出的条形码对应的商品标识确定为所述图像区域对应的商品标识； 在所述置信度集中分别查找与所述未匹配到的红外扫描仪采集的条形码、所述文字信息对应的商品标识匹配的置信度，将查找结果中置信度最高的商品标识确定为所述图像区域对应的商品标识。 7.一种商品识别结算装置，其特征在于，所述装置包括： 分割单元，获取摄像头采集的商品图像，并将所述商品图像分割成与各个商品对应的图像区域； 处理单元，将对所述图像区域进行图像识别，获得与各所述图像区域对应的置信度集，并确定所述图像区域是否识别出条形码；对所述图像区域进行文字识别，获得所述图像区域的文字信息；基于预设策略确定所述图像区域对应的商品标识，所述预设策略基于所述置信度、是否关联有条形码、以及文字信息设定。 8.一种商品识别结算系统，其特征在于，所述系统包括摄像头、处理器和存储器； 所述摄像头用于采集商品图像； 所述存储器用于存储可执行的计算机指令； 所述处理器用于执行所述计算机指令时实现权利要求1至7任一所述方法的步骤。 9.根据权利要求8所述的一种商品识别结算系统，其特征在于，所述系统还包括用于采集重量信息的重量传感器和/或用于采集尺寸信息的红外摄像头。 10.根据权利要求8所述的一种商品识别结算系统，其特征在于，所述系统还包括用于至少一个采集条形码的红外扫描仪。