一种购物结帐的自助结算方法、系统、电子设备及介质与流程

本技术涉及电子收银，具体涉及一种购物结帐的自助结算方法、系统、电子设备及介质。

背景技术：

1、随着科技的发展和消费者购物习惯的改变，传统通过收银员进行收银的结账方式逐渐显得缓慢和效率低下。近年来，自助结账系统开始在超市和便利店得以应用，这类系统可以自动识别每个商品，获取重量信息，快速计算价格。系统直接对置于结账区域的所有商品进行统一识别和称重，以实现快速精确的结账，提高购物体验。

2、目前，现有的自助结算方法通常是拍摄待结算商品的固定区域的整体图像，根据固定区域的整体图像确定商品，并进行称重，从而计算结算金额。但是在实际使用场景中，消费者常会将商品堆放在结账台的不同位置，拍摄待结算商品固定区域的整体图像，往往会出现拍摄角度过偏或超出摄像范围等情况，造成通过拍摄的图像进行商品识别时出现误差，从而导致计算出的物品结算金额不准确。

技术实现思路

1、本技术提供了一种购物结帐的自助结算方法、系统、电子设备及介质，具有自动识别待结算商品，提高计算物品结算金额的准确性的效果。

2、第一方面，本技术提供了一种购物结帐的自助结算方法，包括：

3、获取结账台上待结算商品的第一图像和商品重量，根据所述第一图像，确定所述待结算物品的商品识别结果；

4、若所述商品识别结果对应至少两个商品，则根据所述第一图像，确定所述待结算物品位于所述结账台的摆放位置，并根据所述摆放位置，确定目标摄像参数；

5、获取基于所述目标摄像参数对所述待结算商品进行二次拍摄的第二图像，根据所述第二图像，确定所述商品识别结果对应的各所述商品中的目标商品；

6、调取所述目标商品的商品价格，并根据所述商品价格和所述商品重量，确定所述待结算商品的结算金额。

7、通过采用上述技术方案，在结账过程中，利用整体商品图像进行快速初步识别，确定可能的商品类别。当识别结果不唯一时，系统可以智能判断商品的摆放位置，并根据摆放位置确定后续对目标商品进行定制化优化重拍摄所需的相关参数。获得重拍后的清晰局部图像后，系统通过分析提取商品的局部轮廓等视觉特征，计算不同特征之间的相似度，最终锁定目标商品。在成功识别出目标商品后，系统可以自动调用商品的价格信息，并结合称重重量计算出结算金额。整个流程实现了从快速定位到精确识别再到自动结算的全自动化，大大简化了结账环节，减少了人工操作，为用户提供了更智能化的支付体验，相比传统的结账模式，该方案提高了结账的效率和准确性。

8、可选的，根据所述整体图像，确定所述待结算商品的整体形状和整体颜色；将所述待结算商品的整体形状和整体颜色作为组合特征，与库存商品的标准特征进行比较，得到所述组合特征与各所述标准特征的匹配度；根据所述匹配度，确定各所述库存商品中的至少一个配对商品，并将所述配对商品作为所述商品识别结果。

9、通过采用上述技术方案， 在获得整体商品图像的基础上，进一步对图像进行处理和分析，提取出商品的整体形状和整体颜色视觉特征，并将二者作为组合特征。这种组合特征相较直接进行图像识别，可以更全面地描述商品的整体视觉信息，包含了形状轮廓和颜色样式双重判别，有助于后续识别的准确性。接着，系统将动态捕获的商品组合特征与商品库的标准特征进行高效匹配，通过计算特征间的匹配度，可以有效缩小识别范围，排除大量不相关商品，从而快速确定最可能的配对商品。增加的图像处理与组合特征提取步骤，构成了一个针对性更强的识别流程，使得结账系统对商品识别的准确性得到提升。

10、可选的，若所述商品识别结果对应一个商品，则将所述商品作为所述目标商品，根据所述目标商品的所述商品价格和所述商品重量，确定所述待结算商品的所述结算金额。

11、通过采用上述技术方案，当初步识别即可确定唯一目标商品时，跳过后续复杂的判断流程，直接利用该识别结果，简化整个结账过程，提高效率。系统可以快速查询该商品的价格信息，直接与称重获得的重量值进行计算，得出结算金额。避免了重复的特征提取、比对等运算，减少计算量。整个步骤仅涉及价格查询和简单算术计算，直接完成自动结账。该可选方案针对识别结果唯一的情况进行了流程优化简化，实现了高效自动结算。

12、可选的，获取所述结账台上摄像头的摄像位置和所述待结算商品的商品大小，并根据所述摄像位置和所述摆放位置，确定所述摄像头与所述待结算商品的相对角度；根据所述相对角度，确定所述摄像头的水平调整角度和垂直调整角度；根据所述摆放位置和所述摄像位置，确定所述待结算商品与所述摄像头的相对距离；根据所述相对距离和所述商品大小，确定摄像焦距；将所述摄像头的水平调整角度、所述垂直调整角度以及所述摄像焦距，作为所述目标摄像参数。

13、通过采用上述技术方案，智能获取摄像头位置信息，结合商品摆放位置分析计算出两者间的相对角度参数，以确定摄像头的水平和垂直调整角度，从而合理设置拍摄角度。系统可以获知商品大小数据，计算商品与摄像头的相对距离，据此设定合适的焦距参数。系统可以得到包括拍摄角度和焦距在内的一组定制化的参数，进行精确规划后的重点区域拍摄。该方案考虑了位置、尺寸等关键因素对参数优化的影响，通过对各要素的综合分析，有助于获得清晰完整的商品图像，以提高后续识别的准确率。该方案为商品定制化重点拍摄提供了一套可行的智能参数优化方案，适用于不同场景，增强了结账系统的智能协同能力。

14、可选的，根据所述局部图像，提取所述待结算商品的局部轮廓特征；获取所述商品识别结果对应的各所述商品的轮廓特征；根据所述待结算物品的局部轮廓特征和各所述商品的轮廓特征，在各所述商品中确定对应的所述目标商品。

15、通过采用上述技术方案，提取局部图像中的待结算商品关键区域轮廓特征，并获取初步识别结果中各候选商品的标准轮廓特征。系统计算待结算商品的局部轮廓特征与各候选商品标准特征之间的相似度大小，确定出最佳匹配的目标商品。局部轮廓特征可以有效表示商品关键边界信息，是一种信息量丰富而容易提取的视觉特征。通过与标准特征库的匹配，可以实现从初步识别范围缩小到具体商品的有效识别。相较整体特征，局部特征包含更精细的目标边界细节，有利于提高识别精度。

16、可选的，若检测到所述待结算商品包括至少两种不同的商品，则停止对所述待结算商品的称重操作，并在所述结账台的显示屏上生成错误提示信息。

17、通过采用上述技术方案，通过图像分析检测到结账台存在不同商品的混合，系统可以快速停止对这一批商品的后续称重操作，避免获取重量时发生错误，在结账台的显示屏界面上生成提示性的异常信息，告知用户此次结账失败，需要重新操作。这种及时停止称重并提示用户的处理手段，可以有效防止用户误认为该批混杂商品已正常完成结账。当发生非预期的商品混杂等异常情况时，该方案可以通过智能检测与友好交互，实现流程的快速制止与提示通知，增强了结账系统的容错能力、用户体验和安全可靠性。

18、可选的，若所述目标商品为单价固定的计件商品，则根据所述第一图像和所述第二图像，确定所述计件商品的商品数量；根据所述计件商品的所述商品数量和所述单价，确定所述计件商品的商品总价。

19、通过采用上述技术方案，当识别出目标商品属于计件商品时，系统可以自动利用获得的第一图像和第二图像中的商品数量信息，精确判断出计件商品的总数量。统计数量后，查询该商品的单价，根据预存的单价直接与识别得到的数量进行乘法计算，从而快速确定该批计件商品的总价。这种结账方式避免了需要进行逐件准确称重的麻烦，大大提高了计件商品结算的效率，也扩大了系统适用的商品类别范围，而不仅仅局限于重量商品。该方案实现了对含有计件商品的结账场景的有效支持，为结账系统提供了新的技术实现途径，使其在结算模式上更具通用性。

20、在本技术的第二方面提供了一种购物结帐的自助结算系统。

21、图像识别模块，用于获取结账台上待结算商品的第一图像和商品重量，根据所述第一图像，确定所述待结算物品的商品识别结果；

22、参数调节模块，用于若所述商品识别结果对应至少两个商品，则根据所述第一图像，确定所述待结算物品位于所述结账台的摆放位置，并根据所述摆放位置，确定目标摄像参数；

23、商品识别模块，用于获取基于所述目标摄像参数对所述待结算商品进行二次拍摄的第二图像，根据所述第二图像，确定所述商品识别结果对应的各所述商品中的目标商品；

24、金额计算模块，用于调取所述目标商品的商品价格，并根据所述商品价格和所述商品重量，确定所述待结算商品的结算金额。

25、在本技术的第三方面提供了一种电子设备。

26、一种购物结帐的自助结算系统，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序，该程序能够被处理器加载执行时实现一种购物结帐的自助结算方法。

27、在本技术的第四方面提供了一种计算机可读存储介质。

28、一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时使所述处理器实现一种购物结帐的自助结算方法。

29、综上所述，本技术实施例中提供的一个或多个技术方案，至少具有如下技术效果或优点：

30、1、本技术通过在结账过程中，利用整体商品图像进行快速初步识别，确定可能的商品类别。当识别结果不唯一时，系统可以智能判断商品的摆放位置，并根据摆放位置确定后续对目标商品进行定制化优化重拍摄所需的相关参数。获得重拍后的清晰局部图像后，系统通过分析提取商品的局部轮廓等视觉特征，计算不同特征之间的相似度，最终锁定目标商品。在成功识别出目标商品后，系统可以自动调用商品的价格信息，并结合称重重量计算出结算金额。整个流程实现了从快速定位到精确识别再到自动结算的全自动化，大大简化了结账环节，减少了人工操作，为用户提供了更智能化的支付体验，相比传统的结账模式，该方案提高了结账的效率和准确性。

31、2、本技术通过提取局部图像中的待结算商品关键区域轮廓特征，并获取初步识别结果中各候选商品的标准轮廓特征。系统计算待结算商品的局部轮廓特征与各候选商品标准特征之间的相似度大小，确定出最佳匹配的目标商品。局部轮廓特征可以有效表示商品关键边界信息，是一种信息量丰富而容易提取的视觉特征。通过与标准特征库的匹配，可以实现从初步识别范围缩小到具体商品的有效识别。相较整体特征，局部特征包含更精细的目标边界细节，有利于提高识别精度。

32、3、本技术通过当识别出目标商品属于计件商品时，系统可以自动利用获得的第一图像和第二图像中的商品数量信息，精确判断出计件商品的总数量。统计数量后，查询该商品的单价，根据预存的单价直接与识别得到的数量进行乘法计算，从而快速确定该批计件商品的总价。这种结账方式避免了需要进行逐件准确称重的麻烦，大大提高了计件商品结算的效率。