物品交接方法和装置与流程

本发明涉及计算机视觉，尤其涉及物品交接方法和装置。

背景技术：

1、在很多场景，如：仓储场景下，当物品发生交接时，需要对物品交接过程进行记录。例如：在物品交接时，一般是交出人员直接把物品给到接收人员，此时人工将交接结果记录在交接台账，由于是人工录入，这样就会存在物品交出未记录或未交出物品被记录的风险。

技术实现思路

1、本发明实施例提出物品交接方法和装置，以提高物品交接的规范性。

2、本发明实施例的技术方案是这样实现的：

3、一种物品交接方法，应用在包含双目摄像机的物品交接场景中，其中，双目摄像机的第一摄像头为定焦镜头，第二摄像头为变焦镜头，且双目摄像机的安装位置满足：第一摄像头的视野覆盖预设的物品交接区域，且满足：尺寸最小的物品在第一摄像头的画面中的分辨率仍能达到预设分辨率下限，该方法包括：

4、获取第一摄像头采集的物品交接场景的第一视频流；

5、当在第一视频流中检测到物品交出人、物品接收人、交接见证人以及目标物品都位于预设的物品交接区域内时，在第一视频流中检测目标物品是否位于物品交出人手中，若是，通知第二摄像头采集目标物品的放大图，且控制第一摄像头继续跟踪目标物品；

6、若在第一视频流中检测到目标物品转移到物品接收人手中，则确定目标物品交接完成；

7、记录物品交接信息，包括：物品交接完成时刻、目标物品的放大图、物品交出人信息、物品接收人信息和交接见证人信息。

8、所述第一摄像头的视野覆盖预设的物品交接区域为：第一摄像头的视野正好覆盖所述预设的物品交接区域，

9、所述在第一视频流中检测到物品交出人、物品接收人、交接见证人以及目标物品都位于预设的物品交接区域内，包括：

10、在第一视频流中检测人脸，若检测到任一人脸，则根据人脸的角度判断该人脸是否为正对人脸，若为正对人脸且检测到该正对人脸在预设第一时长内的移动幅度小于预设幅度，则确定该人脸为有效人脸；

11、在第一视频流中检测目标物品；

12、若在第一视频流中检测到目标物品并检测到3个有效人脸，且该3个有效人脸之间的位置关系符合预设的物品交出人、物品接收人、交接见证人之间的位置关系，则确定在第一视频流中检测到物品交出人、物品接收人、交接见证人以及目标物品都位于预设的物品交接区域内。

13、所述在第一视频流中检测目标物品是否位于物品交出人手中，包括：

14、判断在第一视频流中检测出的物品交出人的人脸的位置和目标物品的位置之间的位置关系是否符合预设的物品交出人的人脸的位置和目标物品的位置之间的位置关系，若符合，则确定目标物品是否位于物品交出人手中；

15、或/和，所述在第一视频流中检测到目标物品转移到物品接收人手中，包括：

16、判断在第一视频流中检测出的物品接收人的人脸的位置和目标物品的位置之间的位置关系是否符合预设的物品接收人的人脸的位置和目标物品的位置之间的位置关系，若符合，则确定物品已转移到物品接收人手中。

17、所述通知第二摄像头采集目标物品的放大图，包括：

18、获取目标物品在第一视频流的当前画面中的第一位置坐标和第一大小，将第一位置坐标和第一大小转换成目标物品在第二摄像头采集的当前画面中的第二位置坐标和第二大小，将第二位置坐标和第二大小携带在目标物品放大指令中发送给第二摄像头，以使得：第二摄像头根据第二位置坐标和第二大小对当前画面进行放大，直至目标物品与第二摄像头的当前画面的重合面积最大时停止，将此时的画面作为目标物品的放大图进行保存。

19、当在第一视频流中检测到目标物品位于物品交出人手中之后、通知第二摄像头采集目标物品的放大图之前，进一步包括：

20、通过语音提示物品交出人将物品上的物品编号正对第二摄像头的镜头；

21、所述将此时的画面作为目标物品的放大图进行保存之后，进一步包括：

22、从目标物品的放大图中识别出目标物品的物品编号，保存该物品编号。

23、所述获取第一摄像头采集的物品交接场景的第一视频流之前，进一步包括：

24、获取第一摄像头采集的包含多个预设标定点的第一画面，同时获取第二摄像头采集的包含所述多个预设标定点的第二画面，根据所述多个预设标定点在第一画面中的坐标和所述多个预设标定点在第二画面中的坐标，计算第一摄像头的图像坐标系到第二摄像头的图像坐标系之间的转换矩阵；

25、所述将第一位置坐标和第一大小转换成目标物品在第二摄像头采集的当前画面中的第二位置坐标和第二大小，包括：

26、采用第一摄像头的图像坐标系到第二摄像头的图像坐标系之间的转换矩阵，将第一位置坐标和第一大小转换成目标物品在第二摄像头采集的当前画面中的第二位置坐标；并根据第一摄像头的焦距和第二摄像头的焦距，将第一大小转换为第二大小。

27、所述通知第二摄像头采集目标物品的放大图的同时，进一步包括：

28、分别获取物品交出人、物品接收人和交接见证人的人脸在第一视频流的当前画面中的第三位置坐标和第三大小、第四位置坐标和第四大小、第五位置坐标和第五大小，分别将第三位置坐标和第三大小、第四位置坐标和第四大小、第五位置坐标和第五大小转换成物品交出人、物品接收人和交接见证人的人脸在第二摄像头的当前画面中的第六位置坐标和第六大小、第七位置坐标和第七大小、第八位置坐标和第八大小，将物品交出人、物品接收人和交接见证人的人脸在第二摄像头的当前画面中的第六位置坐标和第六大小、第七位置坐标和第七大小、第八位置坐标和第八大小携带在交接人员人脸放大指令中发送给第二摄像头，以使得：第二摄像头分别根据第六位置坐标和第六大小、第七位置坐标和第七大小、第八位置坐标和第八大小对当前画面进行放大，直至物品交出人、物品接收人、交接见证人的人脸分别与第二摄像头的当前画面的重合面积最大时停止，将重合面积最大时的各画面分别作为物品交出人、物品接收人和交接见证人的人脸图进行保存；

29、或/和，控制第一摄像头抓拍当前画面，将当前画面作为物品交接开始图进行保存。

30、所述在第一视频流中检测到目标物品转移到物品接收人手中之后，进一步包括：

31、控制第一摄像头抓拍当前画面，将当前画面作为物品交接事件图进行保存；

32、或/和，根据目标物品在第一视频流中的位置，控制第一摄像头在当前画面中截取目标物品，将截取的目标物品图作为交接物品图进行保存；

33、或/和，在第一视频流中截取从物品交接开始到物品交接完成之间的视频流，将截取的视频流作为物品交接过程录像进行保存。

34、所述第一摄像头和第二摄像头位于同一双目摄像机上，其中，第一摄像头为定焦镜头，第二摄像头为变焦镜头。

35、一种物品交接装置，应用在包含双目摄像机的物品交接场景中，其中，双目摄像机的第一摄像头为定焦镜头，第二摄像头为变焦镜头，且双目摄像机的安装位置满足：第一摄像头的视野覆盖预设的物品交接区域，且满足：尺寸最小的物品在第一摄像头的画面中的分辨率仍能达到预设分辨率下限，该装置包括：

36、视频流获取模块，用于：获取第一摄像头采集的物品交接场景的第一视频流；

37、交接检测模块，用于：当在第一视频流中检测到物品交出人、物品接收人、交接见证人以及目标物品都位于预设的物品交接区域内时，在第一视频流中检测目标物品是否位于物品交出人手中，若是，通知第二摄像头采集目标物品的放大图，且控制第一摄像头继续跟踪目标物品；若在第一视频流中检测到目标物品转移到物品接收人手中，则确定目标物品交接完成；记录物品交接事件，包括：交接时间、物品放大图、以及物品交出人信息、物品接收人信息和交接见证人信息。

38、一种非瞬时计算机可读存储介质，所述非瞬时计算机可读存储介质存储指令，所述指令在由处理器执行时使得所述处理器执行如上任一所述的物品交接方法。

39、上述实施例中，通过在物品交接场景中采用双目摄像机，其中，第一摄像头为定焦镜头，第二摄像头为变焦镜头，且双目摄像机的安装位置满足：第一摄像头的视野覆盖预设的物品交接区域，且满足：尺寸最小的物品在第一摄像头的画面中的分辨率仍能达到预设分辨率下限；第一摄像头采集物品交接场景的第一视频流，当在第一视频流中检测到物品交出人、物品接收人、交接见证人以及物品都位于预设的交接区域内时，在第一视频流中检测物品是否位于物品交出人手中，若是，通知第二摄像头采集物品的放大图，且控制第一摄像头继续跟踪物品；若在第一视频流中检测到物品转移到物品接收人手中，则确定物品交接完成；记录物品交接事件，包括：物品放大图、以及物品交出人信息、物品接收人信息和交接见证人信息，从而实现了对物品交接过程的自动监测，提高了物品交接的规范性，避免了物品交接的记录错误或记录遗漏，同时也方便了对物品交接过程进行追溯。