一种代客操作检测方法及装置与流程

本发明涉及视频检测，尤其涉及一种代客操作检测方法及装置。

背景技术：

1、在信息数字化程度越来越高的情况下，信息安全成为备受用户关注的问题之一。尤其是针对银行网点、金融服务柜台、公共服务机构和医疗健康机构等的信息安全管理和客户隐私保护，通常严禁任何形式的“代客操作”行为，避免内部员工在未经客户授权的情况下擅自处理涉及个人敏感信息的线上业务，比如登录账户、转账或修改个人信息等，旨在维护客户的自主权和信息安全，以减少引发信息泄露风险。

2、然而，传统的检测手段主要依赖人工复审海量的视频资料，这一方法不仅耗时巨大，而且效率低下，难以满足实时管控的需求。而且，在人工审查过程中，由于个体差异、注意力分散、疲劳等因素，审查人员的判断容易受到主观情绪的影响，从而导致对违规行为的识别不够准确，甚至出现漏判、误判的情况。这种低效且不可靠的检测模式，无疑给检测机构带来了巨大的挑战，不仅影响了检测效果，也削弱了公众对业务安全性的信任。

技术实现思路

1、本发明提供了一种代客操作检测方法及装置，以解决现有检测方式中人工复核效率低下及易出错等问题。

2、根据本发明的一方面，提供了一种代客操作检测方法，包括：

3、采集目标场景的目标视频，并获取所述目标视频中的关键视频帧，并确定所述关键视频帧中与第一对象对应的第一图像区域和与第二对象对应的第二图像区域；

4、根据所述第二图像区域确定与被操作对象对应的第三图像区域，并确定所述第三图像区域的第三中心点；

5、在所述第三中心点位于所述第一图像区域内的情况下，确定所述第三中心点与所述第一图像区域的第一中心点之间的第一距离，以及，所述第三中心点与所述第二图像区域的第二中心点之间的第二距离；

6、确定所述第二距离与所述第一距离之间的距离差值，在所述距离差值小于或等于预设距离的情况下，确定为所述第二对象处于代客操作状态。

7、根据本发明的另一方面，提供了一种代客操作检测装置，包括：

8、目标对象检测模块，用于采集目标场景的目标视频，并获取所述目标视频中的关键视频帧，并确定所述关键视频帧中与第一对象对应的第一图像区域和与第二对象对应的第二图像区域；

9、被操作对象检测模块，用于根据所述第二图像区域确定与被操作对象对应的第三图像区域，并确定所述第三图像区域的第三中心点；

10、对象间距离确定模块，用于在所述第三中心点位于所述第一图像区域内的情况下，确定所述第三中心点与所述第一图像区域的第一中心点之间的第一距离，以及，所述第三中心点与所述第二图像区域的第二中心点之间的第二距离；

11、代客操作确定模块，用于确定所述第二距离与所述第一距离之间的距离差值，在所述距离差值小于或等于预设距离的情况下，确定为所述第二对象处于代客操作状态。

12、根据本发明的一方面，提供了一种电子设备，所述电子设备包括：

13、至少一个处理器；以及

14、与所述至少一个处理器通信连接的存储器；其中，

15、所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行本发明任一实施例所述的代客操作检测方法。

16、根据本发明的一方面，一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任一实施例所述的代客操作检测方法。

17、本发明实施例的技术方案，通过采集目标场景的目标视频，并获取所述目标视频中的关键视频帧，并确定所述关键视频帧中与第一对象对应的第一图像区域和与第二对象对应的第二图像区域，自动化地处理视频内容代替了人工查看每段视频，迅速锁定视频中可能包含重要信息的画面，减少人力成本，并能够识别和区分第一对象和第二对象对应的图像区域；然后，通过根据所述第二图像区域确定与被操作对象对应的第三图像区域，并确定所述第三图像区域的第三中心点，准确确定出位于第二图像与中的被操作对象并确定处被操作对象位置；进而，再在所述第三中心点位于所述第一图像区域内的情况下，确定所述第三中心点与所述第一图像区域的第一中心点之间的第一距离，以及，所述第三中心点与所述第二图像区域的第二中心点之间的第二距离，通过确定这些关键点之间的距离，可以直观地分析出第一对象与被操作对象以及第二对象之间的相对位置和空间关系，便于理解场景中的交互模式；最后，确定所述第二距离与所述第一距离之间的距离差值，在所述距离差值小于或等于预设距离的情况下，确定为所述第二对象处于代客操作状态，量化依据来准确识别代客操作等违规行为，避免了主观判断的不确定性，确保了检测的公正性和准确性。本实施例的技术方案，通过分析视频内容自动检测是否存在代客操作违规行为，解决了现有检测方式中人工复核效率低下且易出错的问题，提高了代客操作检测的客观性和准确性，降低了因人为因素导致的误判和漏判风险，同时提升了检测效率，提升了信息安全性。

18、应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

技术特征：

1.一种代客操作检测方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述确定所述关键视频帧中与第一对象对应的第一图像区域以及与第二对象对应的第二图像区域，包括：

3.根据权利要求2所述的方法，其特征在于，所述将所述第一标注区域进行外扩处理，包括：

4.根据权利要求2所述的方法，其特征在于，所述根据所述局部图像确定所述关键视频帧中与第一对象对应的第一图像区域和与第二对象对应的第二图像区域，包括：

5.根据权利要求4所述的方法，其特征在于，所述根据所述局部图像确定所述局部图像包含的所述目标对象对应的对象类型，包括：

6.根据权利要求5所述的方法，其特征在于，所述第二检测模型包括视觉编码器、文本编码器和相似度计算模块；所述将预处理后的所述局部图像和所述类型描述文本输入至预先训练好的第二检测模型中，以获得所述局部图像与每个所述类型描述文本对应的相似度，包括：

7.根据权利要求2所述的方法，其特征在于，所述根据所述第二图像区域确定与被操作对象对应的第三图像区域，包括：

8.根据权利要求7所述的方法，其特征在于，所述第三检测模型包括多头检测器和双向特征金字塔网络。

9.根据权利要求1所述的方法，其特征在于，在所述确定所述第三图像区域的第三中心点之后，还包括：

10.一种代客操作检测装置，其特征在于，包括：

技术总结本发明公开了一种代客操作检测方法及装置。该方法包括：通过采集目标场景的目标视频，并获取目标视频中的关键视频帧，并确定关键视频帧中与第一对象对应的第一图像区域和与第二对象对应的第二图像区域，根据第二图像区域确定与被操作对象对应的第三图像区域，并确定第三图像区域的第三中心点，在第三中心点位于第一图像区域内的情况下，确定第三中心点与第一图像区域的第一中心点之间的第一距离，以及，第三中心点与所述第二图像区域的第二中心点之间的第二距离，确定第二距离与所述第一距离之间的距离差值，在距离差值小于或等于预设距离的情况下，确定为第二对象处于代客操作状态，降低了因人为因素导致的误判和漏判风险，提高了检测的准确性。技术研发人员：陈魏然,韦倩,侯雷平,李丽受保护的技术使用者：中邮信息科技（北京）有限公司技术研发日：技术公布日：2024/10/17