基于摄像机的倾翻运动探测的制作方法

1.本发明涉及根据权利要求1的方法和根据产品独立权利要求的车辆。


背景技术：

2.由现有技术已知防止乘用车辆或载重车辆翻倒的系统。这些系统通过干预车辆的制动和/或转向来稳定车辆。
3.地面运输车和建筑机械由于提升的负载的静态位移，经常面临翻倒的危险。由现有技术已知的系统在这里是无效的，因为它们是动态作用的并且前提是车辆充分快速地运动。


技术实现要素：

4.本发明基于的任务是改进车辆在低速度时的倾翻安全性。该任务由根据权利要求1的方法和根据产品独立权利要求的车辆来解决。
5.根据本发明的方法被用来识别车辆的倾翻运动。倾翻运动是一种滚动运动，即绕车辆纵轴线的转动运动，或者是一种俯仰运动，即绕车辆横轴线的转动运动，其导致车辆失去平衡而翻车。
6.车辆例如是轮式装载机、叉车或翻斗车。车辆具有摄像机。摄像机是一种用于在成像介质上拍摄环境图像的器件。其优选是光学摄像机，其中，可见光是成像的。摄像机固定在车辆上。
7.该方法设置的是，利用摄像机拍摄图像序列。图像序列是至少两个图像的次序。
8.在拍摄到的图像序列中获知光流。这是至少一个由摄像机拍摄的对象的可见点的投射到摄像机的图像平面中速度的矢量场。
9.除了拍摄的图像序列中实际存在的光流之外，还获知预期的光流。该获知是基于车辆的行驶运动和地面的形貌。行驶运动是指车辆相对于地面的运动。地面的形貌是指地面的表面状况。
10.在车辆不倾翻的前提下，其行驶运动和地面的形貌明确地决定了摄像机相对于相对地面位置固定的对象的运动。这就得到了摄像机所拍摄的对象的预期光流。
11.最后，检查图像序列中实际存在的光流与预期光流的偏差程度。这些偏差就是针对车辆倾翻运动的推定迹象。
12.如果由于光流的偏差而识别到即将发生的倾翻运动，就可以启动对策。因此能够降低车辆的速度和/或其转向角度。如果负载提升，则可以停止提升和/或放弃负载。
13.在优选的改进方案中，获知预期的光流的步骤被细分为多个子步骤。因此，为了获知预期的光流，获知车辆的行驶运动。优选地，在拍摄图像序列期间获知行驶运动。在必要时，还获知地面的形貌。如果地面是平坦的，则可以取消这一步。
14.基于行驶运动和形貌，在车辆不倾翻的前提下，摄像机相对于一个或多个由摄像机所拍摄的对象(即包含在图像序列中的对象)的运动被明确地限定。在另一个子步骤中获
知该运动。这些对象是位置固定布置的对象，即相对于地面来说是不能运动的对象。特别地，地面本身也可以是这样的对象。
15.在最后的按照改进方案的子步骤中，获知基于所获知的摄像机的运动而预期的光流。
16.在进一步优选的改进方案中，获知基于摄像机的运动而预期的光流的子步骤又被细分为多个子步骤。在第一个子步骤中，识别在图像序列中的由摄像机拍摄的对象。相应的自动化或计算机实施的用于图像识别的方法由现有技术对本领域技术人员来说是已知的。特别地，神经网络或随机算法能够被用于图像识别。
17.通过在图像序列中识别对象，鉴别出图像序列的将对象成像于其中的区域。在另一个子步骤中，获知该区域的光流。这意味着，不是获知整个图像区域的光流，而是只获知图像序列中的对象的光流。由此使得获知更加有效率并避免了例如由运动的对象或人员造成的干扰。
18.在另一个子步骤中，获知图像序列中的对象的由于摄像机的运动而预期的相应光流。具体来说，获知在上述的其中将对象成像的区域内的由于摄像机的运动而预期的光流。
19.根据本发明的车辆具有至少一个摄像机和至少一个评估单元，评估单元实施根据本发明的方法或优选的改进方案，即其被构造成用于施行这样的方法。
附图说明
20.在图1中示出本发明的一个优选实施例。具体而言：
21.图1示出车辆。
具体实施方式
22.图1中所示的车辆101具有摄像机103和评估单元105。摄像机103以信号传导的方式与评估单元105连接。对象107位于摄像机103的图像区域内，即位于被摄像机103拍摄的区域内。
23.评估单元105获知由对象107在摄像机103拍摄的图像序列中的光流。此外，评估单元105检测车辆101的行驶运动。由此得到了对象107的预期的光流，评估单元105将该预期的光流与实际光流进行比较。如果存在偏差，则推断出车辆101的倾翻运动。在这种情况下，评估单元105启动对策以稳定车辆101。
24.附图标记列表
25.101
ꢀꢀꢀ
车辆
26.103
ꢀꢀꢀ
摄像机
27.105
ꢀꢀꢀ
评估单元
28.107
ꢀꢀꢀ
对象


技术特征：
1.用于识别车辆(101)的倾翻运动的方法，所述车辆具有至少一个固定在所述车辆(101)上的摄像机(103)，所述方法具有以下步骤：-通过所述摄像机(103)拍摄图像序列；-获知所述图像序列的光流；-获知基于所述车辆(101)的行驶运动和地面的形貌而预期的光流；以及-检查所述图像序列的光流和预期的光流的偏差。2.根据权利要求1所述的方法；其特征在于，获知预期的光流的步骤包括以下子步骤：-获知所述车辆(101)的行驶运动；-获知所述摄像机(103)相对于至少一个由所述摄像机(103)拍摄的对象(107)的基于所述行驶运动和所述形貌而预期的运动；以及-获知基于所述摄像机(103)的运动而预期的光流。3.根据前一项权利要求所述的方法；其特征在于，获知预期的光流的步骤包括以下子步骤：-在所述图像序列中识别所述对象(107)，-获知所述图像序列的将所述对象成像于其中的区域的光流；以及-获知所述区域的基于所述摄像机(103)的运动而预期的光流。4.车辆(101)，所述车辆具有至少一个摄像机(103)和至少一个控制单元(105)；其特征在于，所述控制单元(105)实施根据前述权利要求中任一项所述的方法。

技术总结
本发明涉及用于识别车辆(101)的倾翻运动的方法，车辆具有至少一个固定在车辆(101)上的摄像机(103)，方法具有以下步骤：通过摄像机(103)拍摄图像序列；获知图像序列的光流；获知基于车辆(101)的行驶运动和地面的形貌而预期的光流；以及检查图像序列的光流和预期的光流的偏差。的偏差。的偏差。


技术研发人员：马库斯
受保护的技术使用者：ZF腓德烈斯哈芬股份公司
技术研发日：2020.11.09
技术公布日：2022/6/21