显示控制装置、显示控制方法及记录有程序的记录介质与流程

1.本公开涉及对使显示装置显示的图像进行控制的显示控制装置、显示控制方法以及记录介质。


背景技术：

2.日本特开2013
‑
190957号公报中公开了一种在间隙声呐检测到障碍物时将显示器的显示自动切换为由照相机拍摄到的图像的周边监视装置。
3.日本特开2013－190957号公报的周边监视装置虽然能够将障碍物的存在通知给驾驶员，但对于驾驶员而言，存在难以掌握在哪个方向存在障碍物的情况。


技术实现要素：

4.本公开的目的在于，提供在产生了障碍物的接近等应该通知给驾驶员的事件的情况下驾驶员能够容易地掌握该事件在何处发生的显示控制装置、显示控制方法以及记录介质。
5.第1方式涉及显示控制装置，具备：收集部，从对车辆之外进行拍摄的拍摄部收集拍摄图像；生成部，在基于上述车辆的周边的周边信息检测到应该通知给上述车辆的驾驶员的事件的情况下生成中断图像，该中断图像包括上述事件所涉及的上述拍摄图像以及表示相对于上述车辆的发生了上述事件的方向的信息；以及处理部，进行使通知区域显示所生成的上述中断图像的处理，该通知区域是上述车辆的驾驶员能够目视确认的显示装置的显示区域的一部分。
6.对于第1方式的显示控制装置而言，收集部对由拍摄部拍摄到的拍摄图像进行收集，在基于周边信息检测到应该通知给车辆的驾驶员的事件的情况下，生成部生成使显示装置显示的中断图像。该中断图像包括事件所涉及的拍摄图像和表示相对于车辆发生该事件的方向的信息。这里，“应该通知给驾驶员的事件”包括驾驶员驾驶的车辆与障碍物、其他车辆以及行人等接近的情况；车辆要从车道突出的情况；新的标志的出现或存在限制的情况等。
7.而且，在该显示控制装置中，处理部进行使作为显示装置的显示区域的一部分的通知区域显示中断图像的处理。根据该显示控制装置，由于在产生了应该通知给驾驶员的事件的情况下，将该事件所涉及的图像及其产生方向一同通知给驾驶员，所以驾驶员能够容易地掌握该事件在何处发生。
8.第2方式的显示控制装置在第1方式的显示控制装置的基础上提出，其中，在基于上述周边信息检测到上述事件的情况下，上述处理部进行在上述显示装置中使上述中断图像从上述方向朝向上述通知区域滑入的显示。
9.在第2方式的显示控制装置中，在产生了应该通知给驾驶员的事件的情况下，执行使中断图像滑入至通知区域的处理。因此，根据该显示控制装置，驾驶员能够直观地感到应该通知的事件的产生及其产生的方向。
10.第3方式的显示控制装置在第2方式的显示控制装置的基础上提出，其中，在基于上述周边信息的上述事件的检测结束的情况下，上述处理部进行在上述显示装置中使显示于上述通知区域的上述中断图像朝向上述方向滑出的显示。
11.在第3方式的显示控制装置中，在通知给驾驶员的事件结束的情况下，执行中断图像从通知区域滑出的处理。因此，根据该显示控制装置，驾驶员能够直观地感到应该通知的事件的结束。
12.第4方式的显示控制装置在第1～第3中任一个方式的显示控制装置的基础上提出，其中，上述事件是障碍物相对于上述车辆的接近，上述中断图像包括俯瞰上述车辆的车辆图像和表示上述障碍物的接近程度的等级图像。
13.在第4方式的显示控制装置中，由于在检测到障碍物相对于车辆的接近的情况下，在中断图像中显示俯瞰车辆的车辆图像，所以驾驶员能够正确地掌握障碍物相对于车辆存在的方向。另外，在该显示控制装置中，由于在中断图像中显示表示障碍物的接近程度的等级图像，所以驾驶员能够直观地感到直至障碍物为止的距离感。
14.第5方式涉及显示控制方法，其中，包括：收集处理，从对车辆之外进行拍摄的拍摄部收集拍摄图像；生成处理，在基于上述车辆的周边的周边信息检测到应该通知给上述车辆的驾驶员的事件的情况下，生成中断图像，该中断图像包括上述事件所涉及的上述拍摄图像以及表示相对于上述车辆的发生了上述事件的方向的信息；以及中断处理，进行使通知区域显示所生成的上述中断图像的处理，该通知区域是上述车辆的驾驶员能够目视确认的显示装置的显示区域的一部分。
15.在第5方式的显示控制方法中，当在收集处理中收集由拍摄部拍摄到的拍摄图像，并基于周边信息检测到应该通知给车辆的驾驶员的事件的情况下，在生成处理中生成被显示于显示装置的中断图像。“中断图像”以及“应该通知给驾驶员的事件”与上述相同。而且，在该显示控制方法中，在中断处理中进行使作为显示装置的显示区域的一部分的通知区域显示中断图像的处理。根据该显示控制方法，由于在产生了应该通知给驾驶员的事件的情况下，将该事件所涉及的图像及其产生方向一同通知给驾驶员，所以驾驶员能够容易地掌握该事件在何处发生。
16.第6方式涉及记录有程序的非暂时性记录介质。该程序使计算机执行包括如下处理的处理：收集处理，从对车辆之外进行拍摄的拍摄部收集拍摄图像；生成处理，在基于上述车辆的周边的周边信息检测到应该通知给上述车辆的驾驶员的事件的情况下生成中断图像，该中断图像包括上述事件所涉及的上述拍摄图像以及表示相对于上述车辆的发生了上述事件的方向的信息；以及中断处理，使通知区域显示所生成的上述中断图像，该通知区域是上述车辆的驾驶员能够目视确认的显示装置的显示区域的一部分。
17.根据第6方式的非暂时性记录介质所记录的程序，计算机执行如下处理。即，在该计算机中，当在收集处理中收集由拍摄部拍摄到的拍摄图像，并基于周边信息检测到应该通知给车辆的驾驶员的事件的情况下，在生成处理中生成使显示装置显示的中断图像。“中断图像”以及“应该通知给驾驶员的事件”与上述相同。然后，在该计算机中，在中断处理中进行使作为显示装置的显示区域的一部分的通知区域显示中断图像的处理。根据记录有该程序的记录介质，由于在产生了应该通知给驾驶员的事件的情况下，将该事件所涉及的图像及其产生方向一同通知给驾驶员，所以驾驶员能够容易地掌握该事件在何处发生。
18.根据本公开，在产生了障碍物的接近等应该通知给驾驶员的事件的情况下，驾驶员能够容易地掌握该事件在何处发生。
附图说明
19.基于下图对本发明的示例性实施例详细进行说明，其中：
20.图1是表示实施方式所涉及的设置于车辆的显示系统的外观的图。
21.图2是表示实施方式的显示系统的硬件结构的框图。
22.图3是表示实施方式的显示控制装置中的cpu的功能结构的例子的框图。
23.图4是表示在实施方式的显示控制装置中执行的图像显示处理的流程的流程图。
24.图5a是实施方式的中心显示器中的显示的例子，表示通常显示。
25.图5b是实施方式的中心显示器中的显示的例子，表示渐入(fade
‑
in)的样子。
26.图5c是实施方式的中心显示器中的显示的例子，表示中断显示。
27.图5d是实施方式的中心显示器中的显示的例子，表示渐出的样子。
具体实施方式
28.使用附图对包括本实施方式的显示控制装置20的显示系统10进行说明。其中，对于图1以及图5a～图5d的显示装置30的显示而言，表述为上下左右的情况是指驾驶员观察显示装置30的情况下的朝向。
29.(基本结构)
30.如图1以及图2所示，本实施方式的显示系统10被搭载于车辆12。显示系统10构成为除了包括显示控制装置20之外还包括显示装置30、adas(advanced driver assistance system：先进驾驶辅助系统)40以及汽车导航系统50。
31.显示控制装置20、adas40所具有的adas
‑
ecu(electronic control unit)42以及汽车导航系统50所具有的汽车导航ecu52经由外部总线22相互连接。
32.(显示装置)
33.显示装置30构成为包括中心显示器32、仪表显示器34以及仰视显示器36。
34.如图1所示，中心显示器32是设置于仪表板14的车宽方向中央的液晶显示器。中心显示器32相对于画面整体的显示区域32a在左侧大致2/3具有信息区域32b，在右侧大致1/3具有通知区域32c。在信息区域32b显示与汽车导航系统50相关的图像、例如表示车辆12的当前位置的地图图像、将车辆12引导至目的地为止的图像。另外，在通知区域32c显示汽车导航系统50所具备的音频功能所涉及的图像、后述的中断图像80。中心显示器32是车辆12的驾驶员能够目视确认的显示装置的一个例子。
35.仪表显示器34是在就坐于座椅的驾驶员的正面侧的仪表板14中在中心显示器32的车宽方向右侧邻接设置的液晶显示器。在仪表显示器34显示车速、发动机转速、行驶距离等与车辆12的行驶相关的信息、以及警告灯、灯光类的动作状况等车辆12的状态所涉及的信息。
36.仰视显示器36是在仪表显示器34的车辆上方侧的前窗16上具有投影面16a的投影装置。仰视显示器36在驾驶操作中的驾驶员的视线的前方具有投影面16a。在仰视显示器36显示车速、车辆12的行进方向、转向开关的操作位置等向驾驶员报告的信息中的优先级高
的信息。
37.(adas)
38.如图2所示，adas40构成为除了包括adas
‑
ecu42之外还包括作为拍摄装置的监视照相机44和监视传感器46。
39.监视照相机44被设置于前窗的上部、前格栅、车门后视镜下部、尾门等车辆12的各部，对车辆12的外部进行拍摄。监视传感器46是对车辆12的周边的周边信息进行检测的传感器组。监视传感器46包括设置于车身的各部的多个毫米波雷达，检测车辆12的周围的障碍物。此外，监视传感器46也可以包括扫描规定范围的激光雷达(laser imaging detection and ranging)。
40.adas
‑
ecu42具有向其他ecu提供周边信息、在需要的情况下控制转向装置、制动器的功能。adas
‑
ecu42构成为包括cpu(central processing unit)、rom(read only memory)、ram(random access memory)、通信i/f(inter face)以及输入输出i/f(inter face)等。
41.adas
‑
ecu42基于从设置于车辆12的周围的各监视传感器46接收到的检测信息来生成周边信息。此外，adas
‑
ecu42也可以构成为除了基于各监视传感器46的检测信息之外还基于设置于车辆12的各部的监视照相机44的拍摄信息来生成周边信息。另外，adas
‑
ecu42基于所生成的周边信息来进行车辆12与障碍物是否正在接近的判定。这里，“车辆12与障碍物正在接近的情况”包括障碍物朝向车辆12接近的情况和车辆12朝向障碍物接近的情况双方。在判定为车辆12与障碍物正在接近的情况下，adas
‑
ecu42将表示接近的信息亦即接近信息发送至显示控制装置20。
42.(汽车导航系统)
43.汽车导航系统50构成为除了包括汽车导航ecu52之外还包括gps接收器54和储存器56。本实施方式的汽车导航系统50至少具备汽车导航功能以及音频功能双方。
44.gps接收器54从多个gps卫星接收gps信号来对车辆12的当前位置进行定位。
45.储存器56由hdd(hard diskdrive)或者ssd(solid state drive)构成，存储有地图数据以及音乐数据。
46.汽车导航ecu52具有生成直至车辆12的目的地为止的行驶路径、基于位置信息将车辆12引导至目的地为止的功能。汽车导航ecu52构成为包括cpu、rom、ram、通信i/f以及输入输出i/f等。
47.本实施方式的汽车导航ecu52基于从兼作触摸面板的中心显示器32输入的目的地信息以及存储于储存器56的地图数据等来设定直至目的地为止的路径。另外，汽车导航ecu52基于从gps接收器54接收到的位置信息来使中心显示器32显示对车辆12的当前位置进行表示的地图、将车辆12引导至目的地为止的画面。
48.(显示控制装置)
49.显示控制装置20构成为包括cpu(central processing unit)20a、rom(read only memory)20b、ram(random access memory)20c、通信i/f(inter face)20e以及输入输出i/f(inter face)20f。cpu20a、rom20b、ram20c、通信i/f20e以及输入输出i/f20f经由内部总线20g连接为相互能够通信。
50.cpu20a是中央运算处理单元，执行各种程序、控制各部。即，cpu20a从rom20b读出
程序，并将ram20c作为作业区域来执行程序。cpu20a是处理器的一个例子。
51.rom20b存储有各种程序以及各种数据。在本实施方式的rom20b中存储有控制程序200以及图像数据210。控制程序200是用于进行后述的图像显示处理的程序。在图像数据210中存储有显示于各显示装置30的图标的图像、和显示于中心显示器32的车辆图像82以及等级图像84等各数据。
52.ram20c作为作业区域而暂时存储程序或者数据。
53.通信i/f20e是用于与adas
‑
ecu42以及汽车导航ecu52连接的接口。该接口可使用基于can(controller area network)协议的通信标准。通信i/f20e与外部总线22连接。此外，通信i/f20e的通信方式并不局限于can，也可以采用以太网(注册商标)等lan标准。
54.输入输出i/f20f是用于与中心显示器32、仪表显示器34、以及仰视显示器36的各显示装置30进行通信的接口。
55.图3是表示显示控制装置20的功能结构的例子的框图。各功能结构通过cpu20a读出存储于rom20b的控制程序200并执行该控制程序200来实现。本实施方式的cpu20a通过控制程序200的执行而作为收集部250、取得部260、生成部270以及处理部280发挥功能。
56.收集部250具有对由车辆12的外部的监视照相机44拍摄到的拍摄图像进行收集的功能。具体而言，收集部250从adas40取得由各监视照相机44拍摄到的各个拍摄图像。
57.取得部260具有取得表示车辆12与障碍物正在接近这一情况的接近信息的功能。当adas40基于车辆12的周边的周边信息判定为在监视传感器46的检测范围存在障碍物的情况下，该接近信息被发送至显示控制装置20。
58.接近信息中包括表示车辆12与障碍物接近的程度的程度信息。另外，取得部260通过确定多个监视传感器46中的检测到障碍物的监视传感器46，能够判断障碍物的方向。
59.生成部270具有生成中断图像80的功能，该中断图像80是对于中心显示器32的通知区域32c插入的图像，包括正接近车辆12的障碍物所涉及的拍摄图像和表示障碍物相对于车辆12的方向、接近的程度的图像。如图5c所示，中断图像80具体包括俯瞰车辆12的车辆图像82、表示障碍物接近的程度的等级图像84、以及障碍物本身的对象图像86。
60.车辆图像82是存储于图像数据210的图像，是从上方眺望车辆12的影像图像。等级图像84是存储于图像数据210的扇状形状的图像，相对于车辆12在障碍物存在的方向具有弧形，且障碍物越接近车辆12则被分配越大的图像。中断图像80中的除了车辆图像82以及等级图像84以外的周围的部分能够通过利用公知的方法将设置于车辆12的各部的多个监视照相机44的各拍摄图像合成来获得。等级图像84相对于车辆图像82的显示位置等于障碍物相对于车辆12的方向。在取得部260从adas40取得了接近信息的情况下，本实施方式的生成部270生成中断图像80。
61.处理部280执行使各显示装置30显示图像的处理。本实施方式的处理部280进行使中心显示器32的通知区域32c显示在生成部270中生成的中断图像80的处理。
62.这里，在通过取得部260从adas40取得接近信息而检测为车辆12与障碍物正在接近的情况下，处理部280使通知区域32c显示中断图像80。详细而言，以检测到车辆12与障碍物的接近为契机，处理部280执行在中心显示器32上使中断图像80从与障碍物相对于车辆12的方向相同的方向朝向通知区域32c滑入(slide in)的动画。
63.另外，在取得部260结束接近信息的取得而不再进行车辆12与障碍物的接近所涉
及的检测的情况下，处理部280使中断图像80从通知区域32c移动。详细而言，以车辆12与障碍物的接近所涉及的检测的结束为契机，处理部280执行在中心显示器32上使显示于通知区域32c的中断图像80向与障碍物相对于车辆12的方向相同的方向滑出(slide out)的动画。
64.(控制的流程)
65.在本实施方式中，使用图4的流程图与图5a～图5d的画面的例子来对显示控制装置20对于中心显示器32执行的图像显示处理的流程进行说明。图4以及图5a～图5d是在车辆12的左前方检测到障碍物的情况下的处理的流程的例子。
66.在图4的步骤s100中，cpu20a对于中心显示器32执行通常显示。如图5a所示，在通常显示中，在信息区域32b显示有在汽车导航系统50中生成的地图图像，在通知区域32c显示有音频功能所涉及的图像。
67.在图4的步骤s101中，cpu20a进行是否检测到障碍物的判定。即，通过接收接近信息来进行车辆12与障碍物是否接近的判定。cpu20a在判定为检测到障碍物的情况下，进入至步骤s102。另一方面，cpu20a在判定为未检测到障碍物的情况下，返回至步骤s100。
68.在步骤s102中，cpu20a进行是否允许对于通知区域32c显示中断图像80的判定。cpu20a在判定为允许对于通知区域32c显示中断图像80的情况下，进入至步骤s103。另一方面，cpu20a在判定为不允许对于通知区域32c显示中断图像80的情况下，返回至步骤s100。其中，作为不允许显示中断图像80的例子，有在汽车导航系统50的设定中禁止了中断图像80的设定的情况、车辆12完全停止且驻车制动器(side brake)正工作的情况等。
69.在步骤s103中，cpu20a执行使中断图像80滑入的动画。具体而言，cpu20a执行在使中断图像80渐入至信息区域32b的右侧之后使中断图像80朝向通知区域32c滑入的动画。由此，如图5b所示，驾驶员能够识别为从与障碍物的方向相同的左侧朝向通知区域32c插入了中断图像80。
70.在图4的步骤s104中，cpu20a执行使通知区域32c显示中断图像80的中断显示。即，如图5c所示，cpu20a维持滑入至通知区域32c的中断图像80的显示。
71.另外，cpu20a在仰视显示器36中显示对监视传感器46的检测等级进行表示的等级栏(level bar)图像90。该情况下，等级栏图像90在仰视显示器36中被显示在与障碍物的方向相同的方向。即，在本图的例子中，显示在仰视显示器36的投影面16a的左端。等级栏图像90用明暗、色彩的变化或者颜色的深浅来表示障碍物的接近的程度。对于等级栏图像90而言，接近的程度越增加，则能够越使宽度放大、越强调色彩。
72.在图4的步骤s105中，cpu20a进行障碍物的检测是否结束的判定。cpu20a在判定为障碍物的检测结束的情况下，进入至步骤s106。另一方面，cpu20a在判定为障碍物的检测未结束的情况下，返回至步骤s104。即，cpu20a维持通知区域32c中的中断图像80的显示。
73.在步骤s106中，cpu20a执行使中断图像80滑出的动画。具体而言，cpu20a执行使中断图像80从通知区域32c滑出的动画。由此，如图5d所示，驾驶员能够识别为中断图像80从通知区域32c朝向与障碍物的方向相同的左侧移动。
74.然后，处理返回至步骤s100。即，cpu20a通过使移动至信息区域32b的右侧的中断图像80渐出，由此如图5a所示，再次进行在信息区域32b具有地图图像、并在通知区域32c具有音频功能所涉及的图像的通常显示。
75.(实施方式的总结)
76.对于本实施方式的显示控制装置20而言，收集部250收集由监视照相机44拍摄到的拍摄图像，在基于周边信息检测到车辆12与障碍物的接近的情况下，生成部270生成使中心显示器32显示的中断图像80。该中断图像80包括俯瞰车辆12的车辆图像82、表示障碍物相对于车辆12的方向以及障碍物相对于车辆12的接近程度的等级图像84。
77.然后，在显示控制装置20中，处理部280进行使通知区域32c显示中断图像80的处理，该通知区域32c是中心显示器32的显示区域32a的一部分。根据本实施方式的显示控制装置20，由于如图5c所示，将障碍物的对象图像86与表示障碍物的产生方向的等级图像84一同通知给驾驶员，所以驾驶员能够容易地掌握障碍物位于车辆12的哪个方向。
78.特别在本实施方式中，由于在检测到障碍物相对于车辆12接近的情况下，在中断图像80中显示俯瞰车辆12的车辆图像82，所以驾驶员能够准确地掌握障碍物相对于车辆12存在的方向。另外，在本实施方式中，能够通过等级图像84来表示障碍物的接近的程度，驾驶员能够直观地感到直至障碍物为止的距离感。
79.另外，在本实施方式的显示控制装置20中，在检测到车辆12与障碍物接近的情况下，执行中断图像80滑入至通知区域32c的处理。因此，根据本实施方式，驾驶员能够直观地感到障碍物的接近及其接近的方向。
80.并且，在本实施方式的显示控制装置20中，在车辆12与障碍物的接近的检测结束的情况下，执行中断图像80从通知区域32c滑出的处理。因此，根据本实施方式，驾驶员能够直观地感到障碍物远离了车辆12或者规避了危险。
81.此外，在上述的图4以及图5a～图5d中，例示了在车辆12的左前方检测到障碍物的情况，但在其他方向上检测到障碍物的情况下也可执行同样的处理。例如，当在车辆12的右前方检测到障碍物的情况下，中断图像80从通知区域32c的右侧滑入，在检测结束的情况下，朝向通知区域32c的右侧滑出。该情况下，由于在通知区域32c的右侧不存在显示区域32a，所以中断图像80从通知区域32c的右侧逐渐出现，中断图像80朝向通知区域32c的右侧逐渐消失。另外，当在车辆12的前方、后方检测到障碍物的情况下也同样能够使中断图像80沿上下方向进行滑入以及滑出。
82.[备注]
[0083]
在本实施方式中，当检测到车辆12与障碍物接近的情况下，执行使通知区域32c显示中断图像80的处理，但只要是“应该通知给驾驶员的事件”即可，并不局限于此。例如，作为“应该通知给驾驶员的事件”，存在车辆12与其他物体例如其他车辆、自行车、行人等接近的情况；车辆要从车道突出的情况；新的标志的出现或存在限制的情况等。根据本实施方式，在检测到应该通知给驾驶员的事件的情况下，能够执行使通知区域32c显示中断图像80的处理。
[0084]
在本实施方式中，构成为在adas40基于监视传感器46的周边信息判定为存在障碍物的情况下，将接近信息发送给显示控制装置20，但并不局限于此。例如，显示控制装置20可以从adas40直接取得周边信息并且基于所取得的周边信息判定为存在障碍物。
[0085]
本实施方式的中断图像80中的车辆图像82是俯瞰车辆12的图像，但并不局限于此，也可以是由一个监视照相机44对车辆12的拍摄图像。
[0086]
在本实施方式中，中断图像80的滑动的速度被固定，但也可以根据应该通知给驾
驶员的事件的通知的紧急度、即根据接近的程度而变化。例如，当在车辆12与障碍物尚在分离的阶段检测到障碍物的情况下，缓慢地进行滑入，当在车辆12与障碍物已经在接近的阶段检测到障碍物的情况下，迅速进行滑入。即，在检测到障碍物的情况下，与障碍物的距离越近，则越提高中断图像80的滑动的速度。另外，也可以根据障碍物的种类例如是固定物还是移动物来使滑动的速度、方式变化。
[0087]
此外，上述实施方式中由cpu20a读入软件(程序)而执行的各种处理也可以由cpu以外的各种处理器执行。作为该情况下的处理器，可例示fpga(field
‑
programmable gate array)等能够在制造后变更电路结构的pld(programmable logic device)以及asic(application specific integrated circuit)等具有为了执行特定的处理而被设计成专用的电路结构的处理器亦即专用电路等。另外，上述的处理可以由上述的各种处理器中的1个执行，也可以由同种类或者不同种类的2个以上处理器的组合(例如多个fpga、以及cpu与fpga的组合等)来执行。另外，上述的各种处理器的硬件构造更具体是将半导体元件等电路元件组合而成的电路。
[0088]
另外，在上述实施方式中，以各程序被预先存储(安装)于计算机能够读取的非暂时性记录介质的方式进行了说明。例如，在显示控制装置20中，控制程序200被预先存储于rom20b。然而并不局限于此，各程序也可以以记录于cd
‑
rom(compact disc read only memory)、dvd
‑
rom(digital versatile disc read only memory)以及usb(universal serial bus)存储器等非暂时性记录介质的方式来提供。另外，程序也可以是经由网络从外部装置下载的方式。
[0089]
上述实施方式中说明的处理的流程也是一个例子，在不脱离主旨的范围内可以删除不需要的步骤、追加新的步骤、更换处理顺序。