一种用于多显示设备的扩展方法及系统与流程

1.本发明涉及多设备拓展相关领域，具体是一种用于多显示设备的扩展方法及系统。


背景技术：

2.随着计算机技术的快速发展，以及同时对大量信息进行获取和监测的需求，多显示设备的终端交互系统逐渐被广泛的使用于众多的领域和场景中，包括且不限于个人娱乐以及专业生产测试等用途。
3.现有技术中的多显示设备拓展系统更多的是对多显示设备的显示内容管理以及多显示设备间的显示配合方式进行管理和限制，在某些特定的诸如三维模拟输出等场景中，缺乏可靠的拓展系统和方法，导致仅通过增加显示设备的数量并不能有效的提升使用体验。


技术实现要素：

4.本发明的目的在于提供一种用于多显示设备的扩展方法及系统，以解决上述背景技术中提出的问题。
5.为实现上述目的，本发明提供如下技术方案：
6.一种用于多显示设备的扩展系统，包含：
7.设备接入模块，用于与多个显示设备建立数据连接，多个所述显示设备均为被控图像输出设备，并分别对多个所述显示设备设置显示次序，所述显示次序用于表征多个所述显示设备在使用中的主次顺序；
8.任务关联模块，用于获取多组图像输出内容以及多组所述图像输出内容间的输出关联信息以及空间关联信息，所述输出关联信息表征多组所述图像输出内容间在通过显示设备输出时的信息关联性，具有信息关联性的多组所述图像输出内容需要通过多个所述显示设备以相同优先级输出，所述空间关联信息用于表征多组所述图像输出内容在虚拟图像空间中的位置关系；
9.对象追随模块，用于通过传感组获取使用对象的空间位置数据，所述空间位置数据用于表征所述使用对象与主显示设备的相对空间关系；
10.阵列校正模块，用于获取所述空间关联信息，并基于所述空间关联信息以及预设的空间校正程序对多个所述显示设备进行虚拟空间位置的模拟，通过所述空间位置数据对所述使用对象在所述显示设备所在区域的视角范围进行模拟，生成多组输出校正图像并通过相对应的所述显示设备输出。
11.作为本发明的进一步方案：还包括设备空间校正模块；
12.所述空间校正模块，用于获取所述空间关联信息，并根据所述空间关联信息生成多个分别与所述显示设备相对应的空间位移向量，对应输出所述空间位移向量，用于控制调整所述显示设备的空间位置。
13.作为本发明的再进一步方案：所述对象追随模块还包括：
14.对象监测单元，用于通过传感设备实时获取所述使用对象的头运动信息以及眼运动信息，所述头运动信息用于表征所述使用对象的头部坐标系相对于主显示设备的空间关系变化，所述眼运动信息用于表征所述使用对象双眼坐标系相对于头部坐标系的空间关系变化；
15.聚焦分析单元，用于根据所述头运动信息与所述眼运动信息对所述使用对象的视觉聚焦区域进行判断，获取对象聚焦区域。
16.作为本发明的再进一步方案：还包括资源再划分模块；
17.所述资源再划分模块，用于获取所述对象聚焦区域，若所述对象聚焦区域与某一组所述图像输出内容的所述空间关联信息重合，则在重合持续的时间段内，将该对象聚焦区域与所述图像输出内容所在空间区域的重合区域设置为主渲染区域，所述主渲染区域用于表征多个所述图像输出内容中渲染精度最高内容的所在区域。
18.作为本发明的再进一步方案：还包括用户记忆模块；
19.所述用户记忆模块，用于存储多个所述显示设备的常规空间关联信息，所述常规空间关联信息与使用对象相对应，所述常规空间关联信息用于当所述空间关联信息为空时，生成用于调整控制所述显示设备的空间位置的空间位移向量。
20.本发明实施例旨在提供一种用于多显示设备的扩展方法，包括步骤：
21.与多个显示设备建立数据连接，多个所述显示设备均为被控图像输出设备，并分别对多个所述显示设备设置显示次序，所述显示次序用于表征多个所述显示设备在使用中的主次顺序；
22.获取多组图像输出内容以及多组所述图像输出内容间的输出关联信息以及空间关联信息，所述输出关联信息表征多组所述图像输出内容间在通过显示设备输出时的信息关联性，具有信息关联性的多组所述图像输出内容需要通过多个所述显示设备以相同优先级输出，所述空间关联信息用于表征多组所述图像输出内容在虚拟图像空间中的位置关系；
23.通过传感组获取使用对象的空间位置数据，所述空间位置数据用于表征所述使用对象与主显示设备的相对空间关系；
24.获取所述空间关联信息，并基于所述空间关联信息以及预设的空间校正程序对多个所述显示设备进行虚拟空间位置的模拟，通过所述空间位置数据对所述使用对象在所述显示设备所在区域的视角范围进行模拟，生成多组输出校正图像并通过相对应的所述显示设备输出。
25.作为本发明的进一步方案：所述获取所述空间关联信息，并根据所述空间关联信息生成多个分别与所述显示设备相对应的空间位移向量，对应输出所述空间位移向量，用于控制调整所述显示设备的空间位置。
26.作为本发明的再进一步方案：还包括步骤：
27.通过传感设备实时获取所述使用对象的头运动信息以及眼运动信息，所述头运动信息用于表征所述使用对象的头部坐标系相对于主显示设备的空间关系变化，所述眼运动信息用于表征所述使用对象双眼坐标系相对于头部坐标系的空间关系变化；
28.根据所述头运动信息与所述眼运动信息对所述使用对象的视觉聚焦区域进行判
断，获取对象聚焦区域。
29.作为本发明的再进一步方案：还包括步骤：
30.获取所述对象聚焦区域，若所述对象聚焦区域与某一组所述图像输出内容的所述空间关联信息重合，则在重合持续的时间段内，将该对象聚焦区域与所述图像输出内容所在空间区域的重合区域设置为主渲染区域，所述主渲染区域用于表征多个所述图像输出内容中渲染精度最高内容的所在区域。
31.作为本发明的再进一步方案：还包括常规空间关联信息，所述常规空间关联信息与使用对象相对应，所述常规空间关联信息用于当所述空间关联信息为空时，生成用于调整控制所述显示设备的空间位置的空间位移向量。
32.与现有技术相比，本发明的有益效果是：实现了更加智能化以及场景化的多屏控制实现方式，实现了在特定的多屏使用场景时多显示设备的智能空间位置优化和输出内容的视角模拟调节，能够为使用对象提供更加沉浸和真实的体验，优化了多显示设备组合所带来的效果提升；进一步的，也能够实现对有限算力资源的合理分配，以提供给使用对象质量更优秀的图像内容使用体验。
附图说明
33.图1为一种用于多显示设备的扩展系统的组成框图。
34.图2为一种用于多显示设备的扩展方法的流程框图。
具体实施方式
35.为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
36.以下结合具体实施例对本发明的具体实现方式进行详细描述。
37.如图1所述，为本发明一个实施例提供的一种用于多显示设备的扩展系统，包括：
38.设备接入模块100，用于与多个显示设备建立数据连接，多个所述显示设备均为被控图像输出设备，并分别对多个所述显示设备设置显示次序，所述显示次序用于表征多个所述显示设备在使用中的主次顺序。
39.任务关联模块300，用于获取多组图像输出内容以及多组所述图像输出内容间的输出关联信息以及空间关联信息，所述输出关联信息表征多组所述图像输出内容间在通过显示设备输出时的信息关联性，具有信息关联性的多组所述图像输出内容需要通过多个所述显示设备以相同优先级输出，所述空间关联信息用于表征多组所述图像输出内容在虚拟图像空间中的位置关系。
40.对象追随模块500，用于通过传感组获取使用对象的空间位置数据，所述空间位置数据用于表征所述使用对象与主显示设备的相对空间关系。
41.阵列校正模块700，用于获取所述空间关联信息，并基于所述空间关联信息以及预设的空间校正程序对多个所述显示设备进行虚拟空间位置的模拟，通过所述空间位置数据对所述使用对象在所述显示设备所在区域的视角范围进行模拟，生成多组输出校正图像并通过相对应的所述显示设备输出。
42.本实施例中，给出了一种用于多显示设备的扩展系统，其用于对多设备显示系统的控制，实现更加智能化的多屏控制实现方式，以及在应对特定的多屏使用场景时的智能优化和图像输出调节，基于图像输出内容模拟的显示设备空间智能调整以及输出内容的视角模拟，能够为使用对象提供更加沉浸和真实的体验；具体的，其中设备接入模块100的作用是连接多个显示设备并对应设置显示次序，也就是将多个显示设备进行编号设置，例如“主显示设备、左一显示设备、右一显示设备”等，任务关联模块300用于需要进行输出的多组图像输出内容的关联性进行确定，其中包括信息关联性和空间关联性，信息关联性表示相关联的内容是需要进行同时输出的，例如三维环境模拟中同时生成的多个视角的图像，在输出时需要同时以相同的优先级进行输出，而空间关联性则表示这些个视角的图像在空间中的位置关系，例如以坐标系x正方向为前的话，可能包括前、左、右三个视角的图像输出内容，而这三组图像输出内容在空间上是具有一定的位置关系的，这里的位置关系指的便是空间关联性，基于空间关联性，可以让三组图像输出内容在输出后更加贴近真实的情况，此时便要对对象追随模块500以及阵列校正模块700进行说明，其中对象追随模块500的作用是对使用对象的位置进行定位(相对于固定的主显示设备)，然后通过使用对象的位置，阵列校正模块700对处于该位置处的使用对象的视野进行模拟，从而进一步对图像输出内容进行进一步的内容模拟生成，从而模拟输出更加贴近实际的视角画面内容(例如右侧的视角窗口(也就是显示设备可显示的窗口)在使用对象位置处可以观测到的窗口外侧的内容范围(可以通过在汽车内不同位置时，通过车窗可观测区域的变化来理解))。
43.作为本发明另一个优选的实施例，还包括设备空间校正模块；
44.所述空间校正模块，用于获取所述空间关联信息，并根据所述空间关联信息生成多个分别与所述显示设备相对应的空间位移向量，对应输出所述空间位移向量，用于控制调整所述显示设备的空间位置。
45.本实施例中，这里的设备空间校正模块的作用是根据空间关联性对多个显示设备的实际空间相对位置进行调整的相关功能模块，在校正时，以默认初始位置(例如多个显示设备以预设相等的距离在同一平面内设置)，控制显示设备在空间内以一定的空间位移向量位移。
46.作为本发明另一个优选的实施例，所述对象追随模块500还包括：
47.对象监测单元，用于通过传感设备实时获取所述使用对象的头运动信息以及眼运动信息，所述头运动信息用于表征所述使用对象的头部坐标系相对于主显示设备的空间关系变化，所述眼运动信息用于表征所述使用对象双眼坐标系相对于头部坐标系的空间关系变化。
48.聚焦分析单元，用于根据所述头运动信息与所述眼运动信息对所述使用对象的视觉聚焦区域进行判断，获取对象聚焦区域。
49.进一步的，还包括资源再划分模块；
50.所述资源再划分模块，用于获取所述对象聚焦区域，若所述对象聚焦区域与某一组所述图像输出内容的所述空间关联信息重合，则在重合持续的时间段内，将该对象聚焦区域与所述图像输出内容所在空间区域的重合区域设置为主渲染区域，所述主渲染区域用于表征多个所述图像输出内容中渲染精度最高内容的所在区域。
51.本实施例中，进行了对象追随模块500的功能性补充说明，即对于使用对象的头运
动以及眼运动的监测，通过对眼运动和头运动的监测，可以模拟判断出使用对象的视角聚焦区域在球面内的变化，因此通过显示设备的空间位置，可以判断出出使用对象实际在观看的图像输出内容的内容区域，因此可以控制系统进行合理的资源分配，对用户实际观看的区域进行主要的图像内容渲染，通过这样的操作可以以有限的系统算力资源，通过合理的分配来为用户提供更好的使用体验。
52.作为本发明另一个优选的实施例，还包括用户记忆模块；
53.所述用户记忆模块，用于存储多个所述显示设备的常规空间关联信息，所述常规空间关联信息与使用对象相对应，所述常规空间关联信息用于当所述空间关联信息为空时，生成用于调整控制所述显示设备的空间位置的空间位移向量。
54.本实施例中，空间关联信息为空时，可以视为普通场景下的使用状态，无需特殊的显示设备间的空间关系，此时多个显示设备间的空间关系主要取决于用户自身的使用习惯以及舒适性为主，因此通过用户记忆模块来记忆用户根据自身设置的使用状态，在多显示设备执行特殊的空间关系的使用场景后，可以方便快速的进行恢复，方便使用对象的使用。
55.如图2所示，本发明还提供了一种用于多显示设备的扩展方法，其包含步骤：
56.s200，与多个显示设备建立数据连接，多个所述显示设备均为被控图像输出设备，并分别对多个所述显示设备设置显示次序，所述显示次序用于表征多个所述显示设备在使用中的主次顺序。
57.s400，获取多组图像输出内容以及多组所述图像输出内容间的输出关联信息以及空间关联信息，所述输出关联信息表征多组所述图像输出内容间在通过显示设备输出时的信息关联性，具有信息关联性的多组所述图像输出内容需要通过多个所述显示设备以相同优先级输出，所述空间关联信息用于表征多组所述图像输出内容在虚拟图像空间中的位置关系。
58.s600，通过传感组获取使用对象的空间位置数据，所述空间位置数据用于表征所述使用对象与主显示设备的相对空间关系。
59.s800，获取所述空间关联信息，并基于所述空间关联信息以及预设的空间校正程序对多个所述显示设备进行虚拟空间位置的模拟，通过所述空间位置数据对所述使用对象在所述显示设备所在区域的视角范围进行模拟，生成多组输出校正图像并通过相对应的所述显示设备输出。
60.作为本发明另一个优选的实施例，所述获取所述空间关联信息，并根据所述空间关联信息生成多个分别与所述显示设备相对应的空间位移向量，对应输出所述空间位移向量，用于控制调整所述显示设备的空间位置。
61.作为本发明另一个优选的实施例，还包括步骤：
62.通过传感设备实时获取所述使用对象的头运动信息以及眼运动信息，所述头运动信息用于表征所述使用对象的头部坐标系相对于主显示设备的空间关系变化，所述眼运动信息用于表征所述使用对象双眼坐标系相对于头部坐标系的空间关系变化。
63.根据所述头运动信息与所述眼运动信息对所述使用对象的视觉聚焦区域进行判断，获取对象聚焦区域。
64.作为本发明另一个优选的实施例，还包括步骤：
65.获取所述对象聚焦区域，若所述对象聚焦区域与某一组所述图像输出内容的所述
空间关联信息重合，则在重合持续的时间段内，将该对象聚焦区域与所述图像输出内容所在空间区域的重合区域设置为主渲染区域，所述主渲染区域用于表征多个所述图像输出内容中渲染精度最高内容的所在区域。
66.作为本发明另一个优选的实施例，还包括常规空间关联信息，所述常规空间关联信息与使用对象相对应，所述常规空间关联信息用于当所述空间关联信息为空时，生成用于调整控制所述显示设备的空间位置的空间位移向量。
67.应该理解的是，虽然本发明各实施例的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，各实施例中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
68.本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，本技术所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(rom)、可编程rom(prom)、电可编程rom(eprom)、电可擦除可编程rom(eeprom)或闪存。易失性存储器可包括随机存取存储器(ram)或者外部高速缓冲存储器。作为说明而非局限，ram以多种形式可得，诸如静态ram(sram)、动态ram(dram)、同步dram(sdram)、双数据率sdram(ddrsdram)、增强型sdram(esdram)、同步链路(synchlink)dram(sldram)、存储器总线(rambus)直接ram(rdram)、直接存储器总线动态ram(drdram)、以及存储器总线动态ram(rdram)等。
69.本领域技术人员在考虑说明书及实施例处的公开后，将容易想到本公开的其它实施方案。本技术旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。
70.应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。