摄像辅助装置、摄像辅助方法及程序与流程

本发明的技术涉及一种摄像辅助装置、摄像辅助方法及程序。

背景技术：

1、日本特开2010-045587号公报中公开了一种相机装置，其具有：图像摄影部，拍摄图像；图像显示部，至少具备显示图像的画面；抖动检测部，检测由上述图像摄影部拍摄图像时的装置抖动；图像记录部，记录由上述图像摄影部拍摄的图像的信息；相对关系运算部，求出相对关系度参数，该相对关系度参数至少表示由上述图像摄影部刚刚拍摄并记录在上述图像记录部中的第一图像的摄影范围与上述第一图像之后由上述图像摄影部拍摄的第二图像的摄影范围之间的相对位置关系；显示控制部，根据上述相对关系运算部求出的上述相对关系度参数生成用于明示上述摄影范围之间的相对位置关系的图像，并将该图像与上述第二图像一起显示在上述图像显示部的画面上；重复运算部，求出表示上述第一图像的摄影范围与上述第二图像的摄影范围之间的重叠状态的重复度参数；通知部，根据上述重复运算部求出的上述重复度参数，向拍摄者进行规定的通知；以及拍摄控制部，在上述重复运算部求出的上述重复度参数在规定的阈值范围内，并且根据上述抖动检测部的检测输出，能够判断为在上述图像摄影部中拍摄图像时大致没有装置抖动时，使上述图像摄影部拍摄图像。

2、日本特开2020-113843号公报中公开了一种图像摄像辅助装置，其为辅助用于复原对象物体的三维形状模型的多视点图像的拍摄，该图像摄像辅助装置具备：特征点提取部，提取刚刚拍摄对象物体而得的图像数据即摄像完毕图像数据和预览图像数据中的特征点；匹配处理部，检测摄像完毕图像数据和预览图像数据各自的特征点的第1对应点；以及辅助信息通知部，显示重叠了第1对应点的预览图像数据的预览图像，并向该预览图像通知与摄像对应的辅助信息。

3、日本特开2011-139368号公报中公开了一种控制装置，其对摄像装置进行控制，使得对比该摄像装置所具备的拍摄透镜的视场角大的被摄体，一边改变基于该摄像装置的摄影方向一边进行多次拍摄，从而得到以其全部表示该被摄体整体的多张摄影图像，该控制装置具有：基准图像的设定单元，将多张摄影图像中在摄像装置的基准摄影方向上拍摄的摄影图像设定为基准图像；目标尺寸的设定单元，设定相邻的摄影图像之间的重复区域的目标尺寸；摄影范围的获取单元，针对包含基准图像的关注摄影图像，获取在摄像装置中设定的摄影方向上进行被摄体的摄影时得到的该被摄体上的摄影范围；变形后摄影范围的获取单元，获取在对包含基准图像的关注摄影图像的摄影范围内的图像实施基于摄像装置相对于被摄体的位置和摄影方向的透镜像差校正及透视校正时得到的变形后该摄影范围的形状作为关注摄影图像的变形后摄影范围；重复尺寸的计算单元，计算基准图像以外的关注摄影图像的变形后摄影范围和与该变形后摄影范围相邻且摄影方向已经确定的摄影图像的变形后摄影范围重复的重复区域的尺寸；以及摄影方向的设定单元，一边在关注摄影图像的变形后摄影范围和与其相邻且摄影方向已经确定的摄影图像的变形后摄影范围重复的范围中更新基准图像以外的关注摄影图像的摄影方向，一边搜索通过摄影范围的获取单元、变形后摄影范围的获取单元及重复尺寸的计算单元得到的重复区域的尺寸满足目标尺寸的摄影方向，并将该摄影方向设为关注摄影图像的最佳摄影方向，并且，多张摄影图像的每一个通过摄像装置在由摄影方向的设定单元设定的各个最佳摄影方向上进行拍摄。

4、日本特开2008-104179号公报中公开了一种图像文件筛选装置，其从包含图像数据和图像数据的属性信息即图像属性信息的多个图像文件中筛选可用于生成全景图像的图像文件，其中，图像属性信息包含表示摄影时的地理位置的位置信息，图像文件筛选装置具备：图像属性信息读取部，从各图像文件中读取位置信息；以及图像文件筛选部，根据所读取的位置信息，将被确定为摄影时的地理位置相互为规定距离以下的多个图像文件筛选为可用于生成全景图像的图像文件。

5、日本特开2014-115896号公报中公开了一种图像处理装置，其具备：摄像信息分析单元，从附加到图像的摄像信息中提取多个图像之间的一致部位，生成表示不一致的部位的更新信息和表示一致部位的非更新信息；以及布局单元，根据更新信息和非更新信息来切换布局方法。

6、日本特开2007-174301号公报中公开了一种图像摄影装置，其具备：存储器，存储第1摄影完毕图像；移动检测单元，检测图像摄影装置的移动并计算移动方向和移动距离；引导图像创建单元，在显示画面上显示第1摄影完毕图像，并且将该显示的第1摄影完毕图像相对于该显示画面向与移动方向相反的方向根据移动距离进行位移并固定显示，将该位移后残留在显示画面上的固定的图像作为引导图像进行显示；重合图像创建单元，图像摄影装置将当前拍摄中的当前图像和引导图像重叠显示在显示画面上；以及当前图像获取单元，在检测出按下摄影按钮时将当前图像作为第2摄影完毕图像存储在存储器中。

7、日本专利第4622797号公报中公开了一种图像合成装置，其具备：检测单元，检测多个图像数据的重复部分；被摄体检测单元，检测包含在检测出的重复部分中的相互不同的被摄体；接收单元，接收选择检测出的被摄体中的任意一方或双方的指示；以及合成单元，以包含选择出的被摄体的方式合成多个图像数据。

8、日本专利第6441586号公报中公开了一种信息处理装置，其具备：第1计算处理模块，能够通过以时钟为单位的控制以一定速度执行以下处理：以一定速率接受图像帧的数据输入的输入处理、通过对所输入的图像帧并行处理用于评价是否是特征点的运算来检测多个特征点的检测处理及通过并行处理而生成分别描述多个特征点的特征的多个描述符的描述处理；以及第2计算处理模块，能够对由第1计算处理模块检测和描述的各图像帧的多个特征点执行在图像帧之间求出对应关系的处理及根据对应关系进行位置估计的位置估计处理。

技术实现思路

1、本发明的技术所涉及的一个实施方式提供一种摄像辅助装置、摄像辅助方法及程序，与例如按照得到多个摄像完毕图像的顺序来确定与摄像完毕图像的重叠率为规定的重叠率以上的摄像对象区域的情况相比，能够以高自由度确定与摄像完毕图像的重叠率为规定的重叠率以上的摄像对象区域。

2、用于解决技术课题的手段

3、本发明的技术所涉及的第1方式是一种摄像辅助装置，其具备处理器，其中，处理器进行如下处理：根据与多个摄像完毕图像的各个的位置相关的第1位置信息和与摄像装置的位置相关的第2位置信息，从多个摄像完毕图像中提取作为与基于摄像装置的摄像对象区域重叠的候选的重叠候选图像；导出摄像对象区域与重叠候选图像的重叠率；及在重叠率为规定的重叠率以上的情况下，对摄像装置输出第1信号。

4、本发明的技术所涉及的第2方式在第1方式所涉及的摄像辅助装置中，第1位置信息包括表示多个摄像完毕图像的各个的位置的图像映射(iamge map)。

5、本发明的技术所涉及的第3方式在第1方式或第2方式所涉及的摄像辅助装置中，第1信号包括对摄像装置指示摄像对象区域的摄像的摄像指示信号。

6、本发明的技术所涉及的第4方式在第3方式所涉及的摄像辅助装置中，处理器生成关联信息，该关联信息是将重叠率为规定的重叠率以上的重叠候选图像即第1摄像完毕图像与根据摄像指示信号由摄像装置拍摄而得到的第2摄像完毕图像相关联的信息。

7、本发明的技术所涉及的第5方式在第4方式所涉及的摄像辅助装置中，关联信息包括与第1摄像完毕图像和第2摄像完毕图像中共同包含的特征点相关的特征点信息。

8、本发明的技术所涉及的第6方式在第4方式或第5方式所涉及的摄像辅助装置中，处理器根据关联信息合成第1摄像完毕图像和第2摄像完毕图像，由此生成合成图像。

9、本发明的技术所涉及的第7方式在第6方式所涉及的摄像辅助装置中，处理器包括生成合成图像的合成用处理器。

10、本发明的技术所涉及的第8方式在第4方式至第7方式中任一方式所述的摄像辅助装置中，多个摄像完毕图像包括第2摄像完毕图像，处理器根据与第2摄像完毕图像的位置相关的第3位置信息，更新第1位置信息。

11、本发明的技术所涉及的第9方式在第1方式至第8方式中任一方式所述的摄像辅助装置中，第2位置信息是与摄像对象区域的位置相关的信息。

12、本发明的技术所涉及的第10方式在第9方式所涉及的摄像辅助装置中，第2位置信息是根据与摄像装置的位置相关的第4位置信息、与摄像对象区域和摄像装置之间的距离相关的距离信息以及与摄像装置相对于摄像对象区域的姿势相关的姿势信息而生成的信息。

13、本发明的技术所涉及的第11方式在第1方式至第10方式中任一方式所述的摄像辅助装置中，在重叠率小于规定的重叠率的情况下，处理器输出表示变更摄像装置的位置和/或姿势的指示的变更指示信号。

14、本发明的技术所涉及的第12方式在第11方式所涉及的摄像辅助装置中，处理器根据第1位置信息和第2位置信息，生成变更指示信号。

15、本发明的技术所涉及的第13方式是一种摄像辅助方法，其具备如下步骤：根据与多个摄像完毕图像的各个的位置相关的第1位置信息和与摄像装置的位置相关的第2位置信息，从多个摄像完毕图像中提取作为与基于摄像装置的摄像对象区域重叠的候选的重叠候选图像；导出摄像对象区域与重叠候选图像的重叠率；及在重叠率为规定的重叠率以上的情况下，对摄像装置输出第1信号。

16、本发明的技术所涉及的第14方式是一种程序，其用于使计算机执行包括如下步骤的处理：根据与多个摄像完毕图像的各个的位置相关的第1位置信息和与摄像装置的位置相关的第2位置信息，从多个摄像完毕图像中提取作为与基于摄像装置的摄像对象区域重叠的候选的重叠候选图像；导出摄像对象区域与重叠候选图像的重叠率；及在重叠率为规定的重叠率以上的情况下，对摄像装置输出第1信号。