信号处理装置、信号处理方法、数据结构和数据制造方法与流程

本技术涉及用于通过使用ai模型对输入图像执行人工智能(ai)处理的信号处理装置和信号处理方法、供信号处理装置使用的数据的数据结构以及用于生成数据的数据生成方法。

背景技术：

1、如以下引用的专利文献1中公开的，存在使用诸如深度神经网络(dnn)的人工智能(ai)模型来执行处理(以下称为“ai处理”)的技术。

2、引用列表

3、专利文献

4、专利文献1：jp-t-2019-509566。

技术实现思路

1、技术问题

2、在该背景下提出的想法是相机可以配备有ai处理功能。具体地，例如，相机可以被赋予通过使用ai模型对捕获图像执行图像识别处理的功能。

3、例如，可以配置一种系统，在该系统中，多个配备有ai处理功能的相机被设置为监控相机，对由相机捕获的图像执行的图像识别处理的结果(例如，识别诸如人和车辆的监控目标的处理)被发送至用户的信息处理装置，并且该信息处理装置分析监控目标的移动等。

4、每个相机拥有ai处理功能消除了信息处理装置在分析监控目标时从各个相机接收到捕获图像时执行ai处理的需要。这有助于减轻信息处理装置的处理负担。

5、因为不需要每个相机将捕获图像发送至信息处理装置，所以还可以减少在实现监控目标分析时的数据通信量。此外，在不需要发送捕获图像的情况下，还可以防止对图像中可能泄露的对象的隐私侵犯。

6、现在考虑管理配备有ai处理功能的成像系统(诸如以上概述的系统)的业务。具体地，这可以是管理配备有ai处理功能的成像系统(诸如被设计为实现ai处理功能的销售ai模型或提供用于更新ai模型的服务)的业务。

7、在制定这种业务时，期望获得越来越多的作为客户端的成像系统所有者以便提高销售额。在这种情况下，由于高冲击成本，难以要求客户端新引入配备有ai处理功能的成像系统。同时，存在一定数量的不具有ai处理功能的成像系统的所有者。如果存在向没有ai处理功能的这种成像系统添加ai处理功能的方式，则更容易增加客户端的数量，这将是商业优势。

8、鉴于上述情况，设计了本技术，并且本技术旨在实现一种信号处理装置，其可以将ai处理功能添加至没有这种功能的成像系统，并且由此实现可以在成像系统中实现的ai处理的增加的自由度。

9、问题的解决方案

10、根据本技术，提供了一种信号处理装置，包括：ai处理部，被配置为通过使用ai模型对输入图像执行ai处理；图像处理部，能够基于从外部输入的捕获图像选择性地获取不同类型的图像作为图像；控制部，被配置为基于用于指定要由图像处理部获得的图像的图像指定数据来控制图像处理部的设置，并且基于用于指定要对ai处理部设置的ai模型的ai模型指定数据来控制ai处理部的ai模型的设置；以及发送部，被配置为将指示由ai处理部执行的ai处理的结果的信息发送至外部。

11、在根据本技术如上所述配置的信号处理装置中，ai处理部对从外部输入的捕获图像执行ai处理。发送部将指示ai处理的结果的信息发送至外部。根据本技术的信号处理装置因此使不具有关于捕获图像的ai处理功能的成像系统能够用作具有ai处理功能的成像系统。因此，如上所述配置的信号处理装置使得能够基于ai模型指定数据选择性地设置要由ai处理部执行的ai处理的类型。此外，通过基于图像指定数据的指定，信号处理装置使ai处理部能够接收与要执行的ai处理所假设的输入图像条件对应的适当类型的图像的输入。

12、根据本技术，提供了一种用于由信号处理装置执行的信号处理方法，该信号处理装置包括：ai处理部，被配置为通过使用ai模型对输入图像执行ai处理；图像处理部，能够基于从外部输入的捕获图像选择性地获取不同类型的图像作为图像；以及发送部，被配置为将指示由ai处理部执行的ai处理的结果的信息发送至外部，该信号处理方法包括：使信号处理装置基于用于指定要由图像处理部获得的图像的图像指定数据来控制图像处理部的设置，并且基于用于指定要对ai处理部设置的ai模型的ai模型指定数据来控制ai处理部的ai模型的设置。

13、这种信号处理方法实现根据本技术的上述信号处理装置。

14、根据本技术，提供了一种供信号处理装置使用的数据结构，该信号处理装置包括：ai处理部，被配置为通过使用ai模型对输入图像执行ai处理；图像处理部，能够基于从外部输入的捕获图像选择性地获取不同类型的图像作为图像；以及发送部，被配置为将指示由ai处理部执行的ai处理的结果的信息发送至外部，该数据结构包括用于指定要由图像处理部获得的图像的图像指定数据以及用于指定要对ai处理部设置的ai模型的ai模型指定数据。该信号处理装置在基于图像指定数据来控制图像处理部的设置中以及在基于ai模型指定数据来控制ai处理部的ai模型的设置中使用数据结构。

15、使用具有上述结构的数据使根据本技术的上述信号处理装置能够执行其处理。

16、根据本技术，提供了一种用于生成数据的数据生成方法，该数据供信号处理装置使用，该信号处理装置包括：ai处理部，被配置为通过使用ai模型对输入图像执行ai处理；图像处理部，能够基于从外部输入的捕获图像选择性地获取不同类型的图像作为图像；以及发送部，被配置为将指示由ai处理部执行的ai处理的结果的信息发送至外部，该数据包括用于指定要由图像处理部获得的图像的图像指定数据以及用于指定要对ai处理部设置的ai模型的ai模型指定数据。

17、这种数据生成方法允许生成用于允许根据本技术的上述信号处理装置执行其处理的数据。

18、根据本技术，提供了另一种信号处理装置，包括：图像处理部，被配置为对捕获图像执行信号处理；ai处理部，被配置为使用ai模型对由图像处理部处理的捕获图像执行ai处理；接收部，被配置为从服务器装置接收用于指定由图像处理部执行的处理的内容的图像指定数据以及用于指定要对ai处理部设置的ai模型的ai模型指定数据；控制部，被配置为基于ai模型指定数据来控制ai处理部的ai模型的设置，并且基于图像指定数据来控制图像处理部的设置；以及发送部，被配置为将指示由ai处理部执行的ai处理的结果的信息发送至外部成像装置。

19、如上所述配置的信号处理装置还使不具有ai处理功能的成像装置能够用作具有ai处理功能的成像装置。此外，信号处理装置使得能够基于ai模型指定数据选择性地设置要由ai处理部执行的ai处理的类型。此外，通过基于图像指定数据的指定，信号处理装置使ai处理部能够接收与要执行的ai处理所假设的输入图像条件对应的适当类型的图像的输入。

20、根据本技术，提供了又一信号处理装置，包括：第一通信部，能够与外部成像装置通信；第二通信部，能够与外部服务器装置通信；以及ai处理部，被配置为使用ai模型执行ai处理。经由第一通信部从成像装置接收捕获图像，并且经由第二通信部从服务器装置接收ai模型。ai处理部通过使用所接收的ai模型对所接收的捕获图像执行ai处理，并且将指示由ai处理部执行的ai处理的结果的信息经由第一通信部发送至成像装置。

21、该信号处理装置使不具有ai处理功能的成像装置能够用作具有ai处理功能的成像装置。此外，这种情况下的ai处理功能可以根据服务器装置使信号处理装置接收的ai模型从一个功能切换到另一功能。