包括相机组件的食品制备组件的制作方法

本发明涉及一种食品制备组件，该食品制备组件具有食品制备室和用于获得食品制备室内部的一个或多个图像的相机组件。本发明还涉及一种控制适用于获得食品制备组件的食品制备室内部的一个或多个图像的相机组件的方法，以及一种用于实现该方法的计算机程序。本发明还涉及一种确定关系的方法，该关系用于调整食品制备组件的食品制备室内部的一个或多个图像的图像特性。

背景技术：

1、由于繁忙的日常生活，人们在家中烹饪的时间通常非常有限。此外，许多人缺乏获得满意结果所必需的烹饪经验。因此，对能够根据用户的偏好递送所制备的食品的智能食品制备组件的需求日益增长。这样的智能食品制备组件的益处包括：用户便利性更大，使用这样的食品制备组件制备的食品的味道更好且营养价值更高，并且在使用这种食品制备组件的烹饪过程中使产生的有害物质最小化或避免产生有害物质。

2、例如通过将相机集成到厨房器具中而将相机包括在食品制备组件中，可以在智能辅助食品制备(例如，烹饪)中发挥重要作用。例如，可以通过食品图像识别来识别食品类型，并且可以基于食品图像分析结果来确定烹饪设置。相机在食品制备组件中的其他应用包括烹饪过程控制、褐变控制、远程监控、防燃烧和社交媒体共享内容。

3、由于上述益处，集成了相机的厨房器具最近已被引入市场。然而，在获得能够可靠地用于特别是食品识别、烹饪过程控制、褐变控制、远程监控和防燃烧的图像方面仍然存在各种挑战。

4、us2018/324908 a1公开了与烹饪器具相关的系统和方法，该烹饪器具具有：加热元件，该加热元件设置在烹饪室内并可操作以选择性地发射多种功率和/或峰值波长中的任何一种的波；相机，该相机可操作以捕获烹饪室的图像；以及计算设备，该计算设备可操作以向加热元件供电以改变所发射的波的功率和/或峰值波长并在烹饪室内生成热，并且指示相机在加热元件以稳定的功率和/或峰值波长发射时捕获图像。

5、wo 2016/179424 a1公开了一种连接的烤箱，包括一组腔内传感器和处理器，该处理器被配置成基于传感器测量结果自动识别烹饪腔内的食物，并基于食物标识自动操作加热元件。

技术实现思路

1、本发明由权利要求限定。

2、根据本发明的一方面的示例，提供了一种食品制备组件，该食品制备组件包括：食品制备室；相机组件，该相机组件用于获得食品制备室内部的一个或多个图像，该相机组件能够控制以调整一个或多个图像的图像特性；辐射组件，该辐射组件能够控制以采用辐射状态，在该辐射状态中，辐射组件在食品制备室内部发射包括可见光的辐射；以及一个或多个处理器，该一个或多个处理器被配置成识别辐射状态，并且控制相机组件使用用于根据识别的辐射状态来调整图像特性的预先确定的关系来调整图像特性。

3、根据辐射组件的识别的辐射状态，使用这样的预先确定的关系来调整图像特性(例如，曝光和/或白平衡)可以有助于提供相对于例如在获得图像时仅基于食品制备室内部检测到的光学条件的调整而言更快和/或更可重复的图像特性调整。

4、在一些实施例中，相机组件可以被配置成获得食品制备室的内部的图像序列，例如，构成食品制备室的内部的视频的图像序列。

5、可替代地或附加地，相机组件可以被配置成获得食品制备室的内部的静止图像。

6、通过预先识别辐射状态，并且根据辐射状态确定用于调整图像特性(例如，相机组件捕获设置和/或图像处理设置)的预先确定的关系，图像可以例如与肉眼可感知的食品配料的“真实”视图更加一致。

7、通过控制相机组件使用预先确定的关系例如调整曝光和/或白平衡从而使图像与食品配料的这种“真实”视图更加一致，可以实现更精确/可靠的食品识别、烹饪过程控制、褐变控制、熟度状态确定、远程监控和/或防燃烧。

8、在一些实施例中，辐射组件能够控制以从多种辐射状态中选择辐射状态，并且一个或多个处理器被配置成识别选择的辐射状态，其中预先确定的关系允许根据识别的选择的辐射状态来调整图像特性。

9、可以根据选择多种辐射状态中的哪一种来相应地调整图像特性。

10、在辐射组件能够控制以从多种辐射状态中选择辐射状态的实施例中，多种辐射状态可以包括：第一辐射状态；以及第二辐射状态，其中第一辐射状态在食品制备室中引起第一光学条件，并且第二辐射状态在食品制备室中引起与第一光学条件不同的第二光学条件。

11、在这样的实施例中，可以确定预先确定的关系，使得图像特性被调整以补偿第一光学条件与第二光学条件之间的差异。

12、通过补偿第一光学条件与第二光学条件之间的差异，当采用第一辐射状态时获得的图像可以与当采用第二辐射状态时获得的图像相当。

13、例如，如果光学条件包括食品制备室内部的可见光的强度，则对图像特性的调整包括对图像曝光的调整以补偿强度的差异。可替代地或附加地，如果光学条件包括食品制备室内部的光的光谱组成，则对图像特性的调整包括对图像的颜色(例如，白色)平衡的调整以补偿光谱成分的差异。

14、应注意，为避免疑义，除了上述第一辐射状态和第二辐射状态之外，多种辐射状态还可以包括另外的辐射状态，诸如第三辐射状态、第四辐射状态、第五辐射状态等。在这样的实施例中，可以确定预先确定的关系，使得图像特性被调整以补偿由选择辐射状态中的每种辐射状态引起的各个光学条件之间的差异。

15、在一些实施例中，辐射组件包括用于照亮食品制备室的内部的至少一个灯。在这样的实施例中，辐射状态包括例如至少一个灯中的每个灯的照明状态。

16、照明状态可以是例如至少一个灯中的每个灯的开/关状态。

17、可替代地或附加地，照明状态可以是由例如至少一个灯中的每个灯提供的照明强度，和/或照明状态可以是由例如至少一个灯中的每个灯提供的照明的光谱组成的度量。

18、在一些实施例中，辐射组件包括至少一个加热元件，该至少一个加热元件被布置成在食品制备室内部辐射。在这样的实施例中，辐射状态包括例如至少一个加热元件中的每个加热元件的加热状态。

19、加热状态可以是例如至少一个加热元件中的每个加热元件的开/关状态。

20、在辐射状态包括至少一个灯的照明状态和至少一个加热元件的加热状态的实施例中，照明状态可以是至少一个灯的开/关状态，其中加热状态是至少一个加热元件的开/关状态。

21、可替代地或附加地，加热状态可以是由例如至少一个加热元件中的每个加热元件提供的加热程度，和/或加热状态可以是由例如至少一个加热元件中的每个加热元件提供的辐射的光谱组成的度量。

22、该食品制备组件可以包括控制单元，该控制单元具有被布置成控制辐射组件采用辐射状态的控制配置。在这样的实施例中，一个或多个处理器被配置成基于所述控制配置来识别辐射状态。

23、因此，辐射状态可以从控制辐射组件的控制单元获得，换句话说直接获得。这可以有利地避免为了调整图像特性而感测食品制备室内部的光学条件。

24、在控制配置包括控制辐射组件的辐射状态随时间变化的控制序列的实施例中，一个或多个处理器可以被配置成控制相机组件(使用预先确定的关系)来调整图像特性，以与辐射状态的变化一致。这可以实现对图像特性的特别灵敏的调整，这在例如当相机组件被配置成在辐射状态改变期间获得图像序列(例如，视频)时可能特别有用。

25、在一些实施例中，辐射状态(例如，当辐射状态可选自多种辐射状态时的每种辐射状态)与辐射组件的功耗相关联，并且一个或多个处理器被配置成基于辐射组件的(相应的)功耗来识别辐射状态。

26、该食品制备组件可以包括用于感测辐射组件的辐射的传感器。在这样的实施例中，一个或多个处理器被配置成基于感测到的辐射来识别辐射状态。

27、以这种方式，可以根据经由传感器检测到的辐射来识别辐射状态。

28、在一些实施例中，相机组件包括图像捕获模块，并且一个或多个处理器可以被配置成根据识别的辐射状态来控制图像捕获模块的至少一个图像捕获设置以调整图像特性。

29、因此，识别的辐射状态可以用于调整图像的采集。

30、该至少一个图像捕获设置可以例如包括光圈大小、快门速度和/或灵敏度设置。

31、该食品制备组件可以包括图像处理模块，并且一个或多个处理器可以被配置成根据识别的辐射状态来控制图像处理模块的至少一个图像处理设置以调整图像特性。

32、图像处理模块可以例如被包括在相机组件、用户设备(诸如智能电话或平板电脑)和/或基于云的服务器中。

33、在这样的实施例中，识别的辐射状态用于调整图像处理模块对图像的处理。

34、至少一个处理设置可以例如包括颜色平衡设置。这样的颜色平衡设置例如可以是白平衡设置。

35、在至少一些实施例中，该食品制备组件包括或者是家用食品制备组件。例如，该食品制备组件包括家用厨房器具。

36、这样的家用厨房器具的示例包括空气炸锅、烤箱、蒸锅、高压锅和电饭煲。

37、特别提到了其中相机组件与这样的家用厨房器具成一体(换句话说，内置其中)的实施例。

38、在可替代实施例中，相机组件是食品制备组件(例如，家用食品制备组件)的可移除或可拆卸部件。可以提供进入食品制备室的窗口，并且相机组件可以被布置成例如经由窗口获得食品制备室内部的图像，以便组装食品制备组件，例如家用食品制备组件。

39、例如，相机组件以及可选的一个或多个处理器中的至少一个处理器可以被包括在与包括食品制备室和辐射组件的厨房器具分离的用户设备(诸如智能电话或平板电脑)中。可替代地或附加地，处理器可以被包括在基于云的服务器中。食品制备组件(例如，家用食品制备组件)可以通过布置相机组件来组装，以经由窗口获得食品制备室内部的图像。

40、在一些实施例中，食品制备室和辐射组件被包括在厨房器具(例如，家用厨房器具)中，并且用户设备和/或基于云的服务器中包括的处理器与厨房器具(例如，与上述控制单元)进行通信(例如，无线通信)，以便使得处理器能够识别辐射状态并控制相机组件使用预先确定的关系来调整一个或多个图像的图像特性。

41、根据另一方面，提供了一种控制相机组件的方法，该相机组件适用于获得食品制备组件的食品制备室内部的一个或多个图像，该食品制备组件还包括辐射组件，该辐射组件能够控制以采用辐射状态，在该辐射状态中，辐射组件在食品制备室内部发射包括可见光的辐射，该方法包括：识别辐射状态；以及控制相机组件使用用于根据识别的辐射状态来调整图像特性的预先确定的关系来调整一个或多个图像的图像特性。

42、该方法还可以包括操作相机组件以获得食品制备室内部的一个或多个图像。

43、可以根据获得的一个或多个图像中识别的辐射状态来调整图像特性。

44、在一些实施例中，辐射组件能够控制以从多种辐射状态中选择辐射状态，并且识别包括识别选择的辐射状态，其中预先确定的关系允许根据识别的选择的辐射状态来调整图像特性。

45、可以根据选择多种辐射状态中的哪一种来相应地调整图像特性。

46、在辐射组件能够控制以从多种辐射状态中选择辐射状态的实施例中，多种辐射状态可以包括：第一辐射状态；以及第二辐射状态，其中第一辐射状态在食品制备室中引起第一光学条件，并且第二辐射状态在食品制备室中引起与第一光学条件不同的第二光学条件。

47、在这样的实施例中，可以确定预先确定的关系，使得图像特性被调整以补偿第一光学条件与第二光学条件之间的差异。

48、在一些实施例中，辐射组件包括用于照亮食品制备室的内部的至少一个灯。在这样的实施例中，识别包括识别例如至少一个灯中的每个灯的照明状态。

49、在一些实施例中，辐射组件包括至少一个加热元件，该至少一个加热元件被布置成在食品制备室内部辐射。在这样的实施例中，识别包括识别例如至少一个加热元件中的每个加热元件的加热状态。

50、在辐射组件包括至少一个灯和至少一个加热元件的实施例中，识别可以包括识别至少一个灯的照明状态和识别至少一个加热元件的加热状态。在这样的实施例中，照明状态可以例如是至少一个灯的开/关状态，其中加热状态是至少一个加热元件的开/关状态。

51、该食品制备组件可以包括控制单元，该控制单元具有被布置成控制辐射组件采用辐射状态的控制配置。在这样的实施例中，识别可以包括基于控制配置识别辐射状态。

52、在一些实施例中，该方法包括确定辐射组件的功耗，其中识别包括基于确定的功耗来识别辐射状态。

53、该食品制备组件可以包括用于感测辐射组件的辐射的传感器。在这样的实施例中，识别可以包括基于感测到的辐射来识别辐射状态。

54、在一些实施例中，相机组件包括图像捕获模块，并且控制包括根据识别的辐射状态来控制图像捕获模块的至少一个图像捕获设置以调整图像特性。该至少一个图像捕获设置可以例如包括光圈大小、快门速度和/或灵敏度设置。

55、可替代地或附加地，该食品制备组件可以包括图像处理模块，并且该控制包括根据识别的辐射状态控制图像处理模块的至少一个图像处理设置以调整图像特性。至少一个处理设置可以例如包括颜色平衡设置。这样的颜色平衡设置例如可以是白平衡设置。

56、根据又一方面，提供了一种包括计算机程序代码的计算机程序，该计算机程序代码被配置成当所述计算机程序在食品制备组件中包括的一个或多个处理器上运行时，使所述一个或多个处理器实施根据本文所述的任一实施例的方法，该食品制备组件还包括食品制备室、用于获得食品制备室内部的一个或多个图像的相机组件以及辐射组件，这些辐射组件能够控制以采用辐射状态，在该辐射状态中，辐射组件在食品制备室内部发射包括可见光的辐射。

57、可以提供一种或多种非暂时性计算机可读介质，该非暂时性计算机可读介质具有存储在其上的计算机程序，该计算机程序包括计算机程序代码，该计算机程序代码被配置成当计算机程序在一个或多个处理器上运行时，使一个或多个处理器实现根据本文所述的任一实施例的方法。

58、一个或多个处理器可以被包括在食品制备组件中的厨房器具中、与这样的厨房器具分离的用户设备(例如，智能电话或平板电脑)中和/或基于云的服务器中。

59、根据另一方面，提供了一种确定关系的方法，该关系用于调整包括辐射组件的食品制备组件的食品制备室内部的一个或多个图像的图像特性，该一个或多个图像是使用相机组件获得的，该方法包括：识别辐射组件的至少一种辐射状态，其中在食品制备室内发射包括可见光的辐射；针对至少一种辐射状态中的每种辐射状态，测量光学条件；以及使用针对识别的至少一种辐射状态中的每种辐射状态所测量的所述光学条件来确定用于根据识别的至少一种辐射状态来调整图像特性的所述关系。

60、该方法可以用于建立/确定上述用于根据识别的辐射状态来调整图像特性的预先确定的关系。

61、更一般地，本文描述的与食品制备组件和控制相机组件的方法相关的实施例可以适用于确定关系的方法，并且本文描述的与确定关系的方法相关的实施例可以适用于食品制备组件和控制相机组件的方法。