基于视频分析选择补充音频片段的制作方法

背景技术：

1、一般而言，可以利用计算装置和通信网络来交换数据或信息。在公共应用中，计算装置可以经由通信网络向另一个计算装置请求内容。例如，能够访问计算装置的客户端可以利用软件应用经由网络(例如，因特网)从服务器计算装置请求内容。在这样的实施方式中，客户端的计算装置可以被称为客户端计算装置，并且服务器计算装置可以被称为原始内容提供商。

技术实现思路

技术特征：

1.一种用于利用从一个或多个内容生成应用解联接的补充音频内容生成应用生成补充内容的方法，所述方法包括：

2.根据权利要求1所述的方法，其中，所述一个或多个内容生成应用包括生成视频帧数据的至少一个社交媒体应用。

3.根据权利要求1所述的方法，其中，所述一个或多个内容生成应用包括生成视频帧数据的至少一个视频游戏应用。

4.根据权利要求1所述的方法，其中，通过所述补充音频内容生成应用，获得由所述一个或多个内容生成应用生成的一个或多个视频帧包括：基于捕获频率获得视频数据的各个帧。

5.根据权利要求4所述的方法，其中，基于所述视频帧数据的属性，动态地修改所述捕获频率。

6.根据权利要求1所述的方法，其中，表征所述一个或多个视频帧中描绘的内容的所述属性向量包括：与所述视频帧数据中描绘的对象的主题的表征对应的一个或多个属性。

7.根据权利要求1所述的方法，其中，表征所述一个或多个视频帧中描绘的内容的所述属性向量包括：与所述视频帧数据中描绘的对象的测量进度的表征对应的一个或多个属性。

8.根据权利要求1所述的方法，其中，表征所述一个或多个视频帧中描绘的内容的所述属性向量包括：与所述视频帧数据中描绘的对象的情绪的表征对应的一个或多个属性。

9.根据权利要求1所述的方法，其中，表征所述一个或多个视频帧中描绘的内容的所述属性向量包括：与所述视频帧数据中描绘的对象的节奏的表征对应的一个或多个属性。

10.根据权利要求1所述的方法，其中，表征所述一个或多个视频帧中描绘的内容的所述属性向量包括：与视频游戏中的游戏风格或游戏意图中的至少一个的表征对应的一个或多个属性。

11.根据权利要求1所述的方法，其中，通过所述补充音频内容生成应用，基于机器学习算法处理所生成的属性向量以识别至少一个音频片段包括：识别与所生成的属性向量相关的音频轨道的片段。

12.根据权利要求1所述的方法，其中，通过所述补充音频内容生成应用，基于机器学习算法处理所生成的属性向量以识别至少一个音频片段包括：基于所生成的属性向量来适配至少一个目标片段。

13.根据权利要求1所述的方法，其中，基于所生成的属性向量来适配至少一个目标片段包括：适配播放速度。

14.根据权利要求1所述的方法，其中，基于所生成的属性向量来适配至少一个目标片段包括：适配渐淡信息。

15.根据权利要求1所述的方法，其中，基于所生成的属性向量来适配至少一个目标片段包括：组合两个或更多个音频片段。

16.根据权利要求1所述的方法，其中，基于所生成的属性向量来适配至少一个目标片段包括：基于所生成的属性向量和偏好信息来生成新的音频轨道。

17.一种补充音频内容的系统，包括：

18.根据权利要求17所述的系统，其中，所述补充音频内容生成应用基于捕获频率获得视频数据的各个帧。

19.根据权利要求17所述的系统，其中，表征所述一个或多个视频帧中描绘的内容的所述属性向量包括：与所述视频帧数据中描绘的对象的主题、所述视频帧数据中描绘的对象的测量进度、所述视频帧数据中描绘的对象的情绪、所述视频帧数据中描绘的对象的节奏、视频游戏中的游戏风格或游戏意图中的至少一个的表征对应的一个或多个属性。

20.根据权利要求17所述的系统，其中，所述补充内容应用基于所生成的属性向量来适配至少一个目标片段包括：适配播放速度、适配渐淡信息、组合两个或更多个音频片段、或基于所生成的属性向量和偏好信息来生成新的音频轨道中的至少一个。

21.一种用于利用从一个或多个内容生成应用解联接的补充音频内容生成应用生成补充内容的方法，所述方法包括：

22.根据权利要求21所述的方法，其中，通过所述补充音频内容生成应用，获得由所述一个或多个内容生成应用生成的一个或多个视频帧包括：基于捕获频率获得视频数据的各个帧。

23.根据权利要求21所述的方法，其中，表征所述一个或多个视频帧中描绘的内容的所述属性向量包括与所述视频帧数据中描绘的对象的主题、所述视频帧数据中描绘的对象的测量进度、所述视频帧数据中描绘的对象的情绪、所述视频帧数据中描绘的对象的节奏、视频游戏中的游戏风格或游戏意图中的至少一个的表征对应的一个或多个属性。

24.根据权利要求21所述的方法，其中，所述补充内容应用基于所生成的属性向量来适配至少一个目标片段包括：适配播放速度、适配渐淡信息、组合两个或更多个音频片段、或基于所生成的属性向量和偏好信息来生成新的音频轨道中的至少一个。

技术总结本申请的各方面与基于与要再现的内容相关联的处理信息来生成补充内容对应。更具体地，本申请的各方面与在视频内容的呈现期间为回放而创建的音频轨道信息(例如音乐轨道)的生成对应。示例性地，视频内容的一个或多个帧由(多个)机器学习算法处理，以生成表示表征视频内容的各个帧的一个或多个属性的处理结果。然后，选择系统可以根据处理结果识别潜在的音乐轨道或其他音频数据。技术研发人员：琳达·贝纳蒂,阿拉·贝纳蒂受保护的技术使用者：XDMIND公司技术研发日：技术公布日：2024/3/4