一种基于AIGC技术将歌曲融入戏曲唱腔方法和系统与流程
- 国知局
- 2024-06-21 11:36:40
本申请属于音乐,涉及一种基于aigc技术将歌曲融入戏曲唱腔方法和系统。
背景技术:
1、中国戏曲作为中国传统文化的重要组成部分,具有悠久的历史和丰富的艺术表现形式。在如今,中国的流行音乐不断融入中国戏曲的腔调,创作了许多优质的歌曲,例如《卷珠帘》、《北京一夜》、《千里之外》等。中国戏曲的腔调非常复杂。即使是同一句唱词、同一个曲调,只要有音量、节奏或吐字上的一丝不同,表情达意的效果就有不可思议的变化。而人类演员根据自己的嗓音特质做出各自的“微调”,也正是戏曲众多艺术风格和流派的重要发端。
2、然而,在流行音乐与戏曲唱腔融合方面,现有技术存在依赖于人工操作,需要专业的音乐人进行音频剪辑和混音。由于传统音乐与戏曲唱腔融合需要专业的音乐人进行操作,人工成本较高,难以满足大规模、多样化的需求。
3、另一方面,随着科技的不断发展,人工智能技术在各个领域都取得了显著的成果。aigc(artificial intelligence generated content)技术作为一种新兴的人工智能技术,已经在文本、图像和视频等内容生成方面展现出了强大的潜力。aigc技术通过深度学习和自然语言处理等技术手段,实现了对大量数据的学习和理解,从而能够生成具有高度创造性和个性化的内容。
4、aigc技术可以通过对大量戏曲唱腔数据的学习,提取出各种唱腔的特征和规律。这些特征和规律可以帮助系统更好地理解传统与戏曲唱腔的特点,为后续的融合提供基础。通过对不同唱腔特征的分析,自动地将传统唱腔与戏曲唱腔进行融合,生成具有独特风格的新型唱腔。这种融合过程不仅可以保留戏曲唱腔的特点,还可以创造出全新的艺术效果。
5、因此,目前缺少一种基于aigc技术将歌曲融入戏曲唱腔方法。
技术实现思路
1、为了对披露的实施例的一些方面有基本的理解,下面给出了简单的概括。所述概括不是泛泛评述,也不是要确定关键/重要组成元素或描绘这些实施例的保护范围,而是作为后面的详细说明的序言。
2、为了解决相关技术中存在的问题,本公开实施例提供了基于aigc技术将歌曲融入戏曲唱腔方法和系统,用以解决现有技术中使用人工成本过高的问题。
3、在一些实施例中,提供了一种基于aigc技术将歌曲融入戏曲唱腔方法,包括:
4、收集戏曲唱腔歌曲;
5、对戏曲唱腔歌曲进行特征提取,得到戏曲唱腔歌曲的特征标识;
6、将戏曲唱腔歌曲的特征标识和戏曲唱腔歌曲作为输入,基于aigc技术训练唱腔融合模型;
7、将目标歌曲输入唱腔融合模型,得到目标歌曲的新型唱腔。
8、优选的,对戏曲唱腔歌曲进行特征提取,得到戏曲唱腔歌曲的特征,包括:
9、对戏曲唱腔歌曲进行降噪处理;
10、对戏曲唱腔歌曲的音频信号进行频谱分析,获取频谱的特征标识;
11、对戏曲唱腔歌曲的音频信号使用梅尔频率倒谱系数mfcc提取,捕捉音频信号的频率分布;
12、对戏曲唱腔歌曲进行高音、低音和颤音的特征提取。
13、优选的,降噪处理的公式,包括:
14、
15、其中,是估计的信号的谱,是原始音频信号的谱,是估计的噪声的谱,α是谱减参数,用于调整降噪的强度,为修正的估计信号的谱,确保谱不会变得负数;是降噪后的信号的频谱。
16、优选的,对戏曲唱腔歌曲的音频信号进行频谱分析,获取频谱的特征标识,包括:
17、对戏曲唱腔歌曲的音频信号进行频谱分析,使用短时傅里叶变换stft公式,将音频信号转换为频谱表示,通过stft将音频信号分解为时域和频域的成分。
18、优选的,梅尔频率倒谱系数mfcc提取的公式为为最终的梅尔频率倒谱系数。
19、优选的,将戏曲唱腔歌曲的特征标识和戏曲唱腔歌曲作为输入,基于aigc技术训练唱腔融合模型,包括:
20、戏曲唱腔歌曲的特征标识和戏曲唱腔歌曲作为输入,构建训练数据集;
21、对训练数据集使用pytorch深度学习框架,结合lstm和transformer的架构构建唱腔融合模型;
22、设置调整损失函数和生成器,进行训练唱腔融合模型。
23、优选的,所述将戏曲唱腔歌曲的特征标识和戏曲唱腔歌曲作为输入,基于aigc技术训练唱腔融合模型,还包括:
24、通过频谱分析和音质分析对唱腔融合模型进行优化。
25、优选的,在对戏曲唱腔歌曲进行特征提取,得到戏曲唱腔歌曲的特征标识之前,还包括:
26、对戏曲唱腔歌曲进行预处理,其中,所述预处理包括:
27、分割、清洗、增强和数据标注中的任意一项或者多项,所述数据标注内容为时长、音高、情感表达、音频质量标注、节奏速度和音频源中的任意一项或者多项。
28、优选的,所述唱腔融合模型被设置云端。
29、在一些实施例中,公开了一种基于aigc技术将歌曲融入戏曲唱腔系统,包括:
30、收集戏曲唱腔歌曲模块,用于收集戏曲唱腔歌曲;
31、特征提取模块,用于对戏曲唱腔歌曲进行特征提取,得到戏曲唱腔歌曲的特征标识;
32、训练唱腔融合模型模块,用于将戏曲唱腔歌曲的特征标识和戏曲唱腔歌曲作为输入,基于aigc技术训练唱腔融合模型;
33、生成新型唱腔模块,用于将目标歌曲输入唱腔融合模型,得到目标歌曲的新型唱腔。
34、本公开实施例提供的一种基于aigc技术将歌曲融入戏曲唱腔方法和系统,与传统的手动融合方法相比,本发明具有以下优点:
35、自动化程度高,能够自动采集、提取特征和生成融合规则,减少了人工操作的需求。
36、效率高,通过aigc技术和预设的融合规则,可以实现快速、高效的多戏曲唱腔融合处理。
37、更加自然流畅,本发明考虑了不同戏曲唱腔之间的风格差异和音调差异,通过合理的特征提取和融合处理方式,使得融合后的音频更加自然流畅。
38、可定制性强,用户可以根据需求和目标调整融合规则,实现个性化的多戏曲唱腔融合效果。
39、本发明提供了一种基于aigc技术将歌曲融入戏曲唱腔方法和系统,能够自动、高效地将多个戏曲唱腔进行融合处理,并保持融合后音频的自然度和流畅性。在音乐创作、戏曲表演等领域具有广泛的应用前景。
40、以上的总体描述和下文中的描述仅是示例性和解释性的,不用于限制本申请。
技术特征:1.一种基于aigc技术将歌曲融入戏曲唱腔方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,对戏曲唱腔歌曲进行特征提取,得到戏曲唱腔歌曲的特征,包括:
3.根据权利要求2所述的方法,其特征在于,降噪处理的公式,包括:
4.根据权利要求3所述的方法,其特征在于,对戏曲唱腔歌曲的音频信号进行频谱分析,获取频谱的特征标识,包括:
5.根据权利要求4所述的方法,其特征在于,梅尔频率倒谱系数mfcc提取的公式为为最终的梅尔频率倒谱系数。
6.根据权利要求1所述的方法,其特征在于,将戏曲唱腔歌曲的特征标识和戏曲唱腔歌曲作为输入,基于aigc技术训练唱腔融合模型,包括:
7.根据权利要求6所述的方法,其特征在于,所述将戏曲唱腔歌曲的特征标识和戏曲唱腔歌曲作为输入,基于aigc技术训练唱腔融合模型,还包括:
8.根据权利要求1所述的方法,其特征在于,在对戏曲唱腔歌曲进行特征提取,得到戏曲唱腔歌曲的特征标识之前,还包括:
9.根据权利要求1所述的方法,其特征在于,所述唱腔融合模型被设置云端。
10.一种基于aigc技术将歌曲融入戏曲唱腔系统,其特征在于,所述系统,包括:
技术总结本申请涉及音乐技术领域,公开了一种基于AIGC技术将歌曲融入戏曲唱腔方法和系统,所述方法包括:收集戏曲唱腔歌曲;对戏曲唱腔歌曲进行特征提取,得到戏曲唱腔歌曲的特征标识;将戏曲唱腔歌曲的特征标识和戏曲唱腔歌曲作为输入,基于AIGC技术训练唱腔融合模型;将目标歌曲输入唱腔融合模型,得到目标歌曲的新型唱腔。本申请对戏曲唱腔歌曲进行特征提取,得到戏曲唱腔歌曲的特征标识;将戏曲唱腔歌曲的特征标识和戏曲唱腔歌曲作为输入,基于AIGC技术训练唱腔融合模型,将目标歌曲输入唱腔融合模型,得到目标歌曲的新型唱腔。因此,本申请能够自动将目标歌曲融入戏曲唱腔。技术研发人员:张雄飞,吴蕾受保护的技术使用者:北京华录新媒信息技术有限公司技术研发日:技术公布日:2024/3/17本文地址:https://www.jishuxx.com/zhuanli/20240618/22391.html
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 YYfuon@163.com 举报,一经查实,本站将立刻删除。
下一篇
返回列表