目标中文海报生成方法、装置、计算机设备及存储介质与流程
- 国知局
- 2024-07-31 23:23:41
本发明涉及图像处理,尤其涉及一种目标中文海报生成方法、装置、计算机设备及存储介质。
背景技术:
1、在互联网商业服务中,艺术海报的影响是网络影响的一个重要手段,海报作为一种直观的信息载体可用于宣传和传播企业产品的相关信息,达到提高产品吸引力的目的。
2、由于目标中文海报字符的复杂性,现有的机器学习算法难以生成具有视觉吸引力的背景和中文文本的中文艺术海报, 因而传统的目标中文海报生成方式通常依赖于人工生成,例如设计师人工选取海报的海报背景图、在海报中进行产品图像、文本布局,并手动修改海报的文本样式。
3、传统的目标中文海报生成需要投入大量的人工时间,使得目标中文海报生成效率较低,且目标中文海报的效果设计依赖于设计师经验,难以满足市场上快速增长的高质量目标中文海报需求,导致信息传播的效率低。因此,亟需一种根据用户输入的提示文本自动创建目标中文海报的方式,能够兼顾目标中文海报的生成效率和质量,以提高目标中文海报的信息传播效率。
技术实现思路
1、本发明提供一种目标中文海报生成方法、装置、计算机设备及存储介质,以解决传统人工生成目标中文海报的方式,海报生成效率较低且目标中文海报质量不佳,导致信息传播的效率不佳的问题。
2、提供一种目标中文海报生成方法,包括:
3、采用大语言模型对用户输入的海报提示文本进行识别分类,得到背景描述文本和展示中文文本;
4、采用文本至图像模型对背景描述文本进行图像生成,得到海报背景图;
5、基于海报背景图和展示中文文本,采用预设中文布局模型在海报背景图中进行文本布局,得到展示中文文本的中文布局信息,预设中文布局模型是对生成对抗网络进行改进后,基于多个中文样本海报训练得到的神经网络模型;
6、基于中文布局信息、展示中文文本和海报背景图进行海报生成,得到目标中文海报。
7、可选地,基于海报背景图和展示中文文本,采用预设中文布局模型在海报背景图中进行文本布局,得到展示中文文本的中文布局信息,包括:
8、对展示中文文本进行属性信息提取,得到展示中文文本的文本属性信息;
9、基于海报背景图和文本属性信息,采用预设中文布局模型对展示中文文本在海报背景图的布局位置进行预测,得到中文布局信息。
10、可选地,对展示中文文本进行属性信息提取,得到展示中文文本的文本属性信息,包括:
11、确定展示中文文本中包含的中文文本行的数量,得到展示中文文本的文本行数量;
12、根据中文文本行的字符情况,确定中文文本行的长宽比例,得到中文文本行的文本行尺寸比例,文本属性信息包括展示中文文本的文本行数量、文本行尺寸比例。
13、可选地,预设中文布局模型包括文本属性编码层、图像编码层、融合层、生成层和识别层,基于海报背景图和文本属性信息,采用预设中文布局模型对展示中文文本在海报背景图的布局位置进行预测,得到中文布局信息,包括:
14、通过文本属性编码层对文本属性信息进行编码,得到展示中文文本的属性编码向量,并通过图像编码层对海报背景图进行编码,得到海报背景图的图像编码向量;
15、通过融合层对属性编码向量和图像编码向量进行融合,得到目标融合向量,并通过生成层对目标融合向量进行文本布局预测和图像生成,得到中文布局图像;
16、通过识别层对中文布局图像进行文本位置识别,得到展示中文文本的中文布局信息。
17、可选地,文本属性信息包括展示中文文本的文本行数量、文本行尺寸比例,属性编码向量包括文本行数量向量和尺寸比例向量,通过文本编码层对文本属性信息进行编码,得到展示中文文本的属性编码向量,包括:
18、通过文本编码层的数量编码器对文本行数量进行数量编码,得到文本行数量向量;
19、通过文本编码层的比例编码器对文本行尺寸比例进行比例编码,得到尺寸比例向量。
20、可选地,基于中文布局信息、展示中文文本和海报背景图进行海报生成,得到目标中文海报,包括:
21、采用预设风格迁移模型,基于海报背景图对展示中文文本进行风格迁移和图形转换,生成展示中文文本的目标中文图形;
22、基于中文布局信息,对目标中文图形和海报背景图进行融合处理,得到目标中文海报。
23、可选地,预设中文布局模型通过如下方式训练得到:
24、获取多个中文样本海报,并分别对多个中文样本海报进行预处理,得到各中文样本海报的背景样本图、中文样本文本,以及中文样本文本在背景样本图的标准布局位置;
25、将中文样本海报的背景样本图和中文样本文本的标准属性信息,输入预训练网络中进行文本布局预测,得到中文样本文本在背景样本图的预测布局位置,预训练网络是在生成对抗网络中增加了文本属性编码层后得到的神经网络;
26、根据预测布局位置和标准布局位置,确定总损失值;
27、当总损失值未满足收敛条件时,继续依据多个中文样本海报迭代预训练网络的参数,直至总损失值满足收敛条件时,确定预训练网络收敛,并输出收敛的预训练网络为预设中文布局模型。
28、提供一种目标中文海报生成装置,包括:
29、文本识别模块,用于采用大语言模型对用户输入的海报提示文本进行识别分类,得到背景描述文本和展示中文文本;
30、图像生成模块,用于采用文本至图像模型对背景描述文本进行图像生成,得到海报背景图;
31、中文布局模块,用于基于海报背景图和展示中文文本,采用预设中文布局模型在海报背景图中进行文本布局,得到展示中文文本的中文布局信息,预设中文布局模型是对生成对抗网络进行改进后,基于多个中文样本海报训练得到的神经网络模型;
32、海报生成模块,用于基于中文布局信息、展示中文文本和海报背景图进行海报生成,得到目标中文海报。
33、提供一种计算机设备,包括存储器、处理器以及存储在存储器中并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上市目标中文海报生成方法的步骤。
34、提供一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时实现上述目标中文海报生成方法的步骤。
35、上述目标中文海报生成方法、装置、计算机设备及存储介质所提供的一个方案中,采用大语言模型对用户输入的海报提示文本进行识别分类,得到背景描述文本和展示中文文本,并采用文本至图像模型对背景描述文本进行图像生成,得到海报背景图;基于海报背景图和展示中文文本,采用预设中文布局模型在海报背景图中进行文本布局,得到展示中文文本的中文布局信息,预设中文布局模型是对生成对抗网络进行改进后,基于多个中文样本海报训练得到的神经网络模型;基于中文布局信息、展示中文文本和海报背景图进行海报生成,得到目标中文海报。本实施例中,利用大语言模型直接对用户输入的海报提示文本进行识别,进而基于文本识别结果生成海报背景图,并基于改进的生成对抗网络生成更为准确的中文布局信息,从而能够快速、智能地融合得到高质量的目标中文海报,无需人工介入,有效提高了目标中文海报的生成效率和目标中文海报质量,进而提高了通过目标中文海报图像传播信息的效率。
本文地址:https://www.jishuxx.com/zhuanli/20240730/197338.html
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 YYfuon@163.com 举报,一经查实,本站将立刻删除。
下一篇
返回列表