一种漫画生成方法、装置、设备及存储介质与流程

本发明涉及人工智能，具体而言，涉及一种漫画生成方法、装置、设备及存储介质。

背景技术：

1、漫画作为一种重要的传播媒介，具备卓越的互动性、情感表达能力、叙事性和多样性，在常态化的宣传场景中相较于传统海报等方式具有显著优势。

2、目前漫画的绘制主要依靠漫画艺术家，如果要绘制出一幅满足宣发要求的漫画，需要各个不同领域的人才进行协同交流，这会产生大量的人力成本和时间成本，不适用于新产品的日常宣传。

技术实现思路

1、本发明解决的问题是如何降低宣发产品所需要的人力成本和时间成本。

2、为解决上述问题，本发明提供一种漫画生成方法、装置、设备及存储介质。

3、第一方面，本发明提供一种漫画生成方法，包括：

4、根据已获取的角色的信息数据生成所述角色的人物画像，并根据所述人物画像构建角色库；

5、生成漫画大纲，并根据所述漫画大纲生成窗格绘画指令；

6、根据所述角色库、所述窗格绘画指令和画风标签生成初始漫画内容；

7、根据所述初始漫画内容生成包含所述初始漫画内容中不同实体的初始实体库，其中，所述实体包括角色、场景和物品中的至少一种；

8、根据所述窗格绘画指令、所述画风标签和所述初始实体库生成后续漫画内容。

9、可选地，所述根据已获取的角色的信息数据生成所述角色的人物画像包括：

10、通过大语言模型从所述信息数据中提取与所述角色相关的人设信息，其中，所述人设信息包括所述角色的外貌特征、个性特点、服装风格和姿势偏好中的至少一种；

11、根据所述人设信息生成与所述角色对应的角色绘画指令；

12、根据所述角色绘画指令确定绘画要求和绘画风格，并根据所述绘画要求和所述绘画风格建立绘画模板；

13、从所述人设信息中提取角色描述，通过所述角色描述填充所述绘画模板以生成与所述角色对应的所述人物画像。

14、可选地，所述根据所述人物画像构建角色库包括：

15、根据所述人物画像构建人物画像仓库，其中，所述人物画像仓库指包含所述人物画像的数据库；

16、在所述人物画像仓库填充相应角色及与所述角色对应的人物画像，以构建所述角色库。

17、可选地，所述生成漫画大纲包括：

18、将所述角色的人设信息和漫画要求信息输入预设的微调大模型，根据所述微调大模型的输出生成所述漫画大纲，其中，所述漫画要求信息包括漫画主题、情感标签、所述画风标签、窗格数量和绘制目的中的至少一者，所述漫画大纲包括所述角色的选择、漫画篇幅、漫画完成剧情、每个窗格需要展现的剧情、所述漫画主题、所述情感标签和所述画风标签中的至少一者。

19、可选地，所述根据所述漫画大纲生成窗格绘画指令包括：

20、将所述漫画大纲输入预设的微调大模型，根据所述微调大模型的输出生成对应窗格的所述窗格绘画指令。

21、可选地，所述根据所述角色库、所述窗格绘画指令和画风标签生成初始漫画内容包括：

22、将所述角色库和所述窗格绘画指令输入图生图模型，根据所述画风标签确定对应的低阶适应层模块，将确定的所述低阶适应层模块与所述图生图模型连接，其中，不同的所述低阶适应层模块对应不同的所述画风标签，所述低阶适应层模块用于固定生成漫画的画风；

23、利用与所述低阶适应层模块相连接的所述图生图模型生成所述初始漫画内容。

24、可选地，所述根据所述初始漫画内容生成包含所述初始漫画内容中不同实体的初始实体库包括：

25、从所述初始漫画内容中提取实体，以构建实体仓库；

26、将所述实体仓库中的实体与所述角色库中的角色进行匹配，以构建所述初始实体库。

27、可选地，所述将所述实体仓库中的实体与所述角色库中的角色进行匹配，以构建所述初始实体库包括：

28、通过相似度匹配将所述实体仓库中的实体与所述角色库中的角色进行匹配，根据匹配结果确定所述实体仓库中的实体所对应的所述角色，将所述实体仓库中的实体与对应的所述角色关联以构建所述初始实体库。

29、可选地，所述根据所述窗格绘画指令、所述画风标签和所述初始实体库生成后续漫画内容：

30、根据所述初始实体库、第二窗格的所述窗格绘画指令和所述画风标签生成所述第二窗格的漫画内容；

31、根据所述第二窗格的漫画内容生成第二实体库，其中，所述第二实体库包括所述第二窗格的漫画内容中的各个实体以及与所述实体对应的角色；

32、根据所述第二实体库、第三窗格的所述窗格绘画指令和所述画风标签生成所述第三窗格的漫画内容，依次迭代生成后续各个窗格的漫画内容，直至得到所有窗格的漫画内容。

33、第二方面，本发明提供一种漫画生成装置，包括：

34、人物生成模块，用于根据已获取的角色的信息数据生成所述角色的人物画像，并根据所述人物画像构建角色库；

35、指令生成模块，用于生成漫画大纲，并根据所述漫画大纲生成窗格绘画指令；

36、第一漫画绘制模块，用于根据所述角色库、所述窗格绘画指令和画风标签生成初始漫画内容；

37、实体库生成模块，用于根据所述初始漫画内容生成包含所述初始漫画内容中不同实体的初始实体库，其中，所述实体包括角色、场景和物品中的至少一种；

38、第二漫画绘制模块，用于根据所述窗格绘画指令、所述画风标签和所述初始实体库生成后续漫画内容。

39、第三方面，本发明提供一种电子设备，包括存储器和处理器；

40、所述存储器，用于存储计算机程序；

41、所述处理器，用于当执行所述计算机程序时，实现如上漫画生成方法。

42、第四方面，本发明提供一种存储介质，所述存储介质上存储有计算机程序，当所述计算机程序被处理器执行时，实现如上漫画生成方法。

43、在本发明中，首先根据已获取的角色的信息数据生成角色的人物画像，并根据人物画像构建角色库，可以保证同系列漫画生成时角色外貌的一致性，然后生成漫画大纲，并根据所述漫画大纲生成窗格绘画指令，可以保证叙事的一致性，最后根据角色库、窗格绘画指令和画风标签生成初始漫画内容，并根据初始漫画内容生成初始实体库，进而可以根据窗格绘画指令、画风标签和初始实体库生成后续漫画内容，因而可以根据用户的需求端到端地自动生成用于宣传的漫画，能够显著降低宣发产品所需要的人力成本和时间成本。

技术特征：

1.一种漫画生成方法，其特征在于，包括：

2.根据权利要求1所述的漫画生成方法，其特征在于，所述根据已获取的角色的信息数据生成所述角色的人物画像包括：

3.根据权利要求2所述的漫画生成方法，其特征在于，所述根据所述人物画像构建角色库包括：

4.根据权利要求1所述的漫画生成方法，其特征在于，所述生成漫画大纲包括：

5.根据权利要求4所述的漫画生成方法，其特征在于，所述根据所述漫画大纲生成窗格绘画指令包括：

6.根据权利要求1所述的漫画生成方法，其特征在于，所述根据所述角色库、所述窗格绘画指令和画风标签生成初始漫画内容包括：

7.根据权利要求1所述的漫画生成方法，其特征在于，所述根据所述初始漫画内容生成包含所述初始漫画内容中不同实体的初始实体库包括：

8.根据权利要求7所述的漫画生成方法，其特征在于，所述将所述实体仓库中的实体与所述角色库中的角色进行匹配，以构建所述初始实体库包括：

9.根据权利要求1所述的漫画生成方法，其特征在于，所述根据所述窗格绘画指令、所述画风标签和所述初始实体库生成后续漫画内容：

10.一种漫画生成装置，其特征在于，包括：

11.一种电子设备，其特征在于，包括存储器和处理器；

12.一种存储介质，其特征在于，所述存储介质上存储有计算机程序，当所述计算机程序被处理器执行时，实现如权利要求1-9任意一项所述的漫画生成方法。

技术总结本发明提供了一种漫画生成方法、装置、设备及存储介质，涉及人工智能技术领域。本发明所述的漫画生成方法，包括：根据已获取的角色的信息数据生成角色的人物画像，并根据人物画像构建角色库；生成漫画大纲，并根据漫画大纲生成窗格绘画指令；根据所述角色库、所述窗格绘画指令和画风标签生成初始漫画内容；根据所述初始漫画内容生成包含所述初始漫画内容中不同实体的初始实体库，其中，所述实体包括角色、场景和物品中的至少一种；根据所述窗格绘画指令、所述画风标签和所述初始实体库生成后续漫画内容。本发明可以根据用户的需求端到端地自动生成用于宣传的漫画，能够显著降低宣发产品所需要的人力成本和时间成本。技术研发人员：郜怀通,郑冬,郑佳斌,程瑶,李博,蒋忠林,陈勇受保护的技术使用者：浙江吉利控股集团有限公司技术研发日：技术公布日：2024/7/29