一种基于数据识别的多媒体呈现方法及系统与流程

本发明涉及信息处理，具体而言，涉及一种基于数据识别的多媒体呈现方法及系统。

背景技术：

1、当前社会，电子化多媒体展示已成为信息传播的重要途径，覆盖了广泛的人群，从成年个体至未成年儿童，均频繁接触并依赖各类电子设备作为信息获取的媒介。诸如学龄前儿童借助电子绘本及视频播放终端进行启蒙教育、成年人则通过智能手机屏幕获取即时新闻资讯、驾驶员在行车途中利用车载娱乐系统收听广播，这些场景无不彰显出电子化多媒体终端在现代社会中的普及性。

2、在以往的电子化场景中，多媒体内容消费模式多依赖于用户的主动选择，即个人需根据兴趣偏好手动挑选音乐、影片或其他形式的数字内容。这一过程不仅包括消费者自行购买与播放心仪作品，还涉及通过具备交互功能的多媒体平台在线搜索与筛选网络资源，甚至在亲子互动中，成人需协助未成年人选取适宜其认知水平的多媒体资料。然而，这种基于主观意愿的选择机制在面对不断变化的内容需求时显得力有未逮。受限于过往经验，用户在寻求新知识时往往难以迅速定位到与当前兴趣或需求相契合的信息源，进而导致信息摄取效率低下。尤其对于低龄使用者而言，因缺乏成熟的内容甄别与选择能力，被动接受的多媒体材料很可能与其实际的信息吸收能力不对称，进一步加剧了阅读理解上的挑战，影响了信息获取的质量与效率，进而影响信息获取体验。

技术实现思路

1、本发明解决的问题是如何改善电子化场景的信息获取体验。

2、为解决上述问题，本发明提供一种基于数据识别的多媒体呈现方法，包括：

3、获取用户的特征数据和生理信息，其中，所述生理信息包括年龄信息；

4、根据所述特征数据和所述生理信息进行能力评估，获得评估结果，其中，所述特征数据用于表征得分值，所述生理信息用于衡量得分取值区间；

5、获取需求信息，判断所述需求信息与所述评估结果是否匹配；

6、当所述需求信息与所述评估结果不匹配时，通过预设策略，使所述需求信息与所述评估结果相匹配，其中，所述预设策略包括：根据所述评估结果和所述需求信息构建需求引导；根据所述需求引导获得需求修正量；根据所述需求修正量优化所述需求信息，直至优化后的所述需求信息与所述评估结果相匹配；

7、当所述需求信息与所述评估结果匹配时，根据所述需求信息确定第一呈现信息；

8、从数据库中提取与所述第一呈现信息的第一相似度大于相似度阈值的信息，作为待呈现信息；

9、判断所述用户的状态，根据所述状态更新所述待呈现信息。

10、相对于现有技术，由于用户的类别划定较复杂，且具有较多的划分角度，本发明通过根据用户的特征数据和生理信息两方面，确定用户的信息获取能力，根据特征数据确定用户的客观能力得分值，通过生理信息确定用户的客观能力区间，通过绝对的能力值和相对的能力区间结合，客观地衡量用户的信息获取能力评估结果。由于用户的主观想法和客观能力在某些情况下不匹配，通过获取主观的需求信息，判断需求信息和客观的能力评估结果是否匹配，当二者不匹配时，根据预设策略，制定需求引导，以引导用户改变需求信息，直至将需求信息与评估结果相匹配，当二者匹配后，根据需求信息确定第一呈现信息，并将与第一呈现信息较相似的信息作为待呈现信息，以在第一呈现信息呈现结束后继续呈现类似的内容，提升信息获取体验。并根据用户的状态确定向用户呈现的待呈现信息，例如，用户较为疲劳时，推送较为轻松的信息，以进一步增加信息获取体验。

11、可选地，所述数据库包括本地数据库和云数据库，所述从数据库中提取与所述第一呈现信息的第一相似度大于相似度阈值的信息，作为待呈现信息包括：

12、从所述本地数据库中提取目标信息，作为所述待呈现信息，其中，所述目标信息包括与所述第一呈现信息之间的所述第一相似度大于所述相似度阈值的信息；

13、当所述本地数据库中不存在所述目标信息时，从所述云数据库中提取所述目标信息作为所述待呈现信息；

14、当所述云数据库中不存在所述目标信息时，通过大语言模型生成所述目标信息对应的所述待呈现信息。

15、可选地，所述当所述需求信息与所述评估结果匹配时，根据所述需求信息确定第一呈现信息包括：

16、当所述需求信息为非文本类信息时，转换所述需求信息的模态至文本类模态；

17、通过文本分类模型处理所述需求信息，获得所述需求信息的一级类别；

18、根据所述需求信息的语义，确定所述一级类别下，与所述需求信息的所述语义之间的第二相似度大于所述相似度阈值的信息作为第二呈现信息；

19、通过大语言模型比较所述第二呈现信息和所述需求信息之间的所述第二相似度，当所述第二相似度小于或等于所述相似度阈值时，根据所述第二相似度构建损失函数；

20、根据所述损失函数优化所述文本分类模型，根据所述损失函数优化所述大语言模型的语义提示文本直至所述第二呈现信息和所述需求信息之间的所述第二相似度大于所述相似度阈值。

21、可选地，所述根据所述特征数据和所述生理信息进行能力评估，获得评估结果包括：

22、建立所述年龄信息和多媒体模态之间的映射表，根据所述年龄信息确定能力评估的多媒体模态出现概率，其中，所述多媒体模态包括音频、视频、文本和图像中的至少一种；

23、基于所述出现概率呈现至少一种所述多媒体模态的信息，根据所述多媒体模态的信息对所述用户进行能力评估，获得评估结果，其中，所述能力评估包括阅读量评估、注意力集中时长评估和兴趣内容评估。

24、可选地，所述获取需求信息，判断所述需求信息与所述评估结果是否匹配包括：

25、构建评估结果量化提示文本，通过大语言模型处理所述评估结果量化提示文本和所述评估结果获得评估量化得分；

26、构建需求信息量化提示文本，通过所述大语言模型处理所述需求信息量化提示文本和所述需求信息获得需求量化得分，其中，所述需求量化得分用于评估：根据所述需求信息呈现的内容的难易程度；

27、根据所述评估量化得分和所述需求量化得分的差值确定是否匹配。

28、可选地，所述根据所述评估结果和所述需求信息构建需求引导包括：

29、根据所述评估结果确定所述第一呈现信息的评估模态类型、评估时长和评估难易度；

30、确定所述需求信息所需要的需求模态类型、需求时长和需求难易度；

31、根据所述评估模态类型、所述评估时长、所述评估难易度、所述需求模态类型、所述需求时长和所述需求难易度构建所述需求引导。

32、可选地，所述根据所述需求引导获得需求修正量包括：

33、所述需求修正量表示为：

34、，

35、其中，g表示所述需求修正量，和分别表示评估和需求部分的权重，表示所述评估难易度的权重，表示评估模态类型权重，表示所述评估模态类型，表示评估时长权重，表示所述评估时长，表示评估难易度权重，表示所述评估难易度，表示需求模态类型权重，表示所述需求模态类型，表示需求时长权重，表示所述需求时长，表示需求难易度权重，表示所述需求难易度；

36、所述根据所述需求修正量优化所述需求信息包括：根据所述需求修正量重新确定所述需求信息，以匹配所述用户的自身能力。

37、可选地，所述判断所述用户的状态，根据所述状态更新所述待呈现信息包括：

38、根据所述评估结果确定所述用户的注意力集中时长；

39、判断所述用户的使用时长是否超过所述注意力集中时长；

40、若否，则判断所述待呈现信息的预计呈现时长；

41、当所述预计呈现时长和所述使用时长之和大于所述注意力集中时长时，从所述数据库中提取所述预计呈现时长和所述使用时长之和小于或等于所述注意力集中时长的所述待呈现信息进行呈现；

42、当所述预计呈现时长和所述使用时长之和小于或等于所述注意力集中时长时，将所述待呈现信息进行呈现。

43、可选地，所述判断所述用户的状态，根据所述状态更新所述待呈现信息还包括：

44、判断所述用户的使用时长和注意力集中时长之间的比值；

45、当所述比值大于第一预设比值时，判断所述待呈现信息和所述第一呈现信息的模态是否一致；

46、若一致，则按照预设提取顺序，从所述数据库中提取另一个模态的所述待呈现信息进行呈现。

47、第二方面，本发明还提供一种基于数据识别的多媒体呈现系统，包括：

48、获取模块，用于获取用户的特征数据和生理信息，其中，所述生理信息包括年龄信息；

49、评估模块，用于根据所述特征数据和所述生理信息进行能力评估，获得评估结果，其中，所述特征数据用于表征得分值，所述生理信息用于衡量得分取值区间；

50、判断模块，用于获取需求信息，判断所述需求信息与所述评估结果是否匹配；

51、引导模块，用于当所述需求信息与所述评估结果不匹配时，通过预设策略，使所述需求信息与所述评估结果相匹配，其中，所述预设策略包括：根据所述评估结果和所述需求信息构建需求引导；根据所述需求引导获得需求修正量；根据所述需求修正量优化所述需求信息，直至优化后的所述需求信息与所述评估结果相匹配；

52、呈现模块，用于当所述需求信息与所述评估结果匹配时，根据所述需求信息确定第一呈现信息；

53、提取模块，用于从数据库中提取与所述第一呈现信息的第一相似度大于相似度阈值的信息，作为待呈现信息；

54、预加载模块，用于判断所述用户的状态，根据所述状态更新所述待呈现信息。