教学资源的生成方法、装置、设备和存储介质与流程

本发明涉及人工智能，尤其涉及一种教学资源的生成方法、装置、设备和存储介质。

背景技术：

1、随着现代教育技术的发展，课堂教学已经不仅仅局限于传统的面对面教学方式。在线教育、远程教育等新型教学方式逐渐普及，使得课堂教学的内容和形式更加丰富多样。

2、目前，一些在线教育平台会提供课堂教学录制的功能，以提高学生对课堂教学内容的学习效果和掌握情况，例如，可以通过电脑等设备进行课堂教学录制。另外，为了让学生能够一目了然的了解本次课堂教学的内容，教师通常还会整理一些教学资源，例如整理或者记录课堂纪要等，学生可以通过教师整理的教学资源和电脑录制的课堂教学视频进行课堂教学的回顾。

3、然而，现在通常都是教师通过手动方式整理教学资源，使得教学资源的确定效率较低。

技术实现思路

1、本发明提供一种教学资源的生成方法、装置、设备和存储介质，用以解决现有技术中教学资源的确定效率较低的缺陷，实现提高教学资源的确定效率的目的。

2、本发明提供一种教学资源的生成方法，包括：

3、获取课堂视频；所述课堂视频包括课堂音频和课堂图像，所述课堂图像包括对教学交互终端的显示屏进行录制后得到的录制图像和基于所述教学交互终端的书写板采集的多个轨迹点序列确定的目标图像；

4、从所述课堂音频中提取与预设声纹匹配的目标声纹对应的说话人的目标音频；

5、将所述目标音频转换为第一文本，并在所述录制图像和所述目标图像中提取第一信息；

6、基于所述第一文本和所述第一信息确定教学资源，所述教学资源包括课堂纪要。

7、根据本发明提供的一种教学资源的生成方法，所述获取课堂视频，包括：

8、获取课堂教学过程对应的录制视频，所述录制视频包括所述录制图像和所述课堂音频；

9、获取基于所述书写板采集的多个轨迹点序列；

10、确定各所述轨迹点序列对应的目标图像；

11、基于所述录制视频中各所述录制图像的时间戳和各所述目标图像对应的时间戳，对所述录制视频和所述目标图像进行合成，得到所述课堂视频。

12、根据本发明提供的一种教学资源的生成方法，所述方法还包括：

13、在接收到用户针对所述课堂纪要中的例题讲解控件的第一指令的情况下，响应于所述第一指令，查找所述课堂视频中各例题对应的讲解视频；

14、针对各所述例题，输出所述例题的讲解视频，所述讲解视频中包括所述例题的解题思路对应的图像和解题思路对应的讲解音频。

15、根据本发明提供的一种教学资源的生成方法，所述方法还包括：

16、针对各所述例题，从所述目标音频中提取与所述例题相关的讲解音频，并从所述课堂图像中提取与所述例题相关的讲解图像；

17、将所述例题对应的讲解音频转换为第二文本，并从所述讲解图像中提取第二信息；

18、将所述第二文本和所述第二信息输入所述大语言模型中，得到所述大语言模型输出的所述例题的解题思路；

19、确定所述解题思路对应的图像；

20、将所述例题对应的讲解音频和所述解题思路对应的图像进行合成，得到所述例题的讲解视频。

21、根据本发明提供的一种教学资源的生成方法，所述方法还包括：

22、针对各所述例题，将所述例题对应的文本输入所述大语言模型中，得到所述大语言模型输出的所述例题的相似例题；

23、将所述相似例题对应的图像和所述解题思路对应的图像进行拼接，得到所述例题的更新后的讲解视频。

24、根据本发明提供的一种教学资源的生成方法，所述基于所述录制视频中各录制图像的时间戳和各所述目标图像对应的时间戳，对所述录制视频和所述目标图像进行合成，得到所述课堂视频，包括：

25、从所有所述目标图像中确定包含书写信息的书写图像；

26、基于所述录制视频中各录制图像的时间戳和各所述书写图像对应的时间戳，对所述录制视频和所述书写图像进行合成，得到所述课堂视频。

27、根据本发明提供的一种教学资源的生成方法，所述教学资源还包括教学文本；所述方法还包括：

28、将所述课堂音频转换为第一教学文本；

29、将所述第一教学文本输入所述大语言模型中，得到所述大语言模型输出的第二教学文本，所述第二教学文本为对所述第一教学文本进行规整后得到的文本；所述第二教学文本为在接收到用户输入的针对文本规整控件的第二指令的情况下显示的文本。

30、根据本发明提供的一种教学资源的生成方法，所述方法还包括：

31、在接收到用户触发的在所述课堂视频对应的进度条上的悬停操作的情况下，确定所述悬停操作对应的目标时刻；

32、在预设位置显示所述目标时刻对应的课堂图像，并在显示所述第一教学文本的情况下，将所述第一教学文本中所述目标时刻对应的文本进行标记。

33、根据本发明提供的一种教学资源的生成方法，所述方法还包括：

34、将所述第一教学文本输入所述大语言模型中，得到所述大语言模型输出的多个分段文本；

35、针对各所述分段文本，从所述课堂视频中提取与所述分段文本对应的课堂子视频；

36、确定所述课堂子视频的起始时刻和终止时刻；

37、在所述课堂视频对应的进度条的目标位置处显示所述分段文本，所述目标位置为用于用于表征所述课堂子视频的起始时刻和终止时刻之间的位置。

38、根据本发明提供的一种教学资源的生成方法，所述方法还包括：

39、将所述第一教学文本输入所述大语言模型中，得到所述大语言模型输出的第三教学文本，所述第三教学文本包括从所述第一教学文本中提取的提问文本和任务文本；

40、在显示所述第一教学文本的情况下，将所述提问文本和任务文本进行标记。

41、本发明还提供一种教学资源的生成装置，包括：

42、获取模块，用于获取课堂视频；所述课堂视频包括课堂音频和课堂图像，所述课堂图像包括对教学交互终端的显示屏进行录制后得到的录制图像和基于所述教学交互终端的书写板采集的多个轨迹点序列确定的目标图像；

43、提取模块，用于从所述课堂音频中提取与预设声纹匹配的目标声纹对应的说话人的目标音频；

44、转换模块，用于将所述目标音频转换为第一文本；

45、所述提取模块，还用于在所述录制图像和所述目标图像中提取第一信息；

46、确定模块，用于基于所述第一文本和所述第一信息确定教学资源，所述教学资源包括课堂纪要。

47、本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述教学资源的生成方法。

48、本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述教学资源的生成方法。

49、本发明还提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如上述任一种所述教学资源的生成方法。

50、本发明提供的教学资源的生成方法、装置、设备和存储介质，通过获取课堂视频，该课堂视频包括课堂音频和课堂图像，课堂图像包括对教学交互终端的显示屏进行录制后得到的录制图像和基于教学交互终端的书写板采集的多个轨迹点序列确定的目标图像，从课堂音频中提取与预设声纹匹配的目标声纹对应的说话人的目标音频，将目标音频转换为第一文本，并在录制图像和目标图像中提取第一信息，并基于第一文本和第一信息确定教学资源，该教学资源包括课堂纪要。由于可以基于目标音频转换后的第一文本、以及基于从录制的录制图像和教师的书写轨迹确定的目标图像中提取的第一信息，通过语义理解分析后可以自动生成教学资源，例如可以生成课堂纪要，从而避免教师通过手动方式整理教学资源的现象，提高了教学资源确定的效率。