查看原文
其他

网络教学视频如何设计字幕?

刘晓斌 技术与教育 2023-03-09


前  言


本文介绍的是利用眼动仪来探究三种字幕呈现方式之间区别的一项研究。眼动仪是心理学基础研究的重要仪器,用于记录人在处理视觉信息时的眼动轨迹特征,广泛用于注意、视知觉、阅读等领域的研究。由于多模态的研究涉及各种感官符号,特别是多种视觉符号的组合,如画面与字幕的各种组合形式等,因此近年来不少学者开始把眼动仪引入多模态相关的研究中。本文底部列出本公众号发表过的关于多模态研究的系列文章。

  背  景 




眼动仪技术


  1. 眼动仪及其原理
    眼动仪是一种能够跟踪测量眼球位置及眼球运动信息的一种设备。它通过测量眼睛的注视点的位置或者眼球相对头部的运动而实现对眼球运动的追踪。眼动的本质是人注意力资源的主动或被动分配,选择更有用或吸引力的信息。

  2. 眼动仪的常用指标:
    注视:超过100毫秒,认知加工。
    眼跳:注视点或注视方向发生改变,获取时空信息,无认知加工。
    追随运动:眼球追随物体移动,有认知加工。
  3. 如何解读眼动仪的基础数据?
    眼动轨迹:眼动仪可以测试出用户的视线在网页上移动的轨迹和关注的重点部位,可以帮助研究者对页面设计进行改进。如通过以下两张广告图片的眼动轨迹可以看出,第二张图片更容易让观众关注广告的内容。
    图1、2   用眼动轨迹研究观众注意力的变化

    热点图:主要用来反映用户浏览和注视的情况。红色代表浏览和注视最集中的区域,黄色和绿色代表目光注视较少的区域。如图 3 显示两张图片的关注点截然不同。

    图3   用热点图呈现的广告注视区域


多模态


Kress & VanLeeuwen(2001)认为多模态(Multimodality) 是运用多种符号(语音、图像、图表等)综合表达相同意义,符号之间相互增强或补充信息。随着现代化信息技术的高速发展,学习者利用图、文、声、像等多模态资源进行学习已经成为了当前学习的主要形式,以频作为核心呈现方式的新型网络学习资源更是数不胜数。


过 程




实验目的


本研究题为“网络教学视频字幕设计的眼动实验研究”,于2016年发表于国内的《现代教育技术》期刊,作者是天津师范大学王雪、王志军、候岸泽。为了探究适当的网络教学视频字幕设计方法,该研究使用了眼动仪实时记录学习者观看教学视频时的视觉认知过程,并对学习者的学习效果进行测试,通过数据分析推导结论。本实验旨在探究不同知识类型的网络教学视频中不同的字幕设计对学习者视觉认知过程的影响。


研究方法


该实验采用 3(字幕设计,被试间变量)×2(知识类型,被试内变量)的两因素混合实验设计:

  1. 自变量包括字幕设计(无字幕、全字幕、概要字幕)和知识类型(陈述性知识、程序性知识)。陈述性知识是指关于事实“是什么”的知识,主要说明事物、情况是怎样的,是对事实、规则、定义、原理等的描述;程序性知识则是关于怎样完成某项活动的知识,比如怎样进行推理、决策或解决某项问题等。
  2. 因变量包括眼动指标(总注视次数、平均注视点持续时间、总注视时间、注视热点)和学习效果(保持测试成绩、迁移测试成绩)。
  3. 无关变量为被试的先前知识水平。


眼动仪在研究中的使用


为了探究被试对不同字幕设计的视觉认知情况的影响,作者选择了使用眼动仪,通过注意力的变化探究学生心理认知的情况。主要分为眼动指标分析和注视热点分析,如下所示:1.  眼动指标分析首先,作者把视频分成了视频区和字幕区。其次,作者在众多眼动指标中根据研究问题选择了三个指标:总注视次数,平均注视点持续时间,总注视时间。总注视次数和时间就是对学生看不同兴趣区的时长和次数,而平均注视点持续时间则说明了被测在两个区域内转换视线的情况。接着,作者对眼动仪收集的数据进行分析。结果发现,学生对字幕的关注时间和次数增加了,相应的学生关注视频区的时间和次数就下降了。字幕确实吸引了学生的注意力。而平均注视点持续时间的变化则说明,字幕文字越多,学生在两个兴趣区切换的次数就越多。
2.  注视热点

再者,依据眼动仪的特性,作者又进一步关注了两种知识类型的视频注视热点,如图4-5。其作用就是以可视化的形式来观察出学习者对不同信息的加工和学习的倾向度。由此,作者得出的结论是:学习者以视频信息加工为主、文字信息加工为辅,进行陈述性和程序性知识的学习。

图4  陈述性知识视频注视热点(从左至右依次为无字幕、全字幕、概要字幕)

图5   程序性知识视频注视热点(从左至右依次为无字幕、全字幕、概要字幕)

结  论



陈述性教学视频应该配上全字幕。与解说词一致的全字幕能帮助学习者获得更 多的学习数量,当讲解到重难点知识时才出现的概要性字幕则会帮助学习者取得更好的学习质 量。

程序性教学视频应该配上概要性字幕。概要性字幕能帮助学习者取得更多的学习数量和更好的学习质量,同时应该避免添加全字幕,因为会对学习者的学习产生干扰作用。

延  伸



本公众号关于多模态研究的其他文章如下,欢迎点击阅读:





             The End           



特别说明


  本文作者为华南师范大学外文学院英语学科教学硕士生课程《外语信息化教学与研究》2019级第 5 学习小组同学:欧颖洁马立舒婷郑伟森周煦能殷琴,经刘晓斌修改。所得赞赏将在期末全部奖励给该小组同学,欢迎读者支持鼓励。

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存