摘要
随着信息技术的迅猛进展，人类的生活及其沟通方式经历了根本性的转变。传统上，语言是信息传播的主要手段，但现在图像、色彩、声音和手势等多种模态同样在我们日常的沟通中扮演着重要角色。这种运用多种模态传递信息的过程被称为多模态话语。自多模态话语分析这一领域问世以来，已约30年的时间，期间，这一领域已经累积了大量的研究成果。近年来，由多等模态组成的动态视频正在成为科学知识传播的一种常见方式，即科普视频。其作为易获得、可视化的科普资料，在提高全民的科学素养方面具有长期的积极作用。 目前，对其研究的数量较少，范围也较窄。针对科普视频意义建构研究较少的研究现状，本文以TED-Ed动画为例，探讨科普视频话语中的多模态符号学资源。本文以韩礼德的系统功能语法、Kress和van Leeuwen的视觉语法、van Leeuwen的听觉语法和张德禄的多模态协同理论为基础，对其进行定性和定量研究。为了保证研究的准确性，作者使用了 UAM语料库工具、ELAN和Praat软件，从语言、视觉和听觉三个模态对视频进行分析，旨在回答以下三个研究问题: 1.TED-Ed中科普视频的语言、视觉和听觉模态分别是如何构建意义的? 2.各种模态之间的关系是什么? 3.这些模态是如何共同完成视频的意义建构，并为科普的目的服务? 通过研究和分析，本文的主要发现如下: 首先，科普视频通过语言模态的概念功能、人际功能、和语篇功能来构建意义，主要目的是传递与科学主题有关的信息。视频的视觉意义的构建是通过再现意义、互动意义和构成意义来实现的，利用动态图像让抽象的科学概念和现象变得具体。同时，视频的听觉意义构成主要通过声音与听者的关系以及情态来完成，利用各种听觉资源增强受众的体验并引起对关键科学信息的关注。 其次，考虑到多模式的协同作用，音画同步成为科普视频中一个重要的视听结合手段，而恰当使用音画不同步的方法不仅体现了动态话语的特性，还能增强科普效果。语言、图像、声音等不同模态的结合并非孤立，它们相辅相成，展现出互补性，共同作用于优化科普传达效果，进而构建出视频的整体意义。 本研究验证了从系统功能语法视角解读动态多模态语篇的实用性和可行性，既扩展了系统功能语法及多模态话语分析的应用领域，也为科普视频的解析提供了新的视角。此外，本研究为观众提供了欣赏科普视频的新视角，对视频制作同样有指导意义。然而，研究中仍存在材料选择有限和分析过程主观性等限制，期待未来研究能在此基础上进一步深化和拓展。
NETL