数字叙事与多模态学术

当学术研究转向屏幕时，它可以结合文本、图像、声音、数据和互动性。多模态学术和数字叙事探讨了如何在这些混合媒体中构建论证和叙事，以及学术出版必须如何改变以适应它们。

Definition

结合数字媒体中多种交流模式的学术和叙事作品的创作与研究，以及这些形式对学术出版和评估所提出的变革要求。

Scope

涵盖结合多种模式（文本、图像、音频、视频、互动性）的学术和叙事形式：多模态学术、数字叙事，以及学术出版和同行评审为网络化、多媒体作品所做的转型。包括多模态理论以及关于如何评估和认可新形式的争论。

Core questions

• 论证和叙事如何通过文本、图像、声音和互动来构建？
• 多模态理论如何阐释意义的生成？
• 出版和同行评审如何适应多模态作品？
• 非文本学术成果应如何评估和认可？

Key concepts

• 多模态
• 数字叙事
• 学术交流
• 开放同行评审
• 模式与可供性

Key theories

多模态理论

克雷斯认为，意义的生成超越了语言，通过图像、版面、声音等多种模式实现，每种模式都有其独特的可供性，这为分析多模态学术奠定了基础。

生成性、多模态数字人文

伯迪克及其同事将数字人文描述为超越印刷专著，产生新的、设计丰富的、多模态的学术知识形式。

改革学术出版

菲茨帕特里克认为，学术出版和同行评审必须适应网络化、多模态的学术研究，以及更开放、迭代的评审模式。

History

由克雷斯（Kress）等人在社会符号学中发展起来的多模态理论，为分析混合媒体意义提供了工具。在数字人文领域，菲茨帕特里克（Fitzpatrick）的《计划性淘汰》（Planned Obsolescence, 2011）和伯迪克（Burdick）等人的《数字人文》（Digital_Humanities, 2012）主张采用新的多模态学术形式，并改革围绕这些形式的出版和评审系统。

Debates

多模态学术的认可

多模态和互动式学术作品是否以及如何在为印刷文本建立的系统中进行同行评审、保存和认可。

Key figures

• Gunther Kress
• Kathleen Fitzpatrick
• Anne Burdick
• Johanna Drucker

Seminal works

• kress2010
• burdick2012
• fitzpatrick2011

Frequently asked questions

为什么不直接将数字学术成果作为普通文章或书籍出版？

有些学术研究依赖于印刷品无法承载的互动性、媒体或数据。多模态形式保留了这些特性，但它们对传统的出版、同行评审和保存构成了挑战，这就是为什么学术交流的改革是本主题的一部分。