2017年11月24日至26日，由同济大学外国语学院主办的第一届全国多模态研究高层论坛在同济大学四平路校区召开。同济大学党委副书记马锦明、北京大学资深教授胡壮麟、外国语学院院长吴贇、党委书记李立贵以及国际多模态隐喻著名学者阿姆斯特丹大学Charles J. Forceville教授等嘉宾与会。来自全国100余所高校的近200位参会者围绕多模态话语分析、多模态语料库、多模态认知与传播研究、多模态与教育教学研究等议题进行探讨交流。

多模态研究跨越了人文社会科学与自然科学、工程技术等多个领域，具有鲜明的跨学科属性，已成为国际前沿课题。据悉，目前同济大学外国语学院在多模态领域的研究成果数量已在国内居于领先地位。为促进多模态研究在我国的发展，同济大学外国语学院主办了本次论坛，这是国内首次以多模态研究为主题的高层学术论坛，在研究方法、具体问题及涉及领域等方面为相关学者提供交流契机。

为培养我国多模态研究的青年研究队伍，本次论坛特设多模态研究方法专家讲座，辅导内容涉及多模态话语分析、多模态语料库、多模态认知与传播研究、脑电及语音分析等；同时，还特设青年讲坛，邀请了四位青年学者发表演讲。

本次大会受到了《中国社会科学报》2017年11月27日的头版报道，我校特聘教授张德禄、兼职教授顾曰国接受采访、发表观点。

附：《中国社会科学报》报道链接：

http://sscp.cssn.cn/xkpd/xszx/gn/201711/t20171127_3754851.html?from=groupmessage

中国社会科学网-中国社会科学报上海11月26日电(记者 李玉)11月25—26日,由同济大学外国语学院主办的第一届全国多模态研究高层论坛在沪召开,来自国内外的200余位专家学者围绕多模态话语分析、多模态语料库、多模态认知与传播研究、多模态与教育教学研究等议题进行探讨交流。 

　　多模态话语是运用听觉、视觉、触觉等多种感觉,通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象。中国功能语言学研究会副会长、同济大学外国语学院教授张德禄表示,人类话语越来越多模态化,多媒体和网络的产生促进了多模态话语的研究。报纸、杂志、广告、书籍、计算机界面都是多模态并存,甚至在人类交往中都离不开多模态。在一些领域,交际的主模态已经由语言转为图像或其他模态。 

　　在中国社会科学院语言研究所研究员顾曰国看来,人类的各种感官来源于大脑对周边环境所给出信号的处理,大脑将这些信号分类处理为单独的模态,又将这些单独模态融合成一个整体体验。得益于这种神奇的结合能力,人们能够在阅读一个多模态内容的文本时获得替代性体验。 

　　随着信息技术的飞速发展,人与人之间的沟通方式发生了翻天覆地的变化,新媒体在人们生活中占据着举足轻重的地位。与会学者表示,单纯对语言符号的话语研究已经不能满足人们的认知需求,多模态话语分析逐渐走进学者的研究视野,基于传统语言符号的话语研究也朝多模态话语发展。多模态话语的提出和发展也推动了话语研究走向深入。 

　　张德禄告诉记者,多模态研究兴起于20世纪90年代。当前,多模态研究主要涉及教育教学研究、话语分析研究、动态研究,以及很多应用研究领域,例如医患话语研究、失语症、精神疾病等。单纯局限于一个学科内部的创新不仅困难而且动力不足,因此需要不同学科间协同创新,多模态研究恰好提供了这样一个平台。特别在应用研究领域,多模态研究可以运用多种符号资源解决实际问题。从更广泛的角度而言,教育、艺术、外交、文化传播等都可以进行多模态研究。 

　　“多模态话语产生的根源是科技的发展,未来我们可以利用科技手段,运用不同模态使交际任务或设计任务实现最大限度、最优化的设想。”张德禄认为,当前人工智能的发展非常迅速,但如何优化人工智能的语言,使其具有态度、情感等人际交往能力,是当前人工智能面临的难题。人工智能在设计中需要考虑不同模态的协同运作。多模态研究将对人工智能的发展产生重要的促进作用。