学院新闻

我院邀请清华大学张长水教授作“多模态学习”讲座

2022-06-10

6月8日下午,清华大学自动化系张长水教授应我院邀请,作题为“多模态学习”的线上学术讲座。来自院、信息学院、经管学院以及北京交通大学、中国矿业大学、太原理工大学和湘潭大学等单位校内外师生共计210余人参加了此次讲座,讲座由我院科研副院长张军国教授主持。

张长水教授从概念、任务以及面临的关键挑战三个方面对多模态学习进行了介绍,重点介绍了语言和声音的结合,视频和音频的结合,视觉和语言的相互检索,图像和文本的相互检索、描述等多模态学习任务,并对多模态学习面临的核心挑战从表示学习、特征对齐、融合翻译任务、共同学习、多模态的应用场景和多模态大模型七个方面进行了详细阐述。

张长水教授的报告引发了与会师生的热烈讨论,与会师生围绕“多模态学习核心挑战”多模态学习的逻辑性表示”和“多模态学习在监控、查找等方面的应用”等问题与张长水教授进行了充分交流。讲座结束后参会师生纷纷表示受益匪浅,进一步理解了多模态学习的内涵拓宽了学术视野与创新思维。

附:【主讲人简介】

张长水,清华大学自动化系教授、博士生导师, 1986年7月毕业于北京大学数学系,获得学士学位。1992年7月毕业于清华大学自动化系,获得博士学位。1992年7月至今在清华大学自动化系工作。主要研究方向包括机器学习、模式识别、计算视觉等方面。目前是IEEE Fellow, 计算机学会高级会员担任学术期刊IEEE Trans. on PAMI 等杂志编委在国际期刊发表论文130多篇,在顶级会议上发表论文50多篇。