【线上直播】SFFAI 101 期—多模态预训练专题

讲者介绍

甘哲，微软高级研究员，主要研究方向为多模态预训练，2010年和2013年获得北京大学本科和硕士学位，2018年获得杜克大学博士学位。曾担任，或正在担任NeurIPS 2021/2020/2019, ICML 2021, ICLR 2021, AAAI 2021/2020，以及ACL 2021的领域主席。

会议题目

多模态预训练的最新进展

会议摘要

随着OpenAI CLIP和DALL-E等模型的相继出现，多模态预训练成为一个日益热门的研究方向。在本次的talk中，我将分享我们组在这个领域上最近发表在ECCV 2020和NeurIPS 2020的几个工作。我将具体讨论如下主题。第一，如何实现多模态预训练？第二，如何理解预训练模型学到了什么？第三，如何提高预训练模型的效果？对抗训练能否达到这样的目的？第四，如何评测和提高预训练模型的鲁棒性？

会议亮点

1、UNITER：如何实现多模态预训练？ECCV 2020；

2、VALUE：如何理解预训练模型学到了什么？ECCV 2020 Spotlight；

3、VILLA：如何提高预训练模型的效果？NeurIPS 2020 Spotlight；

4、MANGO：如果评测预训练模型的鲁棒性？Ongoing work (arXiv preprint) 。

直播时间

2021年4月3日（周六）11:00-12:00 线上直播

关注微信公众号：人工智能前沿讲习，对话框回复“SFFAI101”，获取入群二维码

注：直播地址会分享在交流群内