欢迎光临散文网 会员登陆 & 注册

SFFAI 98 模型架构设计专题

2021-01-20 13:47 作者:人工智能前沿讲习  | 我要投稿

会议简介

如何设计一个高性能且实用的网络架构是一项有趣且有重大意义的研究问题。本期我们邀请到了来自清华大学的丁霄汉同学,介绍他设计的一种VGG式单路极简卷积网络架构,这种架构实现简单、速度快、性能高,可以仅通过堆加数个卷积层就实现原有模型的精度提升。


讲者介绍

丁霄汉,清华大学在读博士生,导师为丁贵广副教授。主要研究方向为卷积神经网络的设计与优化。曾在CVPR,ICML,ICCV,NeurIPS等会议上作为第一作者发表论文5篇。曾获2019年百度奖学金。RepVGG是在旷视科技实习期间和张祥雨博士等人合作的工作。


会议题目

RepVGG:让VGG式极简卷积网络Great Again

会议摘要

我们提出一种VGG式单路极简卷积网络架构,一路3x3卷到底,在速度和性能上达到SOTA水平,在ImageNet上超过80%正确率。这一架构是用“结构重参数化”方法实现的,训练时模型具有多分支结构,训练完成后等价转换为单路3x3卷积架构。


会议亮点

1、提出的是一种极其简单、非常实用、速度快、性能高的通用卷积神经网络架构;

2、不用NAS,不用attention,不用各种新颖的激活函数,甚至不用分支结构,只用3x3卷积和ReLU,也能达到SOTA性能;

3、“结构重参数化”方法的实现非常简单,写成代码不过三十行。


会议时间

2021年1月24日(周日)20:00-21:00  线上直播

关注微信公众号:人工智能前沿讲习,对话框回复“SFFAI98,获取入群二维码、PPT下载、推荐论文下载


SFFAI 98 模型架构设计专题的评论 (共 条)

分享到微博请遵守国家法律